Esri
Sr. Data Developer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Senior Data Developer в Esri для проектирования, миграции и оптимизации решений корпоративного хранилища данных на Microsoft Fabric. Роль предполагает построение слоёв данных bronze/silver/gold и поддержку аналитики и BI.
Задачи
- Проектировать и реализовывать эффективные и поддерживаемые решения данных на основе звездообразной модели с использованием Microsoft Fabric Lakehouse, Warehouse, Data Factory pipelines, PySpark notebooks, Delta parquet и OneLake
- Разрабатывать и поддерживать структуры данных слоёв bronze, silver и gold для корпоративного управления данными, отчётности, аналитики и BI
- Взаимодействовать с архитекторами данных, DBA, BI-разработчиками, аналитиками и бизнес-заказчиками для понимания источников, бизнес-правил, моделей данных и приоритетов миграции
- Внедрять проверки качества данных, процессы сверки, логирование, обработку ошибок, алертинг и операционный мониторинг мигрированных процессов
- Оптимизировать нагрузки Fabric по производительности, масштабируемости, экономичности, поддерживаемости и надёжности
- Защищать чувствительные данные и учётные данные в соответствии с политиками компании и требованиями governance
- Создавать и поддерживать техническую документацию, runbooks миграции, заметки о data lineage, спецификации маппинга и руководства по поддержке
- Участвовать в code review, design review, планировании спринтов, тестировании, деплоях и поддержке production
- Помогать определять лучшие практики, переиспользуемые паттерны и стандарты для будущих миграций с SQL Server на Microsoft Fabric
- Поддерживать production хранилище данных и нагрузки Fabric, устранять проблемы и помогать другим проектным командам
Требования
- 5+ лет опыта проектирования, разработки и поддержки корпоративного хранилища данных, интеграции данных или BI-решений
- Опыт с Microsoft Fabric, Azure Synapse, Azure Data Lake, Databricks, Spark или другими современными облачными платформами данных
- Опыт разработки ETL/ELT процессов с помощью SSIS, Azure Data Factory, Fabric Data Factory, Synapse pipelines или аналогичных платформ
- Сильный опыт с Microsoft SQL Server: продвинутый T-SQL, хранимые процедуры, представления, функции, индексы, оптимизация запросов и реляционное моделирование
- Умение анализировать сложные процессы данных, документировать бизнес-правила, оценивать зависимости и переносить legacy-логику в современные паттерны data engineering
- Практический опыт с концепциями хранилищ данных, размерным моделированием, таблицами фактов и измерений, slowly changing dimensions и историческим трекингом
- Владение SQL и как минимум одним дополнительным языком или фреймворком: Python, PySpark, C#, .NET, R или Scala
- Знакомство с lakehouse-архитектурой, medallion-архитектурой, Delta tables, parquet, data pipelines, notebooks и облачным хранением
- Понимание валидации данных, сверки, качества данных, управления метаданными, логирования, мониторинга и практик production-поддержки
- Знание практик безопасности, управления учётными данными, контроля доступа, шифрования и governance для корпоративных платформ данных
- Сильные коммуникативные навыки и умение работать как самостоятельно, так и в команде
- Степень бакалавра в computer science, информационных системах, data engineering, аналитике или смежной STEM-области
Условия
- Конкурентная стратегия вознаграждения: медицинская, стоматологическая и vision-страховка, страхование жизни для сотрудников и их семей
- Программы 401(k) и участия в прибыли
- Минимум 80 часов отпуска и двенадцать оплачиваемых праздничных дней в году
- Возможности личного и профессионального роста
- Базовая зарплата в диапазоне $96,408—$166,920 USD
- Формат работы: офис (LI-onsite)
Навыки
- Microsoft Fabric
- Azure Synapse
- Azure Data Lake
- Databricks
- Spark
- SSIS
- Azure Data Factory
- Fabric Data Factory
- Synapse pipelines
- Microsoft SQL Server
- T-SQL
- SQL
- Python
- PySpark
- C#
- .NET
- R
- Scala
- Delta Lake
- parquet
- OneLake
- Power BI
- Git
- Azure DevOps
- CI/CD
- Scrum
- SAFe
- DevOps