Commit

Senior Data Engineer (GCP)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Engineer в растущий отдел Data Engineering and Analytics. Проектирование и разработка продвинутых data-решений для сложных клиентских окружений с фокусом на Google Cloud Platform и современные GCP-технологии работы с данными.

Задачи

  • Проектировать и разрабатывать масштабируемые data-решения на GCP
  • Вести технический дизайн и реализацию клиентских data-проектов
  • Переводить бизнес- и технические требования в эффективные data-архитектуры
  • Строить и поддерживать ETL/ELT-пайплайны, Data Lakes, Lakehouses и облачные Data Warehouses
  • Проектировать модели данных и интеграционные процессы для batch- и real-time-нагрузок
  • Работать со структурированными, полуструктурированными и неструктурированными данными
  • Подбирать технологии по требованиям производительности, масштабируемости, безопасности и стоимости
  • Внедрять процессы data quality, мониторинга, governance и оркестрации
  • Тесно взаимодействовать с Data Architects, Data Engineers, DevOps-командами, аналитиками и стейкхолдерами заказчика
  • Участвовать в разработке аналитических, AI- и ML-решений

Требования

  • Минимум 5 лет профессионального опыта в роли Data Engineer — обязательно
  • Подтверждённый практический опыт разработки data-решений на GCP — обязательно
  • Опыт работы с инструментами визуализации данных: Looker, Power BI, Tableau или QuickSight
  • Опыт data-моделирования, оркестрации, оптимизации производительности и обработки больших объёмов данных
  • Сильные навыки разработки на Python, включая построение data-пайплайнов и ETL/ELT-процессов
  • Высокий уровень владения SQL — обязательно
  • Опыт проектирования и разработки облачных Data Warehouses и Lakehouse-решений
  • Опыт работы с ETL/ELT и инструментами трансформации: dbt, Dataform, Rivery или аналоги
  • Знакомство с CI/CD, Git, Infrastructure as Code и практиками production-деплоя
  • Сильные аналитические навыки и внимание к деталям
  • Способность самостоятельно осваивать новые технологии и вести несколько проектов
  • Опыт работы с несколькими из сервисов GCP: BigQuery, Cloud Storage, Dataflow, Dataproc, Cloud Composer, Cloud Run или Cloud Functions
  • Свободный английский

Условия

  • Преимуществом будет опыт с AWS или Microsoft Azure data-сервисами
  • Преимуществом будет опыт с AWS Glue, Redshift, EMR, Kinesis, Azure Data Factory, Synapse или Databricks
  • Преимуществом будет опыт real-time обработки данных и streaming-архитектур
  • Преимуществом будет опыт с Kafka или другими event-driven платформами
  • Преимуществом будет знание AI/ML-сервисов: Vertex AI, Gemini, BigQuery ML, SageMaker, Bedrock или Azure Machine Learning
  • Преимуществом будут профильные GCP-сертификации
  • Преимуществом будет опыт в консалтинге или клиентских технологических проектах

Навыки

  • GCP
  • Python
  • SQL
  • BigQuery
  • Cloud Storage
  • Dataflow
  • Dataproc
  • Cloud Composer
  • Cloud Run
  • Cloud Functions
  • Looker
  • Power BI
  • Tableau
  • QuickSight
  • dbt
  • Dataform
  • Rivery
  • CI/CD
  • Git
  • Infrastructure as Code
  • ETL/ELT
  • Data Lakes
  • Lakehouse
  • Data Warehouse
  • Kafka
  • AWS
  • Azure
  • AWS Glue
  • Redshift
  • EMR
  • Kinesis
  • Azure Data Factory
  • Synapse
  • Databricks
  • Vertex AI
  • Gemini
  • BigQuery ML
  • SageMaker
  • Bedrock
  • Azure Machine Learning