Data Engineer (Data Engineering Team)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в команду Data Engineering крупной торговой платформы. Разработка и поддержка пайплайнов и инфраструктуры данных, обеспечение надёжности и доступности данных для аналитики и принятия решений.

Задачи

• Проектировать, разрабатывать и поддерживать пайплайны данных: приём, обработка и доставка данных из различных источников с обеспечением качества и надёжности
• Создавать и поддерживать модели данных для отчётности, аналитики и BI, оптимизируя структуры данных по производительности и эффективности
• Реализовывать ETL-процессы для преобразования сырых данных в аналитические инсайты, включая трансформацию, агрегацию и обогащение
• Отслеживать и устранять проблемы качества данных, внедрять валидацию и практики управления данными
• Управлять и оптимизировать системы хранения, обработки и распространения данных, обеспечивая масштабируемость и производительность
• Взаимодействовать с data scientists, аналитиками и кросс-функциональными командами для понимания требований к данным
• Документировать процессы, пайплайны и системы data engineering

Требования

• Степень бакалавра или магистра в Computer Science, Data Science или смежной области
• Минимум 3 года опыта в data engineering или смежной области
• Подтверждённый опыт с Redshift и Snowflake
• Опыт с DBT
• Опыт с Apache Airflow для оркестрации workflow
• Владение Python для разработки пайплайнов данных и скриптинга
• Опыт с облачными сервисами AWS, включая S3, EC2 и EMR
• Знакомство с Kafka для потоковой передачи данных в реальном времени
• Знакомство с инструментами визуализации и отчётности (Tableau, Power BI или Looker)
• Навыки управления проектами в Jira или аналогичных инструментах
• Умение эффективно работать с кросс-функциональными командами и понимать бизнес-потребности в данных
• Сильные навыки решения проблем, проактивный подход к устранению проблем с данными и критическое мышление
• Адаптивность и готовность осваивать новые технологии и методологии

Условия

• Конкурентная зарплата
• Баланс работы и личной жизни, гибридный формат
• Щедрый ежегодный отпуск
• Реферальная программа для сотрудников
• Медицинская страховка и пенсионные планы, а также локальные льготы
• 30 дополнительных дней удалённой работы из любой точки мира (с ограничениями)
• Два дополнительных оплачиваемых волонтёрских дня в год

Навыки

• Redshift
• Snowflake
• DBT
• Apache Airflow
• Python
• AWS
• S3
• EC2
• EMR
• Kafka
• Tableau
• Power BI
• Looker
• Jira