Deeplight
Lead Data Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Lead Data Engineer в AI- и data-консалтинге DeepLight AI (ОАЭ). Роль сочетает hands-on разработку production-пайплайнов и lakehouse-платформ с архитектурным лидерством и менторством инженеров, работа напрямую с клиентами.
Задачи
- Проектировать, строить и разворачивать production-grade data pipelines, lakehouse и датасеты, готовые к аналитике
- Превращать сложные бизнес-задачи в технические дизайны, дорожные карты поставки и инженерные задачи
- Оставаться hands-on: решать сложные технические задачи, проводить code review, участвовать в разборе production-инцидентов
- Устанавливать и продвигать стандарты качества кода, тестирования, CI/CD, документации и data governance
- Строить отказоустойчивые, мониторимые и безопасные пайплайны, рассчитанные на масштаб и корпоративный комплаенс
- Развивать операционное совершенство: version control, автоматизированное тестирование, runbooks, мониторинг платформы
- Коучить и менторить инженеров уровня middle и senior
- Работать напрямую с архитекторами клиента, data scientists и бизнес-лидерами, переводя технические решения на язык бизнес-ценности
Требования
- Продвинутое владение Python и SQL, подтверждённый опыт поставки end-to-end ETL/ELT пайплайнов и масштабируемых data-архитектур
- Практический опыт хотя бы с одним крупным облачным провайдером (AWS, Azure, GCP)
- Глубокое владение платформами Databricks, Snowflake, Microsoft Fabric, Synapse, BigQuery или Redshift
- Понимание data lakes, lakehouse, хранилищ, streaming vs batch, оркестрации и production-мониторинга
- Знание data privacy, контроля доступа, шифрования, управления схемами и корпоративных фреймворков качества данных
- Отличные коммуникативные навыки, умение работать в среде клиента и балансировать скорость поставки с техническим качеством
- Понимание того, как качественная data-инженерия обеспечивает advanced analytics, machine learning и Generative AI
Условия
- Конкурентная зарплата
- Комплексное медицинское страхование
- Полное спонсорство индивидуальной визы
- Поддержка профессионального развития и сертификаций
- Компенсация подписок, связанных с ролью
- Работа над передовыми AI-проектами
- Ежемесячная программа поощрения сотрудников
- Возможности карьерного роста в быстрорастущей AI-компании
Навыки
- Python
- SQL
- ETL
- ELT
- AWS
- Azure
- GCP
- Databricks
- Snowflake
- Microsoft Fabric
- Synapse
- BigQuery
- Redshift
- Data Lake
- Lakehouse
- Streaming
- Batch Processing
- Orchestration
- CI/CD
- Data Governance
- Data Quality