Datavent
Senior Data Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Data Engineer в компанию AgentixLake, строящую production-grade data-платформы и AI-системы на инфраструктуре заказчиков. Работа над Python/SQL пайплайнами, data-моделями и lakehouse-архитектурой.
Задачи
- Строить пайплайны на Python и SQL для загрузки, трансформации и валидации данных из API, баз данных и файлов
- Разрабатывать data-модели и трансформации для аналитики и AI-приложений
- Добавлять проверки качества данных, автотесты и мониторинг для надёжности пайплайнов
- Расследовать сбои пайплайнов, улучшать логирование и диагностику
- Участвовать в проектах облачных data-платформ и lakehouse
- Документировать работу и взаимодействовать через Git, pull requests и code review
Требования
- Практический опыт с Python, базами данных и data-пайплайнами
- Вдумчивый подход к отладке и готовность задавать вопросы
- Хорошие навыки коммуникации на английском
- Знакомство с AWS, dbt, Airflow, Docker, Snowflake, Databricks, Apache Iceberg
Условия
- Удалённая работа в пределах ОАЭ
- Работа с современными облачными платформами, data-архитектурой и основами production AI
- Небольшая команда с возможностью влиять на идеи и видеть результат своей работы
Навыки
- Python
- SQL
- AWS
- dbt
- Airflow
- Docker
- Snowflake
- Databricks
- Apache Iceberg
- Git