Data Software Engineer III

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер данных в Fetcherr для построения и масштабирования инфраструктуры данных, питающей проприетарную AI-модель Large Market Model. Роль на стыке data engineering и прикладного AI, работа напрямую с data scientists, ML-инженерами и продуктовыми командами.

Задачи

• Проектировать, строить и поддерживать масштабируемые низколатентные пайплайны данных, забирающие живые рыночные данные из внутренних и внешних источников
• Разрабатывать надёжные ETL/ELT-процессы для очистки, трансформации и валидации больших высокоскоростных датасетов
• Проектировать и оптимизировать решения для хранения данных (data lakes, warehouses, streaming-системы) для real-time и batch-нагрузок
• Совместно с data scientists и ML-инженерами выводить модели в прод и обеспечивать доставку данных в нужной форме и в нужное время
• Мониторить, диагностировать и непрерывно улучшать производительность, надёжность и экономичность продовых систем данных
• Внедрять практики качества данных, наблюдаемости и governance на всём жизненном цикле пайплайнов
• Участвовать в развитии архитектуры платформы данных по мере масштабирования Fetcherr

Требования

• 5+ лет full-time опыта Data Engineer, Software Engineer или аналогичной роли с крупномасштабными продовыми системами данных
• Сильные навыки программирования на Python с production-grade практиками
• Сильный SQL и опыт с реляционными и нереляционными хранилищами данных
• Опыт AI-assisted разработки с умением писать код самостоятельно
• Опыт с облачной инфраструктурой (предпочтительно GCP BigQuery) и современными data warehouse / data lakehouse технологиями
• Знакомство с инструментами оркестрации (Airflow, Dagster) и CI/CD для пайплайнов данных
• Опыт эксплуатации высоконагруженных низколатентных систем в проде
• Сильное аналитическое мышление, внимание к качеству данных и прагматичный подход
• Отличные навыки коллаборации и коммуникации, комфорт в кросс-функциональной работе

Условия

• Nice to have: опыт с real-time OLAP-движками, например ClickHouse
• Nice to have: опыт в travel, e-commerce, логистике или доменах dynamic-pricing / real-time-decisioning
• Nice to have: опыт в SaaS-окружении
• Nice to have: знакомство с ML-пайплайнами или практиками MLOps

Навыки

• Python
• SQL
• GCP
• BigQuery
• Airflow
• Dagster
• CI/CD
• ClickHouse
• MLOps