ClickHouse
Data Platform Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Senior Data Engineer в ClickHouse для развития внутреннего DWH-платформы: построение и оптимизация пайплайнов, data-моделей и DataOps-инструментов для аналитики и принятия решений по всей компании.
Задачи
- Проектировать и разрабатывать переиспользуемые компоненты Airflow: операторы, коннекторы, хуки и кастомные интеграции
- Создавать переиспользуемые dbt-макросы и абстракции: инкрементальные стратегии, ETL-блоки, generic-тесты качества данных с учётом особенностей ClickHouse
- Разрабатывать DataOps-инструменты: CI-пайплайны, фреймворки миграции данных и средства контроля безопасности
- Проводить код-ревью для участников команды и контрибьюторов
- Участвовать в обсуждении технического и архитектурного дизайна
- Развивать окружение разработки команды с фокусом на автоматизацию, включая AI-assisted workflows
- Обеспечивать стабильность платформы через проактивный troubleshooting и своевременное устранение инцидентов
- Разрабатывать, рефакторить и оптимизировать бизнес-модели данных по стандартам моделирования и best practices ClickHouse
- Менторить контрибьюторов через код-ревью и техническое наставничество
- Вести дизайн и реализацию наиболее сложных data mart'ов с высокой скоростью данных и большими объёмами
Требования
- Исключительные навыки SQL
- Сильный практический опыт с Airflow, dbt и Python
- Подтверждённый опыт построения и оптимизации крупномасштабных высоконагруженных data-пайплайнов
- Понимание основ data warehousing: ETL/ELT, dimensional modeling, качество данных
- Степень бакалавра по Computer Science или смежной специальности
- Комфорт в быстро меняющейся стартап-среде
- Плюс: практический опыт с ClickHouse
- Плюс: знакомство с AWS или другими облачными платформами
- Плюс: опыт CI/CD, особенно с GitHub Actions
Условия
- Гибкий формат работы, remote-friendly, компания распределена по 25+ странам
- Взносы работодателя в медицинскую страховку
- Опционы компании для новых сотрудников
- Гибкий отпуск в США и щедрый отпуск в других странах
- 500 USD на обустройство домашнего офиса для удалённых сотрудников
- Глобальные встречи и корпоративные офсайты
Навыки
- SQL
- Airflow
- dbt
- Python
- ClickHouse
- AWS
- S3
- Superset
- GitHub Actions
- CI/CD
- ETL
- ELT
- dimensional modeling