Mayflower
DevOps Engineer (DWH)
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
DevOps-инженер в команду инфраструктуры DWH. Разработка и эксплуатация data-платформы на Kubernetes с Airflow, Spark, Trino и Iceberg, обеспечение наблюдаемости и GitOps-доставки.
Задачи
- Разворачивать и сопровождать Airflow в Kubernetes, включая интеграцию со Spark, доставку DAG, executors, connections и secrets
- Эксплуатировать и тюнить Spark в Kubernetes: Spark Operator, Spark Connect, Spark History Server, управление ресурсами, планирование и разбор упавших или медленных задач
- Администрировать Trino: каталоги, контроль доступа, resource groups, тюнинг производительности запросов
- Поддерживать и развивать Iceberg Catalog и слой lakehouse-хранилища
- Разрабатывать и поддерживать каталог data governance (метаданные, lineage, ownership) и его интеграцию с платформой
- Отвечать за наблюдаемость data-платформы: VictoriaMetrics и VictoriaLogs, сбор метрик и логов, дашборды Grafana, алерты
- Разрабатывать и поддерживать Helm-шаблоны, пайплайны GitLab CI/CD и приложения Argo CD для GitOps-доставки
- Тесно работать с командами Data Engineering и Analytics, поддерживать прод и окружения разработки, помогать с деплоями и конфигурацией
- Диагностировать проблемы на уровне Kubernetes, сети, хранилищ, CI/CD и data-инструментов
- Автоматизировать рутинные операции, участвовать в апгрейдах и миграциях платформы
- Ревьюить инфраструктурный код и работать с командами DevOps, Data и Platform над кросс-командными изменениями
Требования
- Production-опыт запуска нагрузок в Kubernetes-окружениях
- Понимание data-платформенных инструментов (Airflow, Spark, Trino или аналогов) на уровне внутреннего устройства, а не только установки
- Опыт работы с Helm, включая написание и поддержку чартов и шаблонов
- Опыт построения и поддержки CI/CD-пайплайнов, желательно GitLab CI, и GitOps-доставки через Argo CD или аналоги
- Практический опыт с метриками, логированием и алертингом (VictoriaMetrics/Prometheus, VictoriaLogs/ELK, Grafana)
- Понимание инфраструктурных сетей: TCP/IP, DNS, балансировка нагрузки, диагностика связности
- Умение самостоятельно вести крупные неоднозначные задачи до завершения
- Уверенная работа с Linux и production-инфраструктурой
- Владение Bash, Python или аналогичным для автоматизации
Условия
- Контракт по трудоустройству в ЕС и 3-летняя рабочая виза Кипра с полной поддержкой релокации и визовых процессов, включая помощь семье
- Возможность получить паспорт ЕС после 4 лет проживания
- Полный релокационный пакет: перелёт в Лимасол для вас и семьи, оплачиваемая компанией квартира на первый месяц, полная поддержка релокации
- Provident fund (Кипр): долгосрочный сберегательный план с софинансированием от компании (доступен после испытательного срока)
- Прозрачные performance-ревью дважды в год с бонусами и пересмотром зарплаты
- Частная медицинская страховка для вас и семьи
- Корпоративный мобильный план (безлимит на Кипре с роумингом)
- Поддержка ментального благополучия, включая психологическую помощь с покрытием 50%
- Покрытие 50% стоимости школы и детского сада для детей
- Полностью оплачиваемые спортивные бенефиты, доступ к корпоративным электросамокатам и велопрокату
- Поддержка профессионального роста: языковые курсы, конференции, тренинги и коучинг
- Программа peer recognition
- Оборудованный офис в центре Лимасола
- Бесплатные завтраки и обеды в офисе, кофейня и health bar
- Сильная инженерная культура: международные команды, корпоративные мероприятия, тимбилдинги и хакатоны
Навыки
- Kubernetes
- OKD
- OpenShift
- Helm
- Helmfile
- GitLab CI/CD
- Argo CD
- Apache Airflow
- Apache Spark
- Spark Operator
- Spark Connect
- Spark History Server
- Trino
- Apache Iceberg
- Iceberg Catalog
- VictoriaMetrics
- VictoriaLogs
- Grafana
- Tableau
- Linux
- TCP/IP
- DNS
- Bash
- Python
- Prometheus
- ELK