Senior Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Engineer в команду Maritime Models компании Kpler. Техническое владение ключевыми data-пайплайнами и распределёнными хранилищами для трекинга судов и предиктивной аналитики.

Задачи

• Проектировать, строить и эксплуатировать высоконагруженные batch- и streaming-пайплайны на Java, Python, Apache Kafka, Apache Flink и Airflow
• Проектировать, настраивать и поддерживать масштабируемые распределённые NoSQL-базы, в первую очередь Apache HBase, для высокообъёмных time-series данных морской телеметрии
• Обеспечивать операционное совершенство в контейнеризованных облачных средах на AWS с использованием Kubernetes, Docker, Terraform и GitOps
• Определять и контролировать метрики надёжности: задержку пайплайнов, полноту данных и uptime в рамках строгих SLA
• Работать совместно с Data Scientists, Product Managers и SRE-командами, переводя требования морского моделирования в production-инфраструктуру
• Менторить инженеров, задавать стандарты код-ревью и использовать современные AI-инструменты разработки (Copilot, Cursor, Claude) для повышения продуктивности команды

Требования

• 5+ лет профессионального опыта Data Engineer с проектированием, масштабированием и поддержкой production-пайплайнов
• Глубокий практический опыт с распределёнными NoSQL-хранилищами, в частности Apache HBase, для высокообъёмного time-series хранения и оптимизации запросов
• Сильное владение software engineering на Java и Python
• Опыт stream processing и оркестрации: Apache Kafka, Apache Flink, Apache Airflow
• Опыт эксплуатации контейнеризованных сервисов в AWS с Docker, Kubernetes и Terraform

Условия

• Работа в международной компании (более 850 экспертов из 69 стран)
• Инклюзивная и разнообразная рабочая среда, равные возможности
• Современные AI-инструменты разработки в работе

Навыки

• Java
• Python
• Apache Kafka
• Apache Flink
• Apache Airflow
• Apache HBase
• NoSQL
• AWS
• Kubernetes
• Docker
• Terraform
• GitOps
• PostgreSQL
• GeoServer
• Copilot
• Cursor
• Claude