Senior Data Platform Engineer (F/M/D)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Platform Engineer в Animore (Мюнхен) — построение и масштабирование data-платформы для обучения роботизированных foundation-моделей. Роль на стыке распределённых систем, мультимодальной обработки данных и прикладного ML, с лидерством небольшой команды.

Задачи

• Замыкать цикл «модель–данные»: связывать требования приложения со сбором данных и превращать ошибки модели в улучшения датасетов через сбор, курирование и аугментацию
• Строить и масштабировать распределённые пайплайны данных (Ray/Anyscale или аналоги) для видео, сенсорных и роботизированных датасетов объёмом в терабайты
• Проектировать мультимодальные схемы данных, согласовывая видео, действия и высокочастотные сенсорные потоки
• Разрабатывать Python-инструменты для контроля качества данных: очистка, детекция аномалий, версионирование датасетов
• Отвечать за качество и покрытие датасетов: процессы аннотации, разнообразие данных, компромиссы по хранению
• Руководить небольшой командой и координировать работу с поставщиками данных и вендорами аннотации
• Курировать сбор реальных данных: техническая настройка, комплаенс и безопасная обработка данных

Требования

• 5+ лет в Data/ML Engineering, из них 2+ года на senior- или lead-роли
• Опыт работы с крупномасштабными реальными данными (робототехника, автономные системы или видео-AI)
• Сильный опыт с Ray/Anyscale или Spark для распределённых пайплайнов
• Продвинутый Python (производительность, конкурентность, ML-стек: NumPy/PyTorch)
• Опыт работы с форматами видео и сенсорных данных (H.264/H.265, ROS bags, MCAP)
• Опыт построения масштабируемых пайплайнов данных для GPU-обучения (AWS/GCP)
• Опыт работы с инструментами версионирования данных, например DVC или LakeFS
• Подтверждённый опыт владения системами и менторства инженеров

Условия

• Конкурентный компенсационный пакет
• Различные субсидии и льготы для сотрудников, включая общественный транспорт и Wellpass
• Работа с командой мирового уровня в плоской иерархии, прямое взаимодействие с основателями и инженерной командой
• Возможность реально влиять на передовые робототехнические и AI-системы
• Быстрый рост в быстро развивающейся компании и индустрии
• Международная офисная среда с английским как официальным рабочим языком

Навыки

• Python
• Ray
• Anyscale
• Apache Spark
• AWS
• GCP
• H.264
• H.265
• ROS bags
• MCAP
• PyTorch
• NumPy
• DVC
• LakeFS
• Distributed data processing
• Storage systems