Staff Software Engineer, AI Foundry Data Quality and Training Data

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Руководитель команды Data Quality в организации Data Acquisition and Data Quality (AI Foundry) в Google. Отвечает за стратегию и исполнение по качеству данных, таргетингу и оценке датасетов для DeepMind и Search, включая пайплайны обработки экзабайт данных для Gemini.

Задачи

• Техническое руководство и управление командой Software Engineers, создающей AI-ready датасеты и инфраструктуру качества данных
• Проектирование, разработка и развитие крупномасштабных распределённых пайплайнов обработки данных, платформ signal-serving и систем наблюдаемости датасетов с гарантиями надёжности и SLO
• Совместная работа с peer tech lead managers, Über Tech Leads и исследователями DeepMind для формирования roadmap по pre-training, post-training и мультимодальным обучающим данным
• Проектирование и масштабирование веб-алгоритмов и фреймворков оптимизации: таргетинг краулинга, отбор документов, дедупликация, фильтрация спама и низкоценного контента, целевые функции на сотнях миллиардов документов
• Установление строгих метрик качества данных и автоматического обнаружения аномалий

Требования

• Bachelor's degree или эквивалентный практический опыт
• 8 лет опыта проектирования, построения и эксплуатации крупномасштабных распределённых систем с фокусом на масштабируемость, отказоустойчивость и надёжность
• 2 года опыта управления людьми, супервизии или руководства командой
• Опыт работы с алгоритмами и структурами данных, анализом и проектированием ПО
• Опыт в принципах software engineering, паттернах проектирования и системной архитектуре
• Желательно: PhD в Computer Science, Machine Learning, Distributed Systems, Operations Research или смежной области
• Желательно: опыт с алгоритмами и улучшением математической или системной производительности
• Желательно: опыт построения и эксплуатации высоконагруженных распределённых систем на инфраструктуре или эквивалентных batch и streaming фреймворках
• Желательно: опыт tech lead manager, руководящего инженерными командами на стыке инфраструктуры и machine learning
• Желательно: опыт с качеством данных, курированием датасетов, анализом ценности данных или пайплайнами обучающих данных для LLM и мультимодальных foundation-моделей

Условия

• Зарплата $207000 - $300000 (USD)
• Целевой бонус 20%
• Equity
• Benefits
• В большинстве случаев собеседования проходят очно

Навыки

• Distributed Systems
• Algorithms
• Data Structures
• System Architecture
• Design Patterns
• Machine Learning
• LLM
• Multimodal Foundation Models
• Data Quality
• Dataset Curation
• Batch Processing
• Streaming Frameworks
• SLO
• Deduplication
• Anomaly Detection