Software Engineer, Applied AI, Model Quality

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер в команду Google Pics — AI-редактора изображений в Google Workspace. Занимается оценкой качества моделей Gemini/GemPix, строит системы автоматической и человеческой оценки.

Задачи

• Строить системы автоматической оценки на базе LLM и системы оценки с участием людей для проверки качества моделей
• Определять метрики для оценки grounding, связности, безопасности и полезности
• Запускать оценки моделей и датасетов с помощью платформ и инструментов
• Давать практические выводы по результатам оценок для улучшения качества моделей совместно с research и кросс-функциональными командами
• Создавать инструменты и системы, повышающие эффективность процесса оценки

Требования

• Степень бакалавра или эквивалентный практический опыт
• 5 лет опыта разработки ПО на одном или нескольких языках программирования
• 3 года опыта тестирования, поддержки или запуска программных продуктов
• 1 год опыта проектирования и архитектуры ПО
• Желательно: магистратура или PhD в Computer Science или смежной области
• Желательно: 5 лет опыта в speech/audio, reinforcement learning, ML-инфраструктуре или другой области ML
• Желательно: 5 лет опыта ML-дизайна и ML-инфраструктуры (деплой, оценка моделей, обработка данных, отладка, fine tuning)
• Желательно: 3 года опыта в сложной матричной организации с кросс-функциональными проектами
• Желательно: опыт интеграции генеративных AI-инструментов или интерфейсов LLM в рабочие процессы

Условия

• Зарплата в США: $174000 - $252000 (USD)
• Бонус 15% от цели
• Equity
• Benefits

Навыки

• LLM
• Generative AI
• ML infrastructure
• model deployment
• model evaluation
• data processing
• fine tuning
• reinforcement learning
• speech/audio
• Gemini