Agent Reliability Engineer, GTM

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер по надёжности GTM-агента в LangChain: отвечает за здоровье, стоимость, производительность и бизнес-эффект агента, а также строит циклы обратной связи для его улучшения. Работает с платформой LangSmith так, как компания рекомендует клиентам, превращая эту практику в референсную историю для enterprise.

Задачи

• Мониторить здоровье продакшена по всем графам: ошибки, медленные и дорогие запуски, тихие сбои — до того, как о них сообщат
• Разбирать входящие проблемы из Slack, тикетов и отчётов, мелкие исправлять самостоятельно, остальные направлять владельцам
• Запускать еженедельный набор eval-тестов, разбирать сбои и превращать реальные баги в постоянные регрессионные тесты
• Отслеживать стоимость и задержки по моделям, графам, сценариям и ролям, предлагать конкретные изменения по выбору модели, reasoning effort и кэшированию
• Отслеживать использование и адопшен по сотрудникам и фичам, отвечать за еженедельный отчёт о здоровье системы
• Строить бизнес-метрики, показывающие руководству ценность агента: reply rate, назначенные встречи, сэкономленные часы и ROI
• Строить собственный мониторинг и алертинг на LangSmith и описывать историю «как мы запускаем собственного агента» для клиентов

Требования

• Сильный продакшен-опыт Python и SQL, уверенная работа с трейсами, логами и таблицами в хранилище
• Реальный опыт эксплуатации LLM-приложений: трейсинг, evals, механика промптов и кэширования
• Инстинкты SRE или продакшен-операций: перцентили, SLO, умение отделять шум от реального паттерна
• Здоровый скептицизм к метрикам: проверять, что именно считает число, прежде чем публиковать
• Ясное письмо и интерес публиковать то, чему учишься
• Высокая агентность: замечать, чего не хватает, и брать инициативу

Условия

• Конкурентная компенсация: базовая зарплата, переменная часть для релевантных ролей, значимый equity, бенефиты и перки
• Медицинская, стоматологическая и офтальмологическая страховка, гибкий отпуск, план 401(k), питание в офисные дни в США
• Для сотрудников в EU, UK и APAC — локально конкурентные бенефиты по нормам и регулированию региона

Навыки

• Python
• SQL
• FastAPI
• LangGraph
• DeepAgents
• LangSmith
• Supabase Postgres
• BigQuery
• Anthropic
• OpenAI
• Slack
• Next.js
• dbt
• LLM evals
• tracing
• SLO
• prompt caching