iDelsoft
Full-Stack Engineer, Agent Evaluation & Reliability (San Francisco, CA, In-Person)
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Full-stack инженер с уклоном в backend для платформы оценки и повышения надёжности enterprise AI-агентов. Основная сложность — backend: моделирование данных, очереди, пайплайны исполнения, интеграции и наблюдаемость распределённых workflow.
Задачи
- Разрабатывать и развивать backend-системы платформы оценки агентов и их непрерывного улучшения
- Проектировать модели данных для датасетов оценки, прогонов экспериментов, трейсов агентов, версий знаний, находок и пользовательских критериев качества
- Вести enterprise-интеграции end to end: аутентификация, OAuth, вебхуки, инкрементальные синхронизации, бэкфиллы, лимиты, изменения схем, ретраи, мониторинг и поддержка в продакшене
- Проводить фичи от технического дизайна через деплой и мониторинг до обратной связи клиентов и итераций
- Работать напрямую с клиентами: разбираться в их системах, диагностировать сбои и превращать разовые запросы в переиспользуемые продуктовые фичи
Требования
- 2–4 года опыта разработки и эксплуатации продакшен-софта, включая работу в быстрорастущем стартапе
- Сильные backend-навыки в production TypeScript и Node.js (или Bun), способность вести фичи по всему стеку
- Хорошее знание PostgreSQL и практический опыт с Redis, очередями задач, фоновыми воркерами или workflow-системами
- Опыт владения проектами и фичами end to end, быстрая обучаемость
- Понимание, чем оценка недетерминированных агентских систем отличается от обычного юнит-тестирования
- Возможность работать в офисе в Сан-Франциско
Условия
- Конкурентная зарплата и значимая доля в компании с гибкостью в пропорции
- Возможна визовая поддержка
- Прямая работа с основателями и enterprise-клиентами
Навыки
- TypeScript
- Node.js
- Bun
- PostgreSQL
- Redis
- job queues
- background workers
- workflow systems
- OAuth
- webhooks
- data pipelines
- observability
- distributed systems