Dremio
Staff Software Engineer - Query Planner & Reflections
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Staff-инженер в команду Query Planner & Reflections, которая владеет SQL-планировщиком и оптимизатором на Apache Calcite и движком подстановки reflections. Роль предполагает техническое лидерство, архитектурные решения и работу со сложными задачами корректности и производительности планирования запросов.
Задачи
- Задавать архитектуру и техническое направление для команды Query Planner и Reflections, включая фичи для OSS, Enterprise и Cloud редакций
- Вести дизайн, реализацию и поставку сложных инициатив, затрагивающих несколько команд (Query Execution, Catalog, Datalake)
- Глубоко работать с Apache Calcite и Apache Iceberg, включая контрибуции в upstream
- Диагностировать сложные проблемы корректности и производительности планирования запросов и матчинга reflections с помощью query profiles, телеметрии и продакшн-данных
- Использовать AI-инструменты разработки для понимания кода, отладки, генерации тестов, документации и анализа инцидентов, валидируя AI-код через ревью, тестирование и бенчмарки
- Проектировать архитектуры, корректно работающие в разных моделях деплоя и публичных облаках
- Участвовать в дизайн- и код-ревью, задавать технические стандарты команды
- Работать с Product над многоквартальным роадмапом и с Support и field-командами над ключевыми клиентскими проблемами
Требования
- B.S./M.S. или эквивалент в Computer Science или смежной технической области либо эквивалентный опыт
- 8–10+ лет опыта разработки продакшн-софта
- Свободное владение Java/C++ будет плюсом
- Глубокое понимание планирования и оптимизации запросов: cost-based оптимизаторы, rule-based переписывание, желательно практический опыт с Apache Calcite или аналогичным фреймворком
- Сильные основы баз данных: SQL, производительность, проектирование схем
- Опыт принятия системных архитектурных решений и ведения сложных кросс-командных инициатив
- Опыт задания технического направления для команды или крупного компонента
- Умение оценивать компромиссы и принимать взвешенные решения при работе с незнакомыми или AI-сгенерированными реализациями
- Способность самостоятельно разбираться с неоднозначными кросс-организационными задачами; сильные коммуникативные навыки
- Понимание распределённых файловых систем, таких как S3, ADLS или HDFS; опыт с AWS, Azure или GCP будет плюсом
Условия
- Работа в компании Dremio — unified lakehouse платформа для self-service аналитики и AI
- Клиенты — крупные глобальные предприятия, включая Maersk, Amazon, Regeneron, NetApp и S&P Global
- Открытая lakehouse архитектура на open source технологиях, включая Apache Iceberg и Apache Arrow
- Dremio — equal opportunity employer, поддерживает разнообразие рабочей силы
- Предоставляются необходимые accommodations для людей с инвалидностью в процессе подачи заявки и интервью
Навыки
- Java
- C++
- SQL
- Apache Calcite
- Apache Iceberg
- Apache Arrow
- cost-based оптимизация
- rule-based rewriting
- query planning
- query optimization
- materialized views
- distributed systems
- S3
- ADLS
- HDFS
- AWS
- Azure
- GCP
- AI-assisted development