7-Eleven
Software Engineer II - Data Engineering
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Инженер данных в команду 7-Eleven. Разработка и поддержка надёжных data pipeline и data-продуктов для отчётности, аналитики, AI/ML и бизнес-операций под руководством старших инженеров.
Задачи
- Строить, тестировать, разворачивать и поддерживать batch- и streaming-пайплайны данных на Databricks, Spark, SQL, Python/PySpark, dbt, Airflow и аналогичных инструментах
- Создавать data-продукты для отчётности, аналитики, AI/ML и бизнес-операций
- Реализовывать слои Bronze, Silver и Gold по паттернам medallion architecture совместно со старшими инженерами
- Разрабатывать и поддерживать джобы ingestion, трансформации и потребления данных для внутренних систем и внешних источников
- Оптимизировать производительность пайплайнов, использование хранилища и вычислительные затраты
- Документировать решения, расписания джобов, зависимости и шаги поддержки
- Добавлять автотесты, проверки качества данных, мониторинг, алерты и обработку ошибок
- Обеспечивать свежесть, точность и доступность данных для бизнес-пользователей и downstream-систем
- Разбирать инциденты на проде, находить причины и внедрять устойчивые исправления
- Поддерживать SLA, разбирать падения джобов и проводить регламентное обслуживание прода
- Использовать контроль версий, code review, CI/CD и практики релизов
- Соблюдать требования по доступам, шифрованию, приватности, хранению, метаданным и lineage
- Вести базовые метаданные и lineage, чтобы data-продукты были понятны и переиспользуемы
- Использовать одобренные AI-инструменты (Windsurf, Devin, Databricks Genie) для кодинга, тестирования, отладки, документации и анализа
- Проверять и тестировать результаты AI-генерации перед использованием
Требования
- Bachelor’s degree в смежной области или эквивалентный опыт
- 3+ года в data engineering, software engineering, интеграции данных или аналогичной технической роли
- Практический опыт с SQL и Python, знакомство с облачными инструментами данных
- Опыт построения или поддержки data pipeline, ETL/ELT-джобов, датасетов или data-продуктов
- Базовое понимание качества данных, тестирования, мониторинга, контроля версий и практик поддержки прода
- Опыт или обучение работе с AI-инструментами разработки и умение проверять AI-сгенерированный код
Условия
- Полный рабочий день
- Позиция в США (Irving, TX)
- Бенефиты для сотрудников в США и Канаде
Навыки
- Databricks
- Spark
- SQL
- Python
- PySpark
- dbt
- Airflow
- Azure
- AWS
- ETL/ELT
- medallion architecture
- Dataiku
- Windsurf
- Devin
- Databricks Genie
- CI/CD