Sr. Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Engineer в OneOncology — компании, развивающей технологичную платформу для онкологической помощи. Роль предполагает проектирование и развитие масштабных data-платформ и ETL-пайплайнов в облаке Azure.

Задачи

• Проектировать и внедрять надёжные, компонентные и масштабируемые процессы обработки данных для развития BI-платформы
• Быстро осваивать big data и облачные технологии и применять их для построения, оптимизации и анализа крупномасштабных решений
• Переводить сложные бизнес-требования в понятные технические задачи, выявляя зависимости, риски и возможные блокеры
• Писать качественный поддерживаемый код, следуя лучшим практикам версионирования, тестирования и деплоя
• Взаимодействовать со стейкхолдерами для сбора требований и проектирования решений под бизнес-цели
• Постоянно выявлять и внедрять улучшения пайплайнов, производительности систем и эффективности процессов
• Менторить и обучать членов команды современным подходам к data engineering и внутренним практикам
• Гибко приоритизировать работу в динамичной среде
• Диагностировать и решать сложные проблемы, поддерживая стабильность систем
• Нести ответственность за код, архитектуру и документацию, понятно объясняя детали реализации технической и нетехнической аудитории
• Документировать процессы
• Следить за новыми технологиями и стандартами отрасли, применяя лучшие практики в healthcare data engineering
• Выполнять дополнительные задачи для поддержки миссии компании

Требования

• 8+ лет практического опыта разработки на SQL
• 8+ лет опыта работы с реляционными и нереляционными базами данных, сильная база в моделировании данных, проектировании схем и оптимизации запросов
• 5+ лет профессионального опыта разработки масштабируемых решений на Python или аналогичном объектно-ориентированном языке
• Уверенное владение Databricks, Spark и Delta tables; опыт крупномасштабной распределённой обработки данных приветствуется
• Понимание архитектур Lakehouse и Medallion
• Опыт проектирования Data Integration/ETL пайплайнов с использованием Azure Data Factory или аналогов
• Обширный опыт деплоя и управления решениями в облаке (предпочтительно Microsoft Azure), включая мониторинг, оптимизацию затрат и безопасность данных
• Сильное понимание принципов объектно-ориентированного проектирования (OOD) и лучших практик software engineering
• Степень бакалавра в Computer Science, IT, Engineering или смежной области либо эквивалентный практический опыт

Условия

• Full-time роль с базированием в Austin, TX, Nashville, TN или удалённо
• Небольшая, мотивированная и коллаборативная команда разработки
• Высокая степень ответственности и продуктивности, при этом в компании ценят удовольствие от работы
• Работа в agile-среде
• Посещаемость является существенной рабочей функцией

Навыки

• SQL
• Python
• Databricks
• Spark
• Delta tables
• Lakehouse
• Medallion architecture
• Azure Data Factory
• ETL
• Microsoft Azure
• Data modeling
• Query optimization
• OOD