Seattle Children's
Data Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Data Engineer в команду Enterprise Analytics детской больницы Seattle Children's. Построение и поддержка масштабируемых пайплайнов обработки данных для корпоративного хранилища с использованием облачных платформ.
Задачи
- Строить пайплайн обработки данных, который собирает, связывает, централизует и курирует данные из внутренних и внешних источников для Enterprise Data Warehouse
- Разрабатывать масштабируемые, безопасные и надёжные решения для перемещения и трансформации данных между системами
- Проектировать, внедрять, тестировать и разворачивать облачную инфраструктуру обработки данных
- Работать в Agile-команде, декомпозировать, оценивать и выполнять just-in-time дизайн небольших инкрементов работы
Требования
- Bachelor's Degree в computer science или смежной области либо эквивалентный опыт
- Минимум 2 года опыта в IT-индустрии
- 2 года опыта в роли data engineer
- 2+ года опыта построения масштабируемых приложений на Python и SQL
- Опыт построения масштабируемых пайплайнов данных на Spark или Spark-SQL с Airflow или аналогичными инструментами планирования
- Опыт работы с облачными платформами, предпочтительно GCP
- Продвинутый SQL с оптимизацией запросов на больших БД
- Опыт SDLC: сбор требований, анализ, архитектура, дизайн, реализация, тестирование, деплой и поддержка
- Опыт работы с инструментами контроля версий и управления проектами
- Опыт написания тест-кейсов и скриптов для контроля качества данных
- Опыт создания хранимых процедур и функций
- Опыт разработки dimensional data model
- Опыт работы с Google BigQuery или аналогом
Условия
- Гибридный формат в Seattle, WA
- Зарплата $110,122 – $165,182 в год
- Медицинская, стоматологическая и офтальмологическая страховка, 403(b), страхование жизни, оплачиваемый отпуск, компенсация обучения и другое
Навыки
- Python
- SQL
- Spark
- Spark-SQL
- Airflow
- GCP
- Google BigQuery
- CI/CD
- R
- SAS
- SPSS
- API development