Philadelphia
Data Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Data Engineer в команду Data & Analytics (15 человек) в Philadelphia Zorg. Отвечает за надёжную и безопасную интеграцию данных из разных систем на data-платформу, разработку и мониторинг пайплайнов.
Задачи
- Проектировать, разрабатывать и поддерживать масштабируемые data pipelines и технические интеграции
- Подключать базы данных, REST API, файлы и другие источники через ADF и загружать данные на data-платформу
- Настраивать мониторинг, логирование, обработку ошибок и автоматические оповещения
- Управлять data-платформой, интеграциями, конфигурациями и пайплайнами в Azure Data Factory
- Обеспечивать воспроизводимость и восстановление пайплайнов, устранять первопричины сбоев
- Применять Git, code review, автотесты и CI/CD, участвовать в развитии стандартов разработки
- Оптимизировать пайплайны и компоненты платформы по производительности, масштабируемости, надёжности и стоимости
- Внедрять технические меры безопасности, приватности, аутентификации и контролируемого доступа
- Документировать источники данных, интеграции, пайплайны, конфигурации, метаданные и потоки данных
- Технически обеспечивать Data Science и ML-приложения: интеграция, деплой, мониторинг, безопасный доступ к данным
- Применять архитектурные принципы и технические стандарты, согласованные с Data Architect
Требования
- Минимум hbo уровень, например образование в информатике, data engineering или смежной технической области
- Минимум 3 года опыта в аналогичной должности
- Опыт самостоятельного проектирования, разработки и управления data pipelines, интеграциями и компонентами data-платформы
- Хорошее знание SQL и опыт с Python
- Опыт с базами данных, REST API и процессами ETL/ELT
- Опыт с Git, контролем версий, автотестами и CI/CD
- Знание вопросов безопасности, приватности, производительности, масштабируемости и экономичности в data-среде
- Аналитический склад ума, системность, внимание к качеству и деталям
- Ориентация на автоматизацию, стандартизацию, переиспользование и обмен знаниями
- Свободное владение нидерландским языком (минимум C1)
Условия
- Зарплата по CAO gehandicaptenzorg FWG 60: от € 4.159 до € 6.045 при 36-часовой неделе, в зависимости от опыта
- Годовая выплата 8,33%, отпускные 8% и пенсионная схема по среднему заработку
- Ноутбук и мобильный телефон
- Различные возможности обучения и гибкие условия из системы выбора
- Компенсация уроков музыки и покупки музыкального инструмента, велосипеда, личного ПК/ноутбука/планшета
- Возможность половину времени работать из дома с гибким началом и окончанием рабочего дня
- 32–36 часов в неделю
Навыки
- SQL
- Python
- REST API
- ETL
- ELT
- Git
- CI/CD
- Azure Data Factory
- Snowflake
- dbt
- Azure DevOps
- Data pipelines
- Data Science
- Machine Learning