HCLTech
Senior Apache Spark Developer - Scala, Python
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Senior-разработчик для проектирования и реализации решений на Apache Spark, Scala и Python. Основной фокус — разработка, тестирование и поддержка высокопроизводительных масштабируемых приложений обработки данных.
Задачи
- Проектировать и разрабатывать масштабируемые пайплайны обработки данных на Apache Spark
- Реализовывать алгоритмы и выполнять анализ данных на Scala и Python
- Взаимодействовать с командой для уточнения требований и поставки качественных программных решений
- Диагностировать и отлаживать приложения для оптимизации производительности и улучшения пользовательского опыта
- Следить за трендами и лучшими практиками в области big data
Требования
- Опыт работы с Apache Spark для построения приложений обработки данных в реальном времени
- Сильные навыки программирования на Scala и Python для анализа данных и разработки ПО
- Опыт проектирования и оптимизации масштабируемых высокопроизводительных приложений
- Знание технологий и фреймворков big data
- Умение работать в команде и эффективно коммуницировать
- Сильные навыки решения проблем и внимание к деталям
- Сертификация Cloudera Certified Spark and Hadoop Developer
Навыки
- Apache Spark
- Scala
- Python
- Hadoop
- Big Data