Senior Software Engineer (Big Data)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Big Data инженер в Bitsight для развития пайплайна Security Ratings: сбор, агрегация и анализ данных в масштабе интернета на базе AWS. Работа с большими объёмами данных, облачными хранилищами и алгоритмом рейтинга совместно с data science и research командами.

Задачи

• Проектировать и развивать масштабный пайплайн обработки данных
• Собирать, агрегировать и анализировать данные в больших объёмах
• Интегрировать новые источники данных и выводить новые фичи из существующих данных
• Совершенствовать алгоритм рейтинга
• Развивать пайплайн для больших объёмов через облачные data warehouse
• Работать в тесной команде с data science и research
• Участвовать в непрерывной инкрементальной разработке

Требования

• Опыт построения и эксплуатации крупномасштабных data pipeline
• Сильное владение современным Java
• Фундаментальные знания computer science: проектирование, структуры данных, алгоритмы
• Опыт работы в команде инженеров, дизайнеров и product owner над продуктом
• Отличные навыки письменной и устной коммуникации на английском

Условия

• Remote - US Only (предпочтительно Boston или Raleigh)
• Базовая зарплата $135,000–$150,000 в год
• Участие в bonus/commission плане и equity grant
• Медицинская, стоматологическая и vision страховка
• Оплачиваемый родительский отпуск
• Гибкий отпуск
• 401(k) с взносами сотрудника и компании
• Страхование жизни и инвалидности
• Компенсация обучения

Навыки

• Java
• Python
• Hadoop
• Spark
• Apache Iceberg
• Elasticsearch
• OpenSearch
• CI/CD
• Kubernetes
• AWS
• GitHub Copilot
• Cursor
• LLM