Data & Analytics Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в команду данных и аналитики Apex Service Partners. Отвечает за проектирование и надёжность ключевой инфраструктуры данных: интеграцию источников, потоковые пайплайны и event-driven автоматизацию, с перспективой развития платформы под Agentic AI.

Задачи

• Проектировать, строить и поддерживать event-driven архитектуры данных с потоками в реальном времени и near-real-time
• Разрабатывать и сопровождать потоковые пайплайны для low-latency аналитики и операционных задач
• Строить и поддерживать пайплайны загрузки данных на Python из API, баз данных и стриминговых платформ
• Интегрировать данные между внешними API и внутренними системами, обеспечивая надёжные и документированные потоки
• Проектировать event-driven автоматизацию: системы, которые фиксируют бизнес-событие и запускают downstream-действия в других системах
• Создавать agentic-воркфлоу, которые интерпретируют событие, выбирают действие и выполняют его через API с логированием, обработкой ошибок и human-in-the-loop
• Применять концепции графовых баз данных для моделирования связей (желательно)
• Работать с командой BI/аналитики, чтобы upstream-структуры поддерживали семантические модели и отчётность
• Отвечать за качество данных и надёжность пайплайнов end-to-end
• Участвовать в формировании долгосрочной roadmap архитектуры данных
• Вести несколько параллельных data engineering проектов, сохраняя приоритеты и доводя задачи до конца

Требования

• Bachelor's/master's degree в Computer Science, Data Engineering, IT или смежной области
• 5+ лет опыта в data engineering, включая проектирование и эксплуатацию event-based архитектур (Azure предпочтительно, но не обязательно)
• Опыт работы с потоковыми или near-real-time пайплайнами (Kafka, Event Hubs, Kinesis, Spark Streaming) — сильный плюс
• Уверенное владение Python, фокус на построении фреймворков и пайплайнов загрузки данных; Spark — плюс
• Опыт написания event-driven обработчиков или функций (Azure Functions, AWS Lambda)
• Опыт интеграции и оркестрации данных между множеством API — обязателен
• Опыт с event/messaging инфраструктурой (Kafka, Azure Event Hubs, Azure Service Bus), включая CDC-паттерны
• Практический опыт с инструментом оркестрации воркфлоу (Azure Logic Apps, Airflow или аналог) для условной многошаговой автоматизации
• Опыт построения автоматизации с надёжностью и безопасностью: обработка ошибок, логирование/observability, rollback-safe дизайн
• Знакомство с agentic или LLM-фреймворками (LangChain, Semantic Kernel) — плюс
• Знакомство с графовыми БД (Neo4j, CosmosDB Gremlin API) — желательно, но не обязательно
• Опыт построения или участия в создании data agents и автоматизированных data-воркфлоу — предпочтительно
• Знакомство с Microsoft Fabric/Azure экосистемой (OneLake, Lakehouses, Data Pipelines) — плюс
• Опыт работы с данными Marketing Tech Stack (атрибуция, кампании, customer journey) — сильный плюс
• Аналитическое мышление и ориентация на data-driven решения
• Отличные коммуникативные навыки, умение говорить с разной аудиторией
• Способность вести несколько workstreams в быстро меняющейся среде
• Высокие стандарты к качеству работы, сильная рабочая этика, находчивость
• Умение работать в nimble, lean, неструктурированной предпринимательской среде
• Безупречная честность и этические стандарты

Условия

• Локация: Tampa, FL
• Компенсация: competitive
• Медицинская, стоматологическая и офтальмологическая страховка
• Неограниченный PTO
• 401(k) matching

Навыки

• Python
• Azure Event Hubs
• Azure Service Bus
• Kafka
• Kinesis
• Spark Streaming
• Spark
• Azure Functions
• AWS Lambda
• LangChain
• Semantic Kernel
• Neo4j
• CosmosDB Gremlin API
• Azure Logic Apps
• Airflow
• CDC
• Microsoft Fabric
• OneLake
• Lakehouses
• Data Pipelines
• API integration