Kyndryl
Data Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
AI Data Engineer в Kyndryl: построение высокопроизводительной инфраструктуры данных для автономных систем и agentic AI. Проектирование real-time пайплайнов, векторных хранилищ и семантических слоёв для RAG.
Задачи
- Проектировать и масштабировать пайплайны для Retrieval-Augmented Generation (RAG), превращая неструктурированные IT-логи и документацию в векторные эмбеддинги
- Отвечать за работоспособность и производительность векторных баз данных (Pinecone, Milvus, Weaviate) с субсекундной скоростью поиска
- Строить knowledge graphs и семантические слои для контекста агентов
- Создавать автоматические guardrails для выявления шума, bias и PII до попадания данных в модель
- Выступать связующим звеном между сырыми источниками данных и технической AI-работой, устранять проблемы качества на источнике
- Строить, разворачивать и поддерживать CI/CD пайплайны для инфраструктуры данных
Требования
- Экспертиза в data mining, хранении данных и ETL-процессах
- Опыт разработки пайплайнов данных и работы с инструментами: Glue, Databricks, Synapse или Dataproc
- Опыт работы с реляционными и NoSQL базами: PostgreSQL, DB2, MongoDB
- Сильные навыки решения проблем, аналитическое и критическое мышление
- Умение вести несколько проектов одновременно с высоким вниманием к деталям
- Умение общаться с техническими и нетехническими коллегами и переводить бизнес-требования в технические
Условия
- Гибридный формат работы
- Программы Be Well: поддержка финансового, ментального, физического и социального здоровья
- Доступ к обучению и сертификациям Microsoft, Google, Amazon, коучинг и практический опыт
- Инструменты для построения карьерного пути и персональные цели развития
- Культура инклюзивности и принадлежности
Навыки
- ETL
- Glue
- Databricks
- Synapse
- Dataproc
- PostgreSQL
- DB2
- MongoDB
- NoSQL
- RAG
- Pinecone
- Milvus
- Weaviate
- Vector Embeddings
- Knowledge Graphs
- CI/CD
- Data Modelling
- AWS
- Google Cloud
- Azure
- GitHub
- Visual Studio