Cato Networks
Software Engineer Data Platform
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Инженер в Data Platform Group компании Cato Networks. Разработка облачной data-платформы: высоконагруженные микросервисы и стриминговые пайплайны на Go и Kafka, обрабатывающие около 1M записей в секунду с низкой задержкой.
Задачи
- Владеть сквозным real-time слоем стриминговой обработки: приём, обогащение, агрегация и маршрутизация высоконагруженных данных с низкой задержкой
- Проектировать и разрабатывать высокопроизводительные сервисы стриминговой обработки на Go на базе Kafka/MSK
- Развивать stateful-пайплайны обработки потоков, включая приложения на Kafka Streams
- Совместно с Product определять, проектировать и реализовывать внешние коннекторы для выгрузки данных в системы клиентов
- Отвечать за производительность и эффективность ресурсов: профилировать и оптимизировать горячие пути, снижать потребление памяти и аллокации, уменьшать вычислительные затраты
- Проектировать отказоустойчивость под нагрузкой: backpressure, партиционирование, consumer groups, порядок, гарантии доставки, идемпотентность
- Исследовать новые технологии стриминговой обработки и адаптировать их в продукте
- Тесно взаимодействовать с Product, DevOps, Security и другими командами Data Platform Group
Требования
- 5+ лет практического опыта проектирования и разработки высоконагруженных низколатентных распределённых систем в продакшене
- Глубокий практический опыт работы с Kafka на значительном масштабе: партиционирование, consumer groups, управление оффсетами, тюнинг producer/consumer, компромиссы throughput vs latency
- Знание основ Go и Java — большое преимущество
- Минимальный практический опыт использования AI-ассистентов кодирования или инструментов разработки для ускорения реализации, тестирования и отладки, с умением проверять сгенерированный код
- Опыт создания и эксплуатации микросервисов в Kubernetes, включая тюнинг resource requests/limits и настройку autoscaling
- Практический опыт с AWS, в частности MSK, EKS и EC2
- Мотивированный самостоятельный learner и сильный problem solver
- Командный игрок с отличными навыками коллаборации и коммуникации
- Степень B.Sc. в Computer Science, Software Engineering или смежной области либо эквивалентный практический опыт
Навыки
- Go
- Java
- Kafka
- Kafka Streams
- MSK
- Kubernetes
- AWS
- EKS
- EC2
- микросервисы
- стриминговая обработка данных
- AI coding assistants