Инженер по данным (Python)

Описание

Мы ищем инженера по данным с опытом коммерческой разработки интеграций на Python для работы над проектом в сфере лотерей.

Обязанности

• Разработка кастомных коннекторов (Ingestion Framework)
• Разработка скриптов миграции метаданных
• Автоматизация через SDK
• Настройка и оркестрация пайплайнов в Airflow

Требования

• Опыт от 3 лет коммерческой разработки интеграций на Python
• Уверенный Python (Pydantic, классы, генераторы)
• Понимание архитектуры Source → Sink в OpenMetadata
• Опыт работы с Airflow и SQL
• Знание, как использовать AI-инструменты для скаффолдинга коннекторов (команда scaffold-connector), чтобы ускорить разработку
• Практический опыт с Kafka или RabbitMQ в production (consumer groups, DLQ, гарантии доставки)
• Опыт с gRPC / Protobuf и Redis (reactive Lettuce, кеширование, TTL)
• Опыт с Docker, Kubernetes, CI/CD и observability (Micrometer, Prometheus, Grafana, OpenTelemetry)
• Стек: Python, Pydantic, Apache Airflow, OpenMetadata (Server + Ingestion Framework), PostgreSQL, REST API, OpenMetadata SDK

Будет плюсом

• Высшее IT образование

Условия

• Период привлечения: с 16.11.2026 по 31.01.2027