Data Engineer

Описание

Responsibilities

• Проектирование и разработка пайплайнов обработки данных
• Поддержка и развитие DWH/ETL-процессов
• Рефакторинг кода
• Аналитика и миграция источников данных в отчетности

Requirements

• Общий опыт коммерческой разработки от 3 лет
• MSSQL: уверенное владение (T-SQL, оптимизация запросов, хранимые процедуры)
• Python: от 2 лет
• Airflow: от 1 года (построение и сопровождение DAG, планирование, мониторинг)
• Понимание принципов построения ETL/ELT-пайплайнов, работы с большими объемами данных, обеспечения отказоустойчивости и идемпотентности загрузок
• Git, уверенное владение SQL
• Опыт проектирования и разработки пайплайнов данных с нуля, участие в архитектурных решениях
• Опыт рефакторинга существующего кода, оптимизации производительности запросов, повышения отказоустойчивости
• Умение разбираться в чужом коде, самостоятельная проработка технических решений, декомпозиция сложных задач
• Опыт работы с инцидентами
• Опыт аналитических задач по изменению источников данных в отчетности (переключение с одной мастер-системы на другую), сверка данных, валидация результатов миграции
• Системы учета задач и документации: Jira, Confluence, GitLab

Nice to have

• Опыт работы в e-com

We offer

• Длительность: долгосрок
• Формат работы: удаленный
• Локация, гражданство РФ
• Вилка: 170-190