Описание

В транспортную компанию требуется разработчик DWH для работы над проектом.

Опыт работы от 2 лет в качестве инженера данных, разработчика ETL на SQL и Pyspark
Опыт работы с SQL, PostgreSQL, Apache Airflow, с API, веб-сервисами, очередями и другими стандартными технологиями интеграции данных
Оптимизация SQL, в том числе для целей OLAP
Экспертиза в реализации ETL / ELT для хранилищ или озер данных
Навыки работы с Apache Airflow
Создание DAG'ов, управление зависимостями ETL-пайплайнов
Базовый уровень владения Apache Hadoop (Spark, Hive или Impala)
Опыт работы с брокерами сообщений (Kafka, RabbitMQ)
Опыт работы с S3 Minio и Apache Iceberg

Разработчик DWH