Назад к вакансиям

QA Specialist (Data Engineering)

до 260 000 ₽в месяц
УдалённоКонтракт
PythonSQLGitGitLab CIApache SparkS3Big DataData LakeParquetORC

Описание

Условия

  • Заработная плата до 260 000 рублей на руки
  • Оформление: ИП, СЗ
  • Срок проекта: 6 месяцев
  • Формат работы: удаленный

Требования

  • Опыт тестировании бэкенд-систем в Big Data
  • Знание Python, SQL (оконные функции, CTE, оптимизация запросов), понимание различий в диалектах SQL (Trino/StarRocks vs PostgreSQL), Git, GitLab CI/CD
  • Понимание архитектуры Data Lake / Data Lakehouse
  • Опыт работы с S3, Parquet/ORC форматами
  • Базовое понимание работы Apache Spark или Flink
  • Опыт с pytest, unittest
  • Опыт работы с инструментами мониторинга для анализа метрик пайплайнов
  • Опыт работы с PostgreSQL

Будет плюсом

  • Опыт работы с Apache Airflow
  • Опыт использования инструментов Data Quality
  • Знание протоколов Kafka
  • Опыт работы с Docker/Kubernetes для развертывания тестовых окружений
  • Понимание принципов ACID-транзакций в контексте распределенных систем
  • Опыт работы с Timeseries DB (InfluxDB, TimescaleDB)