Старший BI-разработчик
АвитоМоскваУдалённо
PythonSQLMLClickHouseETLBIData PipelinesELTTrinoRedashVertica
Описание
Ищем опытного BI-разработчика для развития инфраструктуры скоринга в Финтехе Авито. Специалист будет отвечать за построение и поддержку пайплайнов для риск- и ML-моделей, качество и доступность фичей, а также за понятную и надёжную отчётность по ключевым метрикам риск-блока.
Обязанности
- Проектировать и внедрять сквозные пайплайны для риск- и ML-моделей от сырых источников и внешних партнёров до продакшен-фичей и скоринговых решений с учётом требований к задержке и отказоустойчивости
- Разрабатывать и оптимизировать витрины, в том числе для Feature Store, под скоринговые сценарии
- Исследовать фичи
- Профилировать и оптимизировать запросы
- Работать с перекосом данных и узкими местами в производительности
- Настраивать мониторинг качества данных и фичей: пропусков, дрейфа и задержек, создавать чекеры и алерты для раннего выявления проблем в продакшене моделей
- Строить отчётность и дашборды в BI-системах для отслеживания ключевых риск- и продуктовых метрик, загрузки пайплайнов, SLA и SLO
- Исследовать и внедрять улучшения в архитектуру data- и ML-инфраструктуры: оптимизировать стоимость, ускорять пайплайны, переходить на новые сервисные и хранилищные решения совместно с командами платформ
- Взаимодействовать с внешними партнёрами по обмену данными: формировать и согласовывать технические требования к интеграциям, участвовать в тестировании, настраивать проверки качества и стабильности поставок
Требования
- Уверенное владение SQL и умение работать с большими массивами данных: писать и оптимизировать сложные запросы, строить эффективные витрины и представления под аналитические и скоринговые нагрузки
- Уверенное использование Python для работы с данными и инфраструктурой: обработки и валидации данных, написания утилит и сервисных скриптов, интеграции с ML-пайплайнами
- Опыт построения и сопровождения data-, ETL- и ELT-пайплайнов в продакшене, понимание вопросов оркестрации, версионирования, отказоустойчивости и наблюдаемости
- Опыт работы с BI-инструментами: умение проектировать метрики, собирать дашборды, оптимизировать источники и предоставлять бизнесу понятные и надёжные отчёты
- Понимание требований продакшен-среды: умение работать с ограничениями по задержке и ресурсам, следить за SLA, находить и устранять узкие места в производительности
- Умение формулировать и приоритизировать задачи, управлять бэклогом и ожиданиями заинтересованных сторон, работать в условиях быстрого изменения приоритетов
Будет плюсом
- Опыт работы с кластерными СУБД и распределёнными движками: Trino, Vertica, ClickHouse и другими, а также понимание принципов их оптимизации
- Опыт работы в риск- или финтех-домене: понимание специфики скоринга, кредитных рисков, транзакционных данных и регуляторных требований
- Понимание основ ML и жизненного цикла моделей: умение вместе с дата-сайентистами проектировать фичи, поддерживать их консистентность в офлайне и онлайне, настраивать мониторинг дрейфа и деградации
- Участие во взаимодействии с внешними поставщиками данных или партнёрами: согласование и реализация технических интеграций, контроль качества и полноты данных
Условия
- Возможность влиять на бизнес и развитие продукта
- Интересные и разнообразные задачи
- Много качественных данных, мощная инфраструктура и инструменты, любое необходимое железо
- Талантливая команда, сильная аналитическая культура и сообщество профессионалов
- Прозрачная система премий, достойная зарплата — размер обсуждается на собеседовании
- Личный бюджет на обучение, который можно тратить на книги, курсы и конференции
- Расширенная забота о здоровье: ДМС, страхование жизни, онкострахование
- Сервис психологической поддержки, а также финансовые, юридические и ЗОЖ-консультации для вас и ваших близких
- Корпоративный спорт: групповые тренировки, велбиинг-приложение
- Спецпредложения от партнёров и скидки на сервисы Авито: бронирование жилья, услуги продвижения, ипотечное страхование
- Компенсация питания
- Удалёнка или уютный офис в двух минутах от метро «Белорусская»: панорамный вид на центр города, места для уединённой работы и зоны отдыха