Назад к вакансиям

ML-разработчик в команду VLM-оператора в Генеративные технологии

LLMMLNLPComputer VisionCVVLMRLharness

Описание

Наша команда занимается разработкой computer-use-агентов, которые проходят тест-кейсы в интерфейсах и приложениях Яндекса — смотрят на экран, кликают, проверяют результат. Это помогает экономить время на рутинных тестах и сокращает время на выпуск версий. Работа — на стыке harness и моделей, которых мы дообучаем через SFT/RL.

Обязанности

  • Развитие harness: строить эффективную (как по токенам, так и по скорости) обвязку вокруг модели
  • Разработка базы знаний по большой вариации тест-кейсов
  • Улучшение планера
  • Разработка верификаторов и тулов
  • Агентское планирование в модели: обучать модель эффективным стратегиям и работе в harness для сохранения эффективности и нахождения оптимальных путей решения задач при увеличении инструментов и сложности тест-кейсов

Требования

  • Понимание, как строятся VLM-агенты и tool calling, работали с ними
  • Разбираетесь с RL в интерактивных средах
  • Хорошо знаете NLP/CV, особенно LLM/VLM
  • Умеете решать ML-задачи полного цикла — от сбора разметки до внедрения в продакшен

Будет плюсом

  • Понимание ограничений современных VLM
  • Следите за трендами в области агентов и tool-augmented-моделей

Условия

  • Сотрудники Яндекса бесплатно участвуют в профильных конференциях
  • Для тех, кто выступает на конференциях, есть школа подготовки спикеров
  • Полный список бонусов доступен по ссылке полный список тут

Процесс отбора

  • Откликайтесь на вакансию на сайте на нашем сайте