Разработчик инфраструктуры для RL и оценки качества ИИ-агентов Алисы (C++ / Python)

Алиса — AI-ассистент Яндекса. Наша команда в Алисе строит инфраструктуру для RL, автоматических эвалов и приёмки ИИ-агентов. Мы ищем инженера, который хорошо понимает жизненный цикл ML-моделей и любит строить надёжную и удобную инфраструктуру.

Какие задачи вас ждут

Разработка системы оркестрации RL-окружений

Во время обучения и оценки качества ИИ-агенты взаимодействуют с виртуальными средами (RL-environments). Вам предстоит проектировать и развивать систему, которая управляет этими средами и отвечает за их доступность, стабильность, масштабирование и удобство использования для команд.

Развитие RL-инфраструктуры для обучения ИИ-агентов

Для обучения используется RL — передовой подход к обучению ML, в процессе которого ИИ-агент учится, взаимодействуя с виртуальной средой. Вы будете улучшать сбор траекторий и метрик для обучения, повышать стабильность и эффективность пайплайнов обучения, помогать командам по всему Яндексу обучать и внедрять ИИ-агентов в Алису.

Развитие инфраструктуры оценки качества ИИ-агентов

Важнейшим фактором успеха для ИИ-агентов является их качество. Нужно будет проектировать и разрабатывать инфраструктуру для оценки надёжности, стабильности и безопасности ИИ-агентов: от прогонов на реальных пользовательских запросах до синтетических сценариев, сгенерированных с помощью ML-технологий.

Мы ждем, что вы

• Не менее пяти лет занимались промышленной разработкой на Python или C++ (желательно обеими), отлично разбираетесь в алгоритмах и структурах данных.
• Понимаете жизненный цикл ML: данные → обучение → эвалы → выкладка → мониторинг (без обязательного опыта обучения моделей).
• Работали с контейнерами и оркестраторами, CI/CD, сбором метрик, умеете расследовать и устранять инциденты.
• Аккуратно пишете код, тесты, документацию интерфейсов.

Будет плюсом, если вы

• Имеете продакшн-опыт с распределёнными сервисами: очереди, идемпотентность, ретраи, согласованность, backpressure.
• Работали с RL-фреймворками (VERL/TRL/TorchForge), разрабатывали Gym-совместимые среды или собственные симуляторы.
• Работали с фреймворками ML-инференса: vLLM/SGLang/TensorRT-LLM.

Что мы предлагаем

Здоровье

Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят: стоматология, ежегодные чекапы, неотложная помощь за рубежом, лечение критических заболеваний, в том числе онкологии, и страхование от несчастных случаев.

А также

• Психотерапия в офисе или онлайн-сервисах.
• Лазерная коррекция зрения через год работы.
• Ведение беременности и роды — через два года.

Страховка для родственников по системе 80/20.

• Мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%.

Рост и развитие

В Яндексе есть всё, чтобы постоянно развиваться и учиться новому: внутренняя образовательная платформа, менторство и программы для начинающих и опытных руководителей.

Также мы оплачиваем участие в профильных конференциях — как в качестве спикера, так и в качестве участника.

Кроме того, в Яндексе есть внутренние проекты, где наши сотрудники делятся экспертизой, обсуждают сложные темы и разбирают кейсы своих проектов.

Спорт

Во всех крупных офисах Яндекса есть спортзалы со всем необходимым: тренажёрами, спортивным инвентарём, душевыми, шкафчиками для одежды и вещей. Можете заниматься самостоятельно, а можете с корпоративным тренером.

А также

• Бесплатные онлайн-тренировки с FITMOST.
• Скидки в фитнес-клубах, бассейнах, студиях йоги, скалодромах и других местах.

Спортивный клуб Яндекса

• В Яндексе есть спортивный клуб и много спортивных команд. У них есть свои лидеры, чаты, программы тренировок. А ещё они регулярно участвуют в забегах, триатлонах, «Гонке героев», футбольных и других соревнованиях. Вы сможете присоединиться к существующим командам или собрать свою.

И еще

• Гибкий график. У нас нет фиксированного времени начала и конца рабочего дня — работайте так, как удобно вам и вашей команде.
• Жилищные займы. Льготная ставка на покупку жилья и улучшение жилищных условий — в зависимости от стажа, позиции и результатов ревью. Действует для сотрудников, работающих в российских офисах Яндекса.
• Всё для детей. Страхование, детские дни в офисе, подарки на рождение детей и чекапы при планировании беременности.