Ведущий аналитик-разработчик YandexGPT (Браузер)

Что нужно делать

Создавать метрики качества и датасеты для обучения ML-моделей.

• Мы дообучаем большую LLM YandexGPT-3 под целый ряд задач. По нашему опыту, чтобы получить качественную модель — важнее всего иметь хороший бенчмарк качества и чистый датасет. Именно возможность быстро оценивать качество модели позволяет ML-команде много экспериментировать и двигаться в нужном направлении. Эти разметки используются не только для оценки качества, но и для получения датасетов, в том числе для обучения в режимах Reinforcement Learning. Так что любое изменение в этих процессах может влиять на то, как модель отвечает пользователям.

Проверять гипотезы, проводить А/В-эксперименты и офлайн-замеры качества.

• У нас много идей, как улучшить наши процессы. Кроме этого, надо быстро докатывать улучшения до пользователей. Очень важно выстроить процесс качественного тестирования перед продакшеном и при этом сохранить темп.

Анализировать точки роста.

• Изучать онлайн-сигналы и аспекты качества и на их основе определять точки роста моделей. Превращать эту аналитику в задачи и направления улучшения в ML и продуктовой команде.

Мы ждём, что вы

• Готовы не только быть лидом, но и самостоятельно работать руками.
• Знаете теорию вероятностей и математическую статистику.
• Глубоко владеете SQL, Python, умеете в логи и процессы работы с данными.
• Работали в ML-проектах: с NLP, Crowdsource-разметками и ML.
• Умеете писать аналитический продакшен-код и создавать сложные метрики на основе разметок.
• Можете превратить видение продукта или проекта в иерархию метрик.
• Способны управлять командой аналитиков, поддержки разметок, редакторов, асессоров для контроля качества данных.
• Умеете анализировать данные, строили эффективные процессы их обработки.
• Интересуетесь развитием LLM и их продакшен-применением.
• Имеете опыт работы от 5-ти лет.

Что мы предлагаем

Здоровье

Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят стоматология, ежегодные чекапы, неотложная помощь за рубежом, лечение критических заболеваний, в том числе онкологии, и страхование от несчастных случаев.

А также:

• Психотерапия в офисе или на онлайн-сервисах.
• Лазерная коррекция зрения через год работы.
• Ведение беременности и роды — через два года.

Страховка для родственников по системе 80/20

Мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%.

Рост и развитие

В Яндексе есть всё, чтобы постоянно развиваться и учиться новому: внутренняя образовательная платформа, менторство и программы для начинающих и опытных руководителей.

А также:

• Оплата участия в профильных конференциях.
• Скидка 50% на изучение иностранных языков.

Кроме того, в Яндексе есть внутренние проекты, где наши сотрудники делятся экспертизой, обсуждают сложные темы и разбирают кейсы своих проектов.

Спорт

Во всех крупных офисах Яндекса есть спортзалы со всем необходимым: тренажёрами, спортивным инвентарём, душевыми, шкафчиками для одежды и вещей. Можете заниматься самостоятельно, а можете с корпоративным тренером.

А также:

• Бесплатные онлайн-тренировки с FITMOST.
• Скидки в фитнес-клубах, бассейнах, студиях йоги, скалодромах и других местах.

Спортивный клуб Яндекса

В Яндексе есть спортивный клуб и много спортивных команд. У них есть свои лидеры, чаты, программы тренировок. А ещё они регулярно участвуют в забегах, триатлонах, «Гонке героев», футбольных и других соревнованиях. Вы сможете присоединиться к существующим командам или собрать свою.

И ещё:

• Гибкий график. У нас нет фиксированного времени начала и конца рабочего дня — работайте так, как удобно вам и вашей команде.
• Жилищные займы. Льготная ставка на покупку жилья и улучшение жилищных условий — в зависимости от стажа, позиции и результатов ревью. Действует для сотрудников, работающих в российских офисах Яндекса.
• Всё для детей. Страхование, детские дни в офисе, подарки на рождение детей и чекапы при планировании беременности.