Аналитик в отдел аналитики и метрик

В Поиске мы тратим значительные ресурсы на получение качественных размеченных данных — основы для всех наших ML-моделей. На это уходит очень много денег и очень много времени. Наша команда реализует амбициозный проект по оптимизации этих расходов, заменяя ручные разметки автоматическими с помощью актуальных ML-моделей. Мы стремимся значительно сократить затраты на разметки в проектах Поиска, оставив профессиональных асессоров только для сложных случаев, требующих особого внимания. Ожидаем значительного импакта как в сокращении денежных затрат, так и в ускорении всех наших ML-процессов.

Какие задачи вас ждут

• Обучение и помощь командам в переходе на разметки с помощью LLM.

Вам предстоит обучать коллег написанию промптов, реализовывать эффективные шаблоны для ключевых типов разметок, разрабатывать удобные инструменты для применения LLM. Нужно собирать полезные советы для промпт-инженеров и помогать в организации семинаров.

• Разработка критериев внедрения ML-разметок.

Вы будете формулировать количественные и качественные критерии, по которым будет определяться возможность перехода от ручных разметок к моделям в действующих проектах. В тех случаях, когда полностью отказаться от краудсорсинга невозможно, необходимо будет разработать принципы и условия частичного перехода на модели.

• Повышение качества работы YandexGPT для задач разметки.

Нужно будет собирать промпты для команды YandexGPT и вместе с ней добиваться самого высокого качества для задач разметок, формулируя требования к модели, анализируя ошибки и предлагая направления для улучшения.

Мы ждем, что вы

• Обладаете аналитическим складом ума и опытом работы с данными.
• Хорошо знаете Python и SQL для анализа и обработки данных.
• Понимаете принципы работы современных языковых моделей (LLM).
• Умеете оценивать качество моделей машинного обучения и интерпретировать метрики.
• Способны ясно формулировать требования к инструментам и системам.
• Умеете общаться в команде, ясно излагать мысли, понимать и убеждать коллег.

Будет плюсом, если вы

• Имеете опыт работы с крауд-платформами (Яндекс Задания, Толока, MTurk или аналоги).
• Участвовали в разработке или настройке языковых моделей.
• Знакомы с промпт-инжинирингом для генеративных моделей.
• Работали в проектах по оптимизации процессов или сокращению расходов.
• Понимаете специфику разметки данных для поисковых систем.

Условия

Здоровье

Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят: стоматология, ежегодные чекапы, неотложная помощь за рубежом, лечение критических заболеваний, в том числе онкологии, и страхование от несчастных случаев.

А также

• Психотерапия в офисе или онлайн-сервисах.
• Лазерная коррекция зрения через год работы.
• Ведение беременности и роды — через два года.

Страховка для родственников по системе 80/20

• Мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%.

Рост и развитие

В Яндексе есть всё, чтобы постоянно развиваться и учиться новому: внутренняя образовательная платформа, менторство и программы для начинающих и опытных руководителей.

Также мы оплачиваем участие в профильных конференциях — как в качестве спикера, так и в качестве участника.

Кроме того, в Яндексе есть внутренние проекты, где наши сотрудники делятся экспертизой, обсуждают сложные темы и разбирают кейсы своих проектов.

Спорт

Во всех крупных офисах Яндекса есть спортзалы со всем необходимым: тренажёрами, спортивным инвентарём, душевыми, шкафчиками для одежды и вещей. Можете заниматься самостоятельно, а можете с корпоративным тренером.

А также

• Бесплатные онлайн-тренировки с FITMOST.
• Скидки в фитнес-клубах, бассейнах, студиях йоги, скалодромах и других местах.

Спортивный клуб Яндекса

• В Яндексе есть спортивный клуб и много спортивных команд. У них есть свои лидеры, чаты, программы тренировок. А ещё они регулярно участвуют в забегах, триатлонах, «Гонке героев», футбольных и других соревнованиях. Вы сможете присоединиться к существующим командам или собрать свою.

И еще

• Гибкий график. У нас нет фиксированного времени начала и конца рабочего дня — работайте так, как удобно вам и вашей команде.
• Жилищные займы. Льготная ставка на покупку жилья и улучшение жилищных условий — в зависимости от стажа, позиции и результатов ревью. Действует для сотрудников, работающих в российских офисах Яндекса.
• Всё для детей. Страхование, детские дни в офисе, подарки на рождение детей и чекапы при планировании беременности.