Senior DL/GenAI Research Engineer (Diffusion Video Generation & World Model Development)

Разрабатываем на базе видео-генерации Kandinsky первую Российскую Модель Мира. На входе описание, кадр, сценарий или набор действий или инструкций, на выходе интерактивная сцена. Фокус — разработка новых архитектур и трюков, обучение больших моделей (десятки/сотни миллиардов параметров), оптимизация инференса.

Обязанности

• Исследование и разработка в области видео-генерации и моделей мира (исследование существующих архитектур и разработка новых).
• Работа над различными аспектами проектной деятельности: чтение статей и построение гипотез, планирование и постановка экспериментов, включая сбор и подготовку данных (если потребуется), обработка и анализ результатов, защита пруф оф консепта, представление результатов на отчетных мероприятиях, написание статей и технической литературы.
• Работа над такими тематиками, как улучшение физичности генерации, измерение и улучшение пространственно-временной консистентности, внедрение контекста управления в генерацию, всякого рода оптимизация нацеленная на усиление стабильности авторегрессии и ускорение генерации, и другими модулями моделей мира.
• Совместная работа как в команде над построением Модели Мира, так и с другими командами отвечающими за сбор и подготовку данных, подготовку претрейна, пост-трейна, оптимизацию, опенсорс, прод и др.
• Взаимодействие с командами партнеров для адаптации и внедрения модели (беспилотный транспорт, роботехника, видеоигровая индустрия).

Требования

• Экспертный уровень Python, PyTorch.
• Глубокое понимание ML/DL/CV и visual GenAI.
• Опыт в классических задачах обработки изображений и видео.
• Опыт процессинга больших видеоданных.
• Опыт работы с диффузионными моделями.
• Понимание методов обучения/распределенного обучения.
• Понимание архитектур современных LLM и Diffusion-моделей.
• Понимание метрик измерения качества видео.

Бонус:

• Понимание 3D и его связи с изображением/видео (облака точек, карты глубины, воксели, mesh, NeRF, Gaussian splats и тд.).
• Понимание принципов RL.
• Понимание цифровой обработки сигналов, компрессии и каких-то улучшайзеров.
• Понимание концепции беспилотного авто или роботостроения.
• Умение объяснять сложные вещи простым языком.

Условия

• Комфортный современный офис рядом с м. Кутузовская.
• Формат работы гибрид.
• Ежегодный пересмотр зарплаты, квартальная и годовая премия.
• Корпоративный спортзал и зоны отдыха.
• Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
• Программа адаптации и помощь руководителя на старте.
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
• Ипотека выгоднее до 7% для каждого сотрудника.
• Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров.
• Вознаграждение за рекомендацию друзей в команду Сбера.