Senior Deep Learning Research Engineer (Diffusion-модели)

Разрабатываем и внедряем передовые методы мультимодальной генерации. Используются следующие модальности — на входе изображения/текст/звук/видео, на выходе — видео/звук. Фокус — разработка новых архитектур, обучение больших моделей (десятки/сотни миллиардов параметров), оптимизация и удешевление инференса.

Обязанности

• Исследование и разработка новых методов мультимодальной генерации (исследование существующих архитектур и разработка новых).
• Исследование и разработка методов генерации image to video, first-last frame to video, video continuation. Оптимизация пайплайна обучения и инференса — сбор датасета, разработка архитектуры модели, обучение, оценка, оптимизация скорости инференса и стоимости генерации.
• Исследование и разработка методов генерации text(image) to video+audio. Оптимизация пайплайна обучения и инференса — сбор датасета, разработка архитектуры модели, обучение, оценка, оптимизация скорости инференса и стоимости генерации.
• Совместная работа с командами опенсорса и продуктовой в целях стабильного и быстрого инференса моделей в разных средах и на разных поверхностях — GigaChat/ComfyUI/diffusers etc.
• Техническое описание разработанных решений — статьи, документирование, техрепорт.

Требования

• Экспертный уровень Python, PyTorch.
• Опыт разработки моделей аудио/видеогенерации.
• Глубокое понимание методов обучения/распределенного обучения.
• Понимание архитектур современных LLM и Diffusion-моделей.
• Опыт работы с диффузионными моделями.

Плюсом будет опыт в классических задачах аудио/видео обработки. Цифровая обработка сигналов/компрессия/шумоподавление.

Условия

• Комфортный современный офис рядом с м. Кутузовская.
• Формат работы гибрид.
• Ежегодный пересмотр зарплаты, квартальная и годовая премия.
• Корпоративный спортзал и зоны отдыха.
• Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
• Программа адаптации и помощь руководителя на старте.
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
• Ипотека выгоднее до 7% для каждого сотрудника.
• Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров.
• Вознаграждение за рекомендацию друзей в команду Сбера.