Все вакансииData EngineeringМоскваMiddle

Data Engineer (AI)

в VK

от 250 000 ₽/мес на руки

📍 Москва (м. Павелецкая)Офис или гибрид

Специализация

Data Engineering

Уровень

Middle

Требуемый опыт

3+ лет

Технологии/инструменты

PythonSQLAirflow

Мы развиваем технологии искусственного интеллекта для ключевых продуктов VK, создаем систему рекомендаций и поиска контента на наших платформах.

Задачи

Построение новых и оптимизация существующих ETL- и ELT-процессов в одном из самых больших хранилищ данных в России.
Разработка витрин данных совместно с аналитиками, доставка их до production.
Разработка и внедрение CI/CD-пайплайнов.
Разработка новых и доработка существующих модулей аналитической платформы.

Требования

Уверенное владение SQL на уровне написания сложных запросов (аналитические функции, timeseries-аналитика).
Уверенное владение Python (ООП, структуры данных, алгоритмы).
Опыт работы с Airflow.
Умение и желание разбираться в сложных процессах преобразования данных.
Опыт работы с большими объемами данных.

Будет плюсом

Опыт разработки на Scala.
Опыт работы с Apache Spark.
Опыт работы с YTSaurus.
Опыт работы с ClickHouse.

Александра Очеретова IT-Recruiter

О компании VK

Сфера

Продуктовая компания

Инвестиции

$100M+

Размер

1001+

VK (200+ технологичных проектов) делает современные и быстрые интернет-сервисы, доступные каждому. Каждый день миллионы россиян общаются ВКонтакте и в Одноклассниках, слушают VK Музыку и смотрят VK Клипы, скачивают приложения в RuStore, создают и читают контент в Дзене, играют в игры на VK Play, продают вещи на Юле и становятся умнее со SkillBox и GeekBrains. Штаб-квартира расположена в Москве, также есть представительства в 14 городах по всему миру.