Data Engineer

О направлении

• Развитие ДАТА-практики охватывает контур компании и ее ключевых партнеров по цепочке создания ценности и предусматривает внедрение корпоративной платформы данных, включая построение классического DWH и озера данных (Data Lake), разработку приложений BI-аналитики и отчетности на платформе, обеспечение процессов интеграции данных.
• Работа организована по продуктовым командам, в которые входят представители бизнеса и ИТ (продакты, дата-инженеры, специалисты Data Science, аналитики данных и специалисты ИТ, отвечающие за сервисы платформы данных).

Обязанности

• Сбор и обработка данных из различных источников для проектов построения ML-моделей прогнозирования и ad-hoc аналитики по запросам бизнес-функций маркетинга, HR и финансов.
• Анализ требований ко входящим потокам данных.
• Проектирование потоков данных и схем загрузки.
• Профилирование и очистка данных.
• Разработка скриптов трансформации данных.
• Разработка интеграционного взаимодействия (REST API).
• Подготовка витрин данных и поставка данных для контента в аналитические приложения.
• Проведение ревью кода и участие в программе менторинга джуниор дата-инженеров команды.

Наши пожелания к знаниям и опыту

• Высшее образование.
• Опыт работы в роли дата-инженера / аналитика данных в продуктовых командах либо опыт участия в проектах построения DWH и Data Lake в роли ETL-разработчика — от 2 лет.
• Твердые знания Python.
• Навыки оптимизации SQL-запросов и опыт разработки на PostgreSQL, ClickHouse.
• Опыт построения потоков данных (предпочтительно Ni-Fi, AirFlow).
• Практические навыки работы с данными на кластере Hadoop или S3.
• Опыт написания задач для Spark, Kafka.
• Базовые навыки MLOps (в объеме самообслуживания).
• Предпочтителен опыт работы с Яндекс Облаком и/или Сбер Cloud.
• Умение писать чистый поддерживаемый код и техническую документацию.

Мы предлагаем

• Работа в масштабном бренде в сфере быстрого обслуживания с уникальной историей.
• Достойный уровень оплаты труда.
• Продвинутая система бенефитов (годовой бонус, ДМС, мобильная связь, частичная компенсация фитнеса, 3-х летний накопительный план от оклада и премий).
• Гибридный график работы.
• Профессиональное развитие и карьерный рост.
• Возможность принять участие в цифровой трансформации масштабного бренда.