DWH Team Lead

MAGNIT TECH — технологичный драйвер одного из крупнейших ритейлеров страны. Мы создаём будущее: от решений в области автономной логистики с полностью автоматизированными распределительными центрами до исследований потенциала квантовых вычислений.

• Для тех, кто УСТАЛ от бюрократии и бесконечных ограничений, где команды будто живут в разных мирах, а страсть гаснет под тяжестью правил и процедур.
• Для тех, кто ЖАЖДЕТ атмосферы раннего IT — где царит драйв и свобода, где чувствуешь себя первооткрывателем, движешься в одном ритме с командой и создаешь то, что действительно меняет мир.
• Для новаторов, которые не видят границ между технологиями и творчеством.

Чем ты будешь заниматься

• Участвовать в миграции хранилища данных на новые технологии, используя наш фреймворк.
• Управлять командой разработки от 3 человек.
• Оценивать, планировать и согласовывать работы с заказчиком и командой аналитики.
• Нанимать, онбордить и развивать свою команду.
• Участвовать в подготовке предложений по доработкам фреймворка и инструментов.
• Создавать новые и развивать старые интеграции по загрузке сырых данных в DataLake.
• Разрабатывать pipeline'ов доставки и обработки данных в детальный слой и витрины данных.
• Писать и оптимизировать сложные скрипты обработки данных.
• Прорабатывать локальные архитектурные решения.

Стек технологий

• Impala, Trino, S3, Iceberg, Spark, Airflow, OMD, Python, GitLab, ClickHouse.

Мы ожидаем

• Опыт в разработке хранилищ данных — минимум 4 года.
• Управление командой от трех человек более 1 года.
• Мастерство написания SQL-кода и работы с реляционными БД на экспертном уровне.
• Опыт разработки разнообразных pipeline'ов доставки и обработки данных.
• Понимание типовых паттернов технических решений в области ETL/ELT-процессов и алгоритмов.