Team Lead Data Engineer

Чем предстоит заниматься

• Принимать участие в стратегических и тактических инициативах руководящей команды.
• Декомпозировать бизнес-требования на задачи, распределять их в команде и контролировать выполнение.
• Загружать данные из различных источников (как внутренние БД, так и внешние аналитические / маркетинговые платформы и т.д.) в DWH и Datalake.
• Реализовать PoC (MVP) с использованием новых инструментов и технологий. Оптимизировать процессы хранения и обработки данных с использованием облачные технологии и подходов.
• Осуществлять миграцию текущей облачной инфраструктуры на собственную инфраструктуру (вплоть до bare metal).

Ожидания

• Опыт в проектировании и разработке DWH (у нас DataVault на Greenplum).
• Глубокое понимание организации процессов обмена информацией.
• Уверенное владение Spark стеком. Мы пишем на Scala. Есть как Batch, так и Streaming. Необходимы знания оптимизаций.
• Опыт работы с Apache Kafka.
• Опыт с Apache AirFlow.
• Опыт работы с ClickHouse.
• Опыт работы с реляционными СУБД (у нас MySQL и PostgreSQL).

Будет плюсом:

• Проработка целевой архитектуры потоков данных на уровне компании.
• Управление командой от 10 человек.
• Навыки организации сбора требований и управления ожиданиями.
• Коммуникация с основными стейкхолдерами, планирование и реализация внутренних проектов.

Мы предлагаем

• Можешь выбрать свой соцпакет — ДМС, спорт, промокоды на заказ продуктов или билеты в отпуск.
• Работаем удаленно. В Москве есть большой и красивый офис, поэтому если ты хочешь работать в нём или будешь проездом — welcome.
• Предоставляем технику для работы на твой выбор.
• Помогаем интеллектуально и физически развиваться (электронная библиотека, книжный клуб, футбол).
• Мы уделяем большое внимание обучению и развитию сотрудников, поэтому в нашей knowledge base ты найдёшь много интересных курсов, книг и записей конференций.

А еще:

• Мы сами участвуем в конференциях, как спикеры.
• Проводим внутренние митапы и дискуссионные клубы.
• Не боимся экспериментировать с новыми решениями и технологиями.
• Заботимся о сотрудниках, в компании есть специалист по здоровью на случай, если заболел ты или кто-то из родных. Психолог для разговоров по душам и команда счастья для неформальных мероприятий и внерабочих активностей.