Data Engineer (Wind Team)

О команде

Команда Wind Team в поисках Data Engineer со знанием Python. Продукт — единое аналитическое хранилище данных.

Перед нами стоит амбициозная задача — оптимизировать подходы к построению потоков данных на уровне компании. Нам необходимо объединить данные из разных источников, грамотно организовать процессинг и хранение под потребности смежных подразделений (потребителей данных): продуктовых команд, Analytics, Data Scientists, Business Intelligence, Marketing и т. д.

Чем предстоит заниматься

• Принятие архитектурных решений при разработке системы хранения и обработки данных. Мы не ограничены в принятии решений и можем улучшать систему по своему усмотрению.
• Интеграция и сбор данных из разных внутренних и внешних источников в единое хранилище — Data Warehouse (ETL-процедуры). Автоматизация процессов анализа данных.
• Безопасная организация отправки данных во внутренние и внешние продукты.
• Переход на Event Based модель работы с информационными потоками данных компании для обеспечения их функционирования в режиме over-realtime.
• Написание API.
• Создание систем мониторинга: основных сервисов, data quality, инфраструктуры.

Кого ищем

• Опыт работы от одного года по направлению Data Engineering.
• Уверенное владение Python и SQL.
• Опыт сбора, обработки и преобразования данных.
• Умение грамотно выстраивать потоки данных.
• Понимание подходов по обеспечению Data Quality.
• Опыт работы с различными колоночными и строковыми СУБД. Знание их преимуществ и недостатков, в какой ситуации лучше использовать ту или иную систему.
• Желание и способность автоматизировать рутинные процессы.
• Опыт работы с GitLab CI, Docker, Google Cloud Platform.

Будет плюсом:

• Опыт работы с микросервисной архитектурой.
• Опыт командной разработки.
• Опыт работы с высоконагруженными MPP СУБД.
• Опыт моделирования данных.
• Опыт работы со Streaming Processing.

Что предлагаем

• Удаленная работа. Команда Wind team работает в Санкт-Петербурге, Москве и Перми. Мы привыкли к такому формату сотрудничества, но у нас всегда есть возможность организовать командировки для членов команды из разных городов и собраться (по желанию и договоренности) в нашем уютном офисе в Санкт-Петербурге. Офис находится рядом со ст. м. "Московские ворота".
• Гибкое начало рабочего дня. Ты можешь начинать свой день в период с 9:00 до 12:00.
• Agile-подход к работе (с удовольствием всему научим).
• Тренинги / онлайн-курсы / конференции / книги для прокачивания твоих хард- и софт-скилов.
• Компенсация затрат на спортивные увлечения и хобби (зал / танцы / скалодромы / верховая езда / рисование / вейкборд… Да что угодно! Выбор за тобой!).
• Онлайн-обучение английскому.
• Крутые вечеринки, тимбилдинги и корпоративы в форматах офлайн и онлайн — зависит от ситуации в мире. Нам весело в любом случае.