Data Engineer

Описание проекта

Наша команда создает информационную платформу для решения аналитических и исследовательских задач в области создания продуктов и услуг на мировых финансовых рынках:

• Торговля валютой.
• Ценными бумагами.
• Производными финансовыми инструментами.

Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться с целью:

• Разработки витрин данных и моделей машинного обучения.
• Подготовки регулярной аналитической и управленческой отчетности.
• Поддержки регулярных бизнес-операций.
• Проведения Ad hoc анализа.

Разрабатываемая нами информационная платформа — высоконагруженное решение, призванное обеспечить достижение всех этих целей.

Обязанности

• Разработка и тестирование ETL-потоков (Greenplum / Hadoop / Spark).
• Разработка сервисов на Python.
• Написание и оптимизация сложных SQL-запросов.
• Анализ ТЗ на разработку от аналитика.
• Согласование Функциональных требований с архитектором.
• Участие в проектирование технической реализации решения.
• Подготовка документации к релизу.
• Работа с JIRA, составление базы знаний в Confluence.

Ожидания

• Опыт работы на позиции дата инженером (Data Engineer) от 2 лет.
• Опыт в разработке ETL-процессов от 1 года.
• Опыт работы с Python от 1-2-х лет, продвинутый уровень.
• Продвинутый уровень SQL (PostgreSQL / Oracle / Greenplum, сложные запросы, оконные функции, оптимизация).
• Понимание основных подходов проектирования DWH- и ETL-процессов.
• Готовность к большому объему общения, коммуникабельность.

Будет плюсом:

• Базовые знания банковских продуктов и принципов банковского бизнеса.
• Опыт работы с Data Vault, Data Quality.
• Понимание MPP архитектуры БД.
• Опыт с Hive / Spark / Kafka.
• Опыт разработки сервисов.
• Знание мат. статистики, теории вероятностей.
• Английский на уровне чтения технической документации.
• Опыт командной работы с использованием Jira, Confluence.

Условия

• Работа в аккредитованной компании.
• Участие в проектах для крупных коммерческих компаний.
• Современный подход к обучению и развитию сотрудников.
• Стабильный доход, который обсуждается индивидуально.
• Приятные бонусы: ДМС со стоматологией для сотрудников, возможность подключить родственников к программе ДМС, обучение и сертификация, скидки на курсы, фитнес и многое другое.