ETL Developer

Описание проекта

Наша Agile-команда создает информационную платформу GM TA (Global Markets Trading Analytics) в интересах Департамента Глобальных Рынков (ДГР).

ДГР — предоставляет корпоративным и розничным клиентам широкий спектр продуктов и услуг на локальных и зарубежных финансовых рынках. Ключевые направления бизнеса — Fx trading, Commodities, Equity, Founding, Fixed Income, Rates, Credit Valuation Adjustment, Structured Products, Investment Banking.

Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью:

• Поддержки регулярных бизнес-операций.
• Проведения Ad hoc анализа.
• Подготовки регулярной аналитической / управленческой отчетности.
• Разработки моделей машинного обучения, направленных на решение широкого спектра прикладных задач прогнозирования, классификации, кластеризации, выявления поведенческих паттернов и отклонений от них, сентимент-анализ и т.д.

Разрабатываемая нами информационная платформа — высоконагруженное решение, призванное обеспечить достижение всех этих целей.

Обязанности

Процессы сбора данных (практика использования конкретных инструментов):

• ETL / ELT.
• Интеграционные шины.
• Оркестраторы.
• Streaming и Batch режимы загрузки данныx.

Работа с базами данных SQL:

• ANSI SQL.
• Процедурный SQL.
• Оптимизация SQL-запросов.
• Транзакции в T-SQL (Oracle).
• Индексы в T-SQL (Oracle).
• Опыт работы с аналитическими (оконными) функциями.

Использование Kubernetes, Docker, OpenShift, Grafana.

Требования

ETL / ELT + Python от 1 до 2+ лет опыта работы.

Один из оркестраторов:

• Informatica PowerCenter / IBM Datastage / Oracle Data Integrator / Talend Data Integration / Pentaho Data Integration / Apache Airflow / Apache Oozie.
• Один или несколько инструментов от 2 до 3+ лет опыта работы.

Знание SQL / NoSQL / MPP базы данных (одна или несколько баз данных):

• Включая ANSI SQL, процедурный SQL, оптимизация SQL-запросов, транзакции, индексы, опыт работы с аналитическими(оконными) функциями.
• Включая знание сущностных отношений, 1NF, 2NF, 3NF, многомерного моделирования (star схема, snowflake схема, Data Vault), архитектур построения хранилищ.

Желательные требования:

Kubernetes, Docker, OpenShift, Grafana.

Условия

• Полностью удаленный формат работы.
• Участие в проектах для крупных коммерческих компаний и банков.
• Современный подход к обучению и развитию сотрудников.
• Стабильный доход, который мы обсудим при встрече индивидуально.
• Индивидуальный план развития по итогам регулярных аттестаций.
• В качестве приятных бонусов: ДМС со стоматологией для сотрудников и их родственников, обучение и сертификация, скидки на курсы и фитнес.
• Трудоустройство в штат на бессрочный трудовой договор.