Senior Data Engineer

Мы ищем коллегу на позицию Senior Data Engineer в команду, которая занимается разработкой и поддержкой ПО, автоматизирующего критический бизнес-процесс банка — регуляторного репортинга.

Стек команды

• Перед командой стоит задача миграции на новую программную платформу, построенную на современных open-source технологиях — Apache Airflow, Python, PySpark, Docker/Kubernetes, Parquet, S3, MinIO, Greenplum.

Мы вам доверим

• Участвовать в миграции процессов загрузки и обработки данных ХД на целевую платформу.
• Осуществлять код-ревью.
• Реализовывать процессы по загрузке данных и автоматизации расчетов.
• Участвовать в оценке и планировании задач.
• Взаимодействовать с соседними командами, которые разрабатывают и поддерживают целевую платформу в части определения необходимых доработок.

Ожидания

• Опыт работы в роли Data Engineer не менее 3-х лет.
• Опыт работы со Spark и Airflow.
• Знание различных способов организации хранилищ данных.
• Хороший уровень написания кода (Python или Scala).
• Способность критически оценивать решения коллег и отстаивать свою точку зрения.
• Проактивный подход в решении задач и коммуникации с заказчиками.

Будет плюсом

• Глубокие знания об архитектуре Spark.
• Опыт работы с Kubernetes как средой исполнения Spark-программ.
• Экспертный уровень работы с S3.

Условия

• Полностью дистанционный формат работы, а при желании — возможность работать в комфортном современном офисе, гибкий график и отсутствие дресс-кода.
• Возможность работы в аккредитованной IT-компании (при желании).
• Возможность выбора оборудования.
• Доплата по больничным, отпуск в январе и мае без потери в заработной плате, корпоративный пенсионный план.
• Широкие возможности по обучению и повышению компетенций за счет внутренней IT-академии, внешних курсов и профессиональных конференций.
• Активные внутренние IT-сообщества.
• Льготные условия на продукты банка, программа корпоративных скидок и многое другое.
• Отличный социальный пакет: ДМС с первого месяца со стоматологией и массажем, страхование выезжающих за рубеж, скидки на корпоративные продукты, тренажерный зал в офисе.