Наша команда занимается поддержкой и доработкой ПО, автоматизирующего критический бизнес процесса банка — регуляторного репортинга. Перед командой стоит задача миграции на новую программную платформу, построенную на современных Open Source-технологиях — Airflow, Python, PySpark, Docker/K8s, Parquet, S3 MinIO, Greenplum.
Стек технологий
- Python.
- PySpark.
- SQL.
- Apache Airflow.
Что делать
- Участвовать в миграции процессов загрузки и обработки данных ХД на целевую платформу.
- Осуществлять код-ревью.
- Реализовывать процессы по загрузке данных и автоматизации расчетов.
- Участвовать в оценке и планировании задач.
- Взаимодействовать с соседними командами, которые разрабатывают и поддерживают целевую платформу в части определения необходимых доработок.
Мы ждем, что вы
- Обладаете опытом работы дата-инженера.
- Имеете опыт работы с PySpark и Airflow.
- Знакомы с различными способами организации хранилищ данных.
- Обладаете хорошим уровнем написания кода (Python или Scala).
- Умеете критически оценивать решения коллег и отстаивать свою точку зрения.
- Обладаете проактивным подходом в решении задач и коммуникации с заказчиками.
Будет плюсом
- Глубокие знания об архитектуре Spark.
- Опыт работы с Kubernetes как средой исполнения Spark-программ.
- Экспертный уровень работы с S3.
Условия
- Полностью дистанционный формат работы или гибрид.
- Возможность выбора оборудования.
- Доплата по больничным, отпуск в январе и мае без потери в заработной плате, корпоративный пенсионный план.
- Широкие возможности по обучению и повышению компетенций за счет внутренней IT-академии, внешних курсов и профессиональных конференций.
- Активные внутренние IT-сообщества.
- Льготные условия на продукты банка, программа корпоративных скидок и многое другое.
- Отличный социальный пакет: ДМС с первого месяца со стоматологией и массажем, страхование выезжающих за рубеж, скидки на корпоративные продукты, тренажерный зал в офисе.
- Еще десятки льгот и бонусов для сотрудников.
