Компания больше не ищет сотрудника. Посмотрите похожие предложения
Senior Data Engineer
в United Credit Bureau
300 000 — 350 000 ₽/мес на руки
Технологии/инструменты
Объединенное Кредитное Бюро — крупнейшее Бюро кредитных историй в России.
Мы не выдаем кредиты, мы храним и обрабатываем крупнейший в России массив данных о кредитных историях. Наш уникальный ресурс — самая большая база данных, в которой более 560 миллионов кредитных историй, и мы уделяем большое внимание не только количеству данных, но и качеству их обработки.
Мы помогаем нашим частным клиентам контролировать свою кредитную историю и получать лучшие финансовые предложения, а компаниям — принимать взвешенные решения и оценивать риски на основе аналитики данных.
Мы строим нашу инфраструктуру данных без легаси с использованием современного стека и подходов. Мы занимаемся имплементацией и развитием Data Lake Gen 3 и аналитической платформы данных, строим витрины данных, внедряем лучшие практики обработки и доставки данных в компании, реализуем MLOps, следим за качеством и «чистотой» данных.
Чем предстоит заниматься
- Разрабатывать пайплайны загрузки данных из различных источников (РСУБД, NoSQL, Files, Streaming) в Data Lake.
- Реализовать PoC (MVP) с использованием новых инструментов и технологий.
- Оптимизировать процессы хранения и обработки данных с использованием современных технологии и подходов.
- Реализовывать распределенные алгоритмы на больших данных.
- Заниматься продукционализацией моделей машинного обучения.
Что для нас важно
- Профильное образование: информационные технологии, статистика, математика.
- Опыт коммерческой разработки от 5 лет.
- Основной язык программирования — Scala / Python.
- Отличные навыки — SQL.
- Опыт работы с Apache Spark, Apache Spark Structured Streaming, Flink, Kafka.
- Опыт работы с экосистемой кластера Hadoop (CDP, Arenadata, Hortonworks).
- Опыт работы с БД: Oracle, Postgre, Greenplum, HBase.
- Опыт работы с Apache Airflow и Apache NiFi.
Будет плюсом:
- Опыт работы с табличным форматом хранения данных Delta lake.
- Опыт работы разработки приложений распределенных вычислений и обработки данных на Apache Flink.
- Опыт работы с Data Science в части доставки данных и продукционализации моделей машинного обучения.
- Опыт построения Data lineage.
- Опыт работы с БД: Cassandra, Redis.
- Опыт работы с Feast.
Мы предлагаем
- Достойную твоего профессионального уровня зарплату и очень приятный годовой бонус.
- Возможности для твоего неизбежного развития: тебя ждут сложные и интересные задачи с использованием большого массива данных, внешнее и внутреннее обучение.
- Комфортные условия труда: работа из дома или из офиса ст. м. Павелецкая (5 минут от метро).
- Гибкий график: начало рабочего дня — с 8:00 до 11:00 — выбираете сами.
- Современную технику для комфортной работы: выдаём ThinkPad.
- Заботу о здоровье: оформим полис ДМС со стоматологией, дадим 3 дополнительных дня к отпуску, компенсируем затраты на абонемент в зал.
- По-настоящему дружескую атмосферу: поддерживаем, когда вы приводите своих друзей, и выплачиваем реферальный бонус.
О компании United Credit Bureau
Объединённое Кредитное Бюро — одно из крупнейших бюро кредитных историй России. В числе клиентов более 600 банков, МФО, страховых компаний и операторов сотовой связи. Акционеры: Сбербанк России, Experian, Интерфакс.