Ищем разработчика DWH на проект по миграции данных из различных источников в озеро данных Hadoop.
На проекте мы занимаемся загрузкой данных ряда важных сервисов банка в Hadoop для целей последующего анализа. Источником являются топики Kafka, назначением — отдельные БД. Работа осуществляется средствами Airflow.
Мы формируем команду и в поиске специалистов разного уровня от мидлов до архитектора приложения.
Технологии/инструменты
SQLArenadata HadoopAirflowPythonSpark
Задачи
Согласование требований, принципов реализации и выбранного решения с заказчиками, технологами, экспертами.
Участие в оценке и распределении задач внутри команды.
Создание ETL потоков (обязательно построение инкрементальной загрузки).
Осуществление контроля корректности результатов по итогу разработки.
Работа с системой контроля версий Git (ветвления, коммиты, пул-реквесты).
Ожидания
Опыт работы на проектах построения Хранилищ данных в качестве разработчика.
Опыт разработки ETL-потоков.
Опыт работы с Airflow.
Опыт работы: 3-6 лет.
Будет плюсом:
Опыт программирования на Scala/Python.
Условия
Официальное трудоустройство по ТК РФ.
График работы 5/2.
Day off (4 дня в год).
Гибкое утро.
Техника для работы.
ДМС (с 3-го месяца работы, которое включает в себя стоматологию+ВЗР).
Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, корпоративные спортивные мероприятия; мотивационные награждения.
Елена Сафонова IT Recruiter
О компании Neoflex
Сфера
Заказная разработка / Аутсорсинг
Размер
1001+
Neoflex создает ИТ-платформы для цифровой трансформации бизнеса, помогая заказчикам получать устойчивые конкурентные преимущества в цифровую эпоху. Среди заказчиков более половины российских банков, входящих в топ-100, а также компании из 21 страны Европы, Азии и Африки.
