Компания больше не ищет сотрудника. Посмотрите похожие предложения
Data Engineer
в Luxoft
220 000 — 290 000 ₽/мес на руки
Технологии/инструменты
Проект по технологической трансформации бэкофисных систем одного из крупнейших Банков, в цели которого входит реализация на новой технологической платформе отчетности Банка внедренных в Калипсо продуктов.
Проект представляет собой участие в мастер-команде по развитию платформы для построения регуляторной, операционной и налоговой отчетности Сбербанка перед регуляторами в рамках технологической трансформации. Платформа представляет собой первую версию Фабрики Данных Банка и представляет собой интеграционное решение, основанное на использовании концепции Единого Семантического слоя (ЕСС) и построенное на базах данных MS SQL Server 2014:
- Интеграция с целевой бэк-офисной системой Банка (Калипсо) по каналам Kafka.
- Интеграция с легаси-системами на платформе Diasoft (Diasoft Dealing, Diasoft Custody Self) по каналам Oracle Golden Gate.
- Интеграция с BIUI платформой QlikView.
- Разработка приложений и расширений под QlikView.
- Перспективная интеграция с бухгалтерской книгой (АЕ ГР) по шинам данных Kafka / TFS.
Дальнейшее развитие платформы предполагает внедрение технологий Big Data/Hadoop.
Команда будет состоять из аналитиков, разработчиков, тестировщиков.
Чем предстоит заниматься
- Участие в интеграционных проектах по развитию Hadoop DWH Сбербанка (Oracle, MSSQL, файловые источники).
- Разработка и проектирование потоков данных и алгоритмов загрузки в хранилище на базе существующих фреймворков банка.
- Разработка сценариев репликации реляционных СУБД с помощью Oracle Goldengate, Informatica в Hadoop.
- Оптимизация и настройка производительности ETL-процессов.
- Анализ и тестирование существующих решений в технологическом стеке Hadoop.
Кого ищем
- Опыт работы в экосистеме Hadoop (Hive или аналоги, Sqoop, Oozie, HDFS, Yarn, Hue).
- Опыт работы в командах сопровождения или развития хранилищ данных.
- Опыт работы с реляционными СУБД (Oracle, MS SQL).
- Знание SQL.
- Знание архитектуры реляционных СУБД (Oracle, MS SQL).
- Навыки работы с Unix shell, написание скриптов.
Будет плюсом:
- Опыт работы с гибкими методологиями и инструментами разработки (Git, Confluence, Jira).
- Опыт работы с Kafka.
Этапы интервью
- Техническое интервью.
- PMI.
- CLI.
О компании Luxoft
Luxoft (инвестиции $102.4 млн.) — это ведущая глобальная компания, оказывающая услуги по формированию digital-стратегии и разработке программного обеспечения. Клиенты — крупные транснациональные корпорации по всему миру. 680+ текущих проектов, 250+ клиентов.