Компания больше не ищет сотрудника. Посмотрите похожие предложения
Data Engineer
в Цифровые привычки
290 000 — 300 000 ₽/мес на руки
Технологии/инструменты
Мы занимаемся созданием АС (автоматизированной системы) по анализу и мониторингу контрактов юридических лиц с микросервисной архитектурой.
Наша задача — создание рабочего места для автоматизации работы сотрудников кредитного анализа и мониторинга сотрудников мониторинга и поставка алгоритмов на больших данных, интегрируясь с множеством внутренних и внешних источников и автоматизированными системами корпоративных клиентов.
Мы работаем по Scrum с активным привлечением бизнес-аналитиков (Customer Journey Expert) и пользователей из бизнес-подразделений. В команде представлены компетенции: разработчики Backend и Frontend, системные аналитики, QA-инженеры.
Ищем Data Engineer, уровня Middle и выше, в команду разработчиков для нового проекта. Основная задача — работа по расширению имеющейся витрины данных (ВД) в рамках текущей ИТ-архитектуры, создание новой ВД. Многозадачность, работа в команде — основные черты, которыми должен обладать кандидат помимо профессиональных знаний и опыта.
Обязанности
- Проектирование и разработка аналитических витрин данных для целей отчетности и исследований на стеке Hadoop + Spark + Scala.
- Мониторинг и оптимизация процессов сборки витрин.
- Разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными.
- Предоставление экспертной поддержки внутренним потребителям (Data Analysts, Data Scientists) по вопросам, связанным с использованием данных.
- Анализ исходных данных в различных системах и форматах для решения бизнес-задач (оценка структуры, качества, полноты и применимости данных).
- Контроль качества загружаемых данных.
Требования
- Опыт работы в качестве Data Engineer/Data Analyst/ETL Developer от 2 лет.
- Опыт работы с одной из реляционных СУБД — PostgreSQL (текущий техстек)/Oracle/MySQL/MS SQL Server.
- Знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности).
- Знание архитектуры МРР СУБД (Hadoop, Greenplum), опыт практической работы c MPP СУБД.
- Опыт промышленной разработки на стеке Scala/Python.
- Опыт работы с большими объемами данных с использованием стека технологий Big Data (Hadoop, Spark, Greenplum).
- Знание основных понятий и концепций из области Data Warehouse.
- Практический опыт разработки витрин данных с использованием инструментов Apache Spark, Kafka, Hadoop (Hive/Oozie).
Будет плюсом
- Знание методологии Agile и опыт работы в Scrum-команде.
- Опыт работы с чужим кодом.
- Знание корпоративного банковского бизнеса.
О компании Цифровые привычки
Цифровые привычки входит в топ-5 крупнейших подрядчиков Сбербанка. Их специалисты участвуют в разработке Сбербанк Онлайн, СберБизнес, SberCloud и других. Также в их портфолио есть проекты для «ВТБ», «Сетелем», АО «Транснефть-Западная Сибирь», «Оптисистемс», «РЖД», «ТГК-2», «Мегафон».