Компания больше не ищет сотрудника. Посмотрите похожие предложения
Старший разработчик DWH / Data Engineer (Hadoop)
в НЛМК направление IT&Digital
250 000 — 350 000 ₽/мес на руки
Технологии/инструменты
Группа НЛМК крупнейший в России и один из самых эффективных в мире производителей стальной продукции. Производственные активы в России, Европе, Азии и США.
Мы создаем совершенную сталь для ключевых отраслей: от строительства до ветроэнергетики. Разрабатываем новые технологии и внедряем передовые цифровые решения. Заботимся о сотрудниках и создаем возможности для их развития и самореализации. Создаем настоящее будущее.
Задачи
- Обеспечение поддержки и развития хранилищ данных по направлению BI.
- Разработка процедур загрузки данных из различных источников, автоматизация и контроль ETL/ELT-процессов: Apache Airflow, Apache NiFi, Oozie.
- Проектирование и развитие логических и физических моделей данных, источников, хранилищ и витрин данных, включая принципы построения слоев STG/ODS/DDS/DM, а также перемещения данных между ними.
- Разработка физических моделей данных с учетом особенностей платформ.
- Настройка и поддержка интеграции данных между различными системами.
- Извлечение и анализ данных из различных структур: источников данных, хранилищ, витрин, аналитических платформ.
- Анализ требований к качеству данных, разработка методики и метрики управления качеством данных — согласованности, своевременности, актуальности, целостности, точности, полноты, достоверности.
- Поиск факторов и корневых причин: подготовка, очистка, обогащение, стратификация, визуализация, анализ данных.
Ожидания
- Опыт работы от года.
- Опыт построения DWH, DL.
- Базовые знания языков программирования: Python (основные пакеты Numpy, Pandas, SCiPy и др.), SQL.
- Знание фреймворков потоковой обработки данных: Kafka Streaming and Connect, Flink, Spark Streaming.
- Опыт работы с реляционными системами управления базами данных (SQL): MS SQL, Oracle, PostgreSQL, MySQL.
- Опыт работы с системами управления базами данных (NoSQL): ClickHouse, Cassandra, ScyllaDB, MongoDB, Redis, владение Git.
Работа в группе НЛМК — это
- Работа в международной сталелитейной компании с активами в России, США и странах Европы, с развитыми корпоративными ценностями и стандартами.
- Оформление по ТК РФ, ежегодная индексация заработной платы, прозрачная система премирования.
- Высокие стандарты безопасности труда и культуры производства.
- Корпоративные льготы: корпоративная сотовая связь, летние путёвки для детей, новогодние детские подарки, программы лояльности от партнеров, корпоративная дотация на питание, материальная поддержка сотрудников в различных жизненных ситуациях.
- График работы: 5/2, удаленный формат работы.
- Релокационный пакет с нашей поддержкой.
- Программы заботы о здоровье: (ДМС, страхование от НС и профессиональных заболеваний, диспансеризация, вакцинация).
- Возможность принять участие в интересных и сложных проектах с лучшими специалистами индустрии.
- Бонус 1 оклад
О компании НЛМК направление IT&Digital
Группа НЛМК – международный производитель стальной продукции. Компания выпускает продукцию на 17 предприятиях в 7 странах мира. Занимает 1 место среди российских производителей стали по объему и входит в топ-25 крупнейших сталелитейных компаний в мире.
Металл НЛМК используется в таких знаковых мировых проектах, как Большой адронный коллайдер, трубопроводы «Северный поток», «Сила Сибири», первая в мире полупогружная плавучая ветроэлектростанция Wind Float Atlantic (Португалия) и самый мощный в мире ледокол «Урал». При этом ее можно запросто встретить в любом доме, например, в виде бытовой техники: холодильников, стиральных машин и др.
В нашей готовой продукции нет ни единой строчки кода, но в ее производстве участвует большая команда айтишников и цифровизаторов. Мы используем ML, AI, IIoT, DSML-платформу и технологическую платформу для разработки, беспилотные технологии. А еще мы видим, как «высшая математика» применяется на живом производстве, бываем в цехах и общаемся с металлургами, которые используют цифровые продукты.