Москва, м. Шаболовская, РоссияСпециализация
Data Science
Леруа Мерлен — платформа для обустройства дома.
Мы находимся в поиске Инженера данных в команду "Аналитика товарных потоков".
Разрабатываем и поддерживаем системы мониторинга логистических потоков — создаем единую витрину клиентских заказов для всех наших сотрудников.
Технологии/инструменты
PostgreSQLGreenplumCTEAirFlowpgAdmin
- Frontend: React, Typescript, React Native, Flow, Vue.js.
- Backend: Java, Kotlin, Node.js, Go, Python.
- Android: Kotlin, Compose, Kotlin Multiplatform.
- iOS: Swift, SwiftUI, Kotlin Multiplatform.
- Data Engineering: Kafka, NiFi, S3, Spark, Greenplum, ClickHouse, Airflow.
- Data Transport: Debezium, Kafka, NiFi, S3, Greenplum.
- ML: Catboost, LightGBM, TensorFlow, OpenCV, DVC, MLFlow.
- DevOps: Docker, Kubernetes, Jenkins, Artifactory, Ansible, Helm, Prometheus, ELK.
Задачи
- Разработка витрин для отчетов в базе данных PostgreSQL.
- Интеграция данных из различных сервисов в GreenPlum.
- Настройка Data Quality.
Ожидания
- Опыт оптимизации больших запросов с объединением 10 и более таблиц и подзапросами.
- Разработка функций и процедур с обработкой ошибок (блок try .. catch).
- Знание CTE.
- Знание временных таблиц.
- Выбор и построение индексов.
- Создание и обновление materialized view и view.
- Умение пользоваться агрегатными функциями (Group by).
- Умение писать сложные ветвления (Case).
- Умение писать оконные функции.
- Понимание вложенных запросов.
- Умение разбираться в чужом коде.
- Умение создавать простые DAG в AirFlow для автоматизации обновления витрин данных.
- Создание JOB в pgAdmin.
Плюсом будет:
- Умение работать с динамическим SQL (оператор EXECUTE и строковые функции).
- Умение разрабатывать циклы для динамического SQL.
- Знание Liquidbase, Spark, Docker.
- Знание Git.
Мы предлагаем
- Работу в компании с сильной инженерной культурой.
- Оклад + премии.
- Компенсацию профессионального обучения (курсы, конференции и тд).
- Полис ДМС (включая стоматологию), страхование жизни и здоровья.
- Компенсацию питания.
- Компенсацию мобильной связи — SIM-карта.
- Гибридный график работы.
Дмитрий Юлаков IT Recruiter
