Специализация
Data Engineering
Сейчас мы в поиске Data Engineer для крупной IT-компании на проект создания сервисов на основе моделей машинного обучения для предиктивной аналитики различных бизнес областей.
Технологии/инструменты
SQLPythonBashGitLinuxHadoop
Задачи
- Создание новых надежных и улучшение существующих пайплайнов, обрабатывающих терабайты данных.
- Разработка новых витрин данных для аналитики и построения предиктивных моделей на основе многопетабайтного хранилища и множества источников.
- Интегрирование данных из новых источников с продакшн-системами, решающими задачи near real-time обработки данных, и ML-сервисами.
Пожелания к кандидату
- Опыт в области DE от 3 лет.
- Знание Python.
- Понимание SQL, умение составить нетривиальный запрос (JOIN'ы, подзапросы и т.д.).
- Навыки работы с Bash, Git, Linux.
- Опыт работы с экосистемой Hadoop: HDFS, Spark, Hive.
Условия
- Трудоустройство по ИП или ГПХ.
- Возможность удалённой работы.
- Работа в стабильной, интенсивно развивающейся компании.
- Карьерный и профессиональный рост.
Андрей Злобин Recruitment Team Lead