Инженер данных
в MAGNIT TECH
Технологии/инструменты
Чем ты будешь заниматься:
- Проектировать и разрабатывать ETL-процессы (batch).
- Создавать backend-сервисы на Python для обработки данных и интеграции с внешними системами.
- Инжиниренно оптимизировать ML-проекты: рефакторить и оборачивать в продакшен-пайплайны обучения и инференса, обеспечивая стабильность, воспроизводимость и наблюдаемость.
- Участвовать в проектировании хранилищ данных и оптимизации существующих решений.
- Стек технологий: Язык и фреймворки: Python 3, PySpark, Pandas, FastAPI, Pydantic. Хранилища и вычисления: PostgreSQL, ClickHouse, Greenplum, Trino, S3. Оркестрация и ML: Apache Airflow, MLflow. Инфраструктура: Docker, Kubernetes, Git, GitLab CI/C.
Мы ожидаем
- Опыт коммерческой разработки на Python не менее 2 лет; владение стандартной библиотекой и экосистемой data-разработки.
- Понимание принципов построения ETL/ELT-процессов.
- Опыт работы с распределёнными СУБД (Greenplum, ClickHouse) и вычислительными движками (Apache Spark, Trino).
- Оркестрация пайплайнов в Airflow.
- Верхнеуровневое понимание жизненного цикла ML-моделей.
- Основы CI/CD и DevOps: сборка, тестирование, деплой.
- Навыки работы в командной строке Linux.
- Контейнеризация (Docker).
- Использование ИИ-ассистентов в разработке (opencode или аналоги) для ускорения написания и ревью кода.
О компании MAGNIT TECH
MAGNIT TECH — технологичный драйвер одного из крупнейших ритейлеров страны. Мы создаём будущее: от решений в области автономной логистики с полностью автоматизированными распределительными центрами до исследований потенциала квантовых вычислений.
Для тех, кто УСТАЛ от бюрократии и бесконечных ограничений, где команды будто живут в разных мирах, а страсть гаснет под тяжестью правил и процедур. Для тех, кто ЖАЖДЕТ атмосферы раннего IT — где царит драйв и свобода, где чувствуешь себя первооткрывателем, движешься в одном ритме с командой и создаёшь то, что действительно меняет мир. Для новаторов, которые не видят границ между технологиями и творчеством.
Сегодня MAGNIT TECH — это: 5 000+ сотрудников; 1000+ активных участников комьюнити; 260+ активных проектов и продуктов; 800+ активных систем и сервисов; 4,5 года средний стаж работы в компании; 30 лет средний возраст сотрудников.
Хочешь влиять на будущее и создавать действительно значимые решения? Добро пожаловать в MAGNIT TECH.