Senior Data Engineer (Data Platform)

У нас

• Все сервисы деплоим в облака (ЯО/AWS) несколько раз в день.
• 200+ TB данных в DeltaLake, нагруженный 40k+ rps CDC через Kafka, Apache Spark (PySpark) на K8S, оркестрация на Airflow, CI/CD на GitHub Actions.
• Нет 3rd party коннекторов — все данные получаем из нашего операционного бэкенда на .NET 8.
• Ежедневно дообучаем для клиентов 2к+ ML-моделей (batch + online) и сервим 3+ TB рекомендаций из C* на сайты и в письма клиентов.
• Выделяем существенный ресурс (более 30% времени) на уменьшение техдолга и поддержки.
• Особенная культура: открытые финансы и зарплаты, право принять любое решение у каждого, прямая обратная связь от клиентов, возможность выбирать технологии и влиять на бэклог.
• В разработке работает более 140 человек, среди которых есть докладчики DotNext, Yandex.Scale, AgileDays, TeamLead++.

Ожидаем

• Опыт решения сложных задач простым в поддержке и понимании кодом (ООП, SOLID, автотесты).
• Знание Python как родного, опыт промышленной разработки на статически типизированных языках C#/Java/Scala/Kotlin/C.
• Готовность работать с cloud-native стеком (Kubernetes, Infrastructure as Code, Prometheus, Vault, Grafana).
• Опыт работы: 3–6 лет.

Будет плюсом, если уже был опыт

• Работы с Delta Lake/Apache Hudi/Apache Iceberg/etc.
• Построения ETL/ELT на Spark и Airflow.
• Создания, развития и поддержки в проде решений BigData, DataOps, MLOps.

Условия

• Можно работать полностью удаленно (софинансируем обустройство рабочего места) или из комфортных офисов в Москве или Ереване.
• Гибкий график, больничные без справок и безлимитный отпуск. Можно договориться с командой и отдыхать сколько нужно.
• Работа в аккредитованной IT-компании.
• Техника для работы: MacBook, мониторы, наушники с шумоподавлением и другая необходимая периферия.
• Корпоративная жизнь: тимбилдинги, командные квесты и спортивные соревнования, ЧГК, клубы по интересам, случайный кофе. Для распределенных команд — оплачиваемая колокация.
• Well-being-программы: 300 000 ₽ в год на софинансирование образования, медицины, психотерапии, спорта, путешествий.
• Поддержка саморазвития: софинансирование любого обучения, мастер-классы, HR-поддержка или коучинг, тренинги по переговорам, деловой переписке, развитию эмоционального интеллекта и не только.