Яндекс.Маркет

Senior Data Engineer

в Яндекс.Маркет

300 000 —‍ 360 000 ₽/мес на руки

📍 Москва (м. Смоленская)Санкт-Петербург (м. Площадь Ленина)Офис или гибрид
Специализация
Data Engineering
Уровень
Senior
Требуемый опыт
3+ лет

Технологии/инструменты

PythonSQLETLDWHHadoop/Yandex ClickHouseUnixLinuxMacOS

Яндекс.Маркет — один из крупнейших мультикатегорийных маркетплейсов, которым ежедневно пользуются миллионы людей. Наши команды помогают покупателям приобретать товары, не выходя из дома, и получать заказы по всей стране, а партнёрам — развивать свой бизнес, повышая продажи и привлекая новых клиентов.

Мы команда инженеров данных, и продукт нашей команды — Data Warehouse (хранилище данных), которое мы строим для нужд бизнес-подразделений. Нашими пользователями являются как руководители Маркета, которым нужна отчётность для принятия решений, так и эксперты в области глубокого анализа данных. Можно утверждать, что все бизнес-подразделения Маркета являются потребителями поставляемых нами данных.

Технологически ядро хранилища построено на системах хранения данных Yandex ClickHouse и ClickHouse. Разработка процессов ETL идёт на собственном фреймворке, который создан внутри Яндекса.

Наше хранилище данных сейчас одно из самых крупных в России — порядка 30 петабайт — и с учётом темпов роста бизнеса оно будет самым большим. Стоит отметить, что к нему предъявляются высокие требования по надёжности, что ставит перед нашей командой далеко не тривиальные задачи, для которых нет готовых решений.

Что нужно делать

  • Принимать конечные сетевые решения по реализации поставок данных. В это входит проектирование схем поставок данных. Выбор подхода к внесению доработок в витрины за оптимальное время с минимизацией рисков от релизов. Критический взгляд на результат в интересах потребителей данных.
  • Развивать фреймворки обработки данных. Применяя существующие инструменты работы с данными, выделять их недостатки. Продвигать повестку по их улучшению или поиску новых для более эффективного решения задач.
  • Лидировать реализацию сложных технических поставок. Понимая алгоритмическую составляющую инструментов, находить эффективные решения, в том числе упрощая постановку задачи.

Мы ждем, что вы

  • Уверенно знаете Python на уровне написания собственного фреймворка и SQL на уровне оптимизации запросов.
  • Умеете проектировать DWH: слои, модели хранения данных, процессы ETL.
  • Хорошо понимаете принципы работы распределённых систем Hadoop или Yandex ClickHouse.
  • Умеете выбирать технологии для решения конкретных задач.
  • Знаете основные алгоритмы и структуры данных, особенно используемые в области работы с большими данными.
  • Имеете опыт работы от 3 лет.
  • Имеете опыт работы в командной строке систем Unix-like: Linux, MacOS.

Будет плюсом, если вы

  • Имеете опыт промышленной разработки на C++.
  • Имеете опыт работы в e-commerce-отрасли.
  • Имели опыт решения задач в роли аналитика или опыт управления командой или проектами.

Что мы предлагаем

Высокий совокупный доход

  • Премии каждые полгода для всех, кто успешно прошёл ревью.

Офисы, в которые хочется ходить

  • В офисах есть всё, что нужно для комфортной работы: удобные рабочие зоны, уютные места для отдыха, кофе-пойнты для спокойных перерывов.
  • В офисах в Москве, Санкт-Петербурге, Екатеринбурге, Новосибирске, Казани и Нижнем Новгороде есть тренажёрные залы со всем необходимым.

Расширенная медицинская страховка

Начинает работать с первого месяца. В неё входят:

  • Плановая и неотложная помощь, стоматология, расширенный превентивный чекап, телемедицина 24/7.
  • Психотерапия в онлайн-сервисах наших партнёров.
  • После года работы добавляется лазерная коррекция зрения, после двух — ведение беременности и роды.

Также мы покрываем 80% стоимости ДМС для супругов и детей.

Возможности для роста

  • Есть всё, чтобы учиться: внутренняя платформа с 100+ курсами, менторство и программы для руководителей.
  • Оплачиваем участие в профильных конференциях и помогаем подготовиться к публичным выступлениям.
  • Если для работы нужен иностранный язык, поможем организовать обучение и оплатим 50% стоимости.

И ещё

  • Делаем закрытые мероприятия: вечеринки, фестивали и другие ивенты.
  • В Яндексе много клубов по интересам, Random Coffee, сервисы для знакомств и взаимопомощи. А наши спортивные клубы регулярно участвуют в забегах, триатлонах и других соревнованиях.
  • На портале скидок масса специальных предложений для сотрудников от наших партнёров.
Яна Гончарова IT-рекрутер
Яндекс.Маркет

О компании Яндекс.Маркет

Сфера
Продуктовая компания
Размер
1001+

Яндекс Маркет — технологичный маркетплейс, где можно купить то, что хочется легко и с приятными плюшками. Мы входим в топ крупнейших маркетплейсов и являемся одним из важнейших направлений развития Яндекса на ближайшие несколько лет. У нас мощная команда, амбициозные цели, много категорий, проектов, и останавливаться не собираемся.

Похожие вакансии

Зарплата скрыта, но соответствует вашей подписке
Можно удалённо из РФ
200 000 – 350 000 ₽/мес на руки
Полная удалёнка
Зарплата скрыта, но соответствует вашей подписке
📍 Москва (м. Войковская), можно удалённо из РФ
Зарплата скрыта, но соответствует вашей подписке
📍 Москва (м. Войковская), можно удалённо из РФ
250 000 – 320 000 ₽/мес на руки
Полная удалёнка