Наша команда DWH отвечает за развитие корпоративного хранилища данных. Мы обеспечиваем качество и своевременность поставки данных.
В работе мы используем сервисы Yandex Cloud для интеграции данных (Data Transfer, Schema Registry и т. д.). Обрабатываем данные с помощью YQL (расширенный SQL) и Nirvana (аналог Airflow). Хранилище данных — YT.
Ищем опытного инженера данных, который любит сложные задачи. Вы будете настраивать обновление данных и строить нагруженные системы.
Какие задачи вас ждут:
- Организация активации данных с различными источниками в различных режимах (CDC, increment, snapshot). Вам предстоит интегрировать данные из различных источников (API, PG, YDB, YDS) и передавать их на последующие уровни хранилища данных.
- Оптимизация ETL-процессов. Вам предстоит применять различные техники оптимизации к ETL-процессам.
- Управление данными в хранилище. Вам предстоит добавлять данные в систему, обновлять и удалять их.
Мы ждем, что вы:
- Имеете релевантный опыт, хорошо знаете SQL и Python;
- Готовы разбираться в деталях поставки и обработки данных;
- Работали с базами данных и ETL-процессами;
- Умеете работать с инструментами для управления данными;
- Вам интересно работать в команде и участвовать в разработке общих решений;
- Готовы изучать новые технологии и инструменты.
Условия
Высокий совокупный доход
- Премии каждые полгода для всех, кто успешно прошёл ревью.
Офисы, в которые хочется ходить
- В офисах есть всё, что нужно для комфортной работы: удобные рабочие зоны, уютные места для отдыха, кофепойнты для спокойных перерывов.
- В офисах в Москве, Санкт-Петербурге, Екатеринбурге, Новосибирске, Казани и Нижнем Новгороде есть тренажёрные залы со всем необходимым.
Расширенная медицинская страховка
Начинает работать с первого месяца. В неё входят:
- Плановая и неотложная помощь, стоматология, расширенный превентивный чекап, телемедицина 24/7.
- Психотерапия в онлайн-сервисах наших партнёров.
- После года работы добавляется лазерная коррекция зрения, после двух — ведение беременности и роды.
Также мы покрываем 80% стоимости ДМС для супругов и детей.
Возможности для роста
- Есть всё, чтобы учиться: внутренняя платформа с 100+ курсами, менторство и программы для руководителей.
- Оплачиваем участие в профильных конференциях и помогаем подготовиться к публичным выступлениям.
- Если для работы нужен иностранный язык, поможем организовать обучение и оплатим 50% стоимости.
И ещё
- Делаем закрытые мероприятия: вечеринки, фестивали и другие ивенты.
- В Яндексе много клубов по интересам, Random Coffee, сервисы для знакомств и взаимопомощи. А наши спортивные клубы регулярно участвуют в забегах, триатлонах и других соревнованиях.
- На портале скидок масса специальных предложений для сотрудников от наших партнёров.
