Компания больше не ищет сотрудника. Посмотрите похожие предложения
Data Engineer (ОК)
в VK
от 270 000 ₽/мес на руки
Технологии/инструменты
Команда OK.TECH объединяет сотни специалистов разработки, дизайна, маркетинга, машинного обучения, поддержки пользователей и не только. Каждый из нас влияет на то, каким увидят ОК миллионы пользователей.
Наша команда занимается анализом и хранением данных. Сейчас мы ищем человека на роль Data Engineer.
Вашей основной задачей будет построение и оптимизация ETL-процессов на базе YTsaurus-стека технологий.
Задачи
- Разработка и оптимизация расчётов в Spark на YTsaurus.
- Построение новых и рефакторинг старых ETL-процессов.
- Доработка существующего фреймворка расчётов (Java + Spark).
- Миграция и внедрение новых технологий обработки данных.
- Разработка отчётов в SuperSet.
Требования
- Опыт работы с Spark, SQL и большими объёмами данных.
- Опыт построения сложных ETL-процессов.
- Знание базовых алгоритмов и структур хранения данных, понимание принципов работы распределённых систем.
- Желателен опыт работы с Hadoop-стеком, ClickHouse, Spark, Java, Airflow.
Будет плюсом опыт работы с YTsaurus, YQL.
Мы предлагаем
- Гибкий график работы.
- Бонусы и скидки от партнеров.
- Офис в центре города.
- ДМС.
- Профессиональная команда.
- Интересные задачи.
О компании VK
VK — крупнейшая технологическая компания по числу пользователей в Рунете. Цифровые продукты VK предоставляют десяткам миллионов людей возможность решать повседневные задачи онлайн: общаться, учиться, развлекаться и самореализовываться. Для предпринимателей VK разрабатывает инструменты развития и продвижения бизнеса в социальных сетях и на контентных платформах. Для бизнес-клиентов VK развивает продукты и услуги по цифровизации.
VK — это команда профессионалов, которая создает комфортную и безопасную цифровую среду для миллионов людей и тысяч бизнес-клиентов. Компания привлекает лучшие таланты и предоставляет им возможность раскрыть свой потенциал в дружелюбной и безопасной среде, в командной работе над популярными цифровыми продуктами и сервисами.