Data Engineer (Big Data Platform)

Основные задачи на позиции

• Разработка и поддержка инфраструктуры для хранения и обработки данных на базе Hadoop.
• Оптимизация вычислений и работа с узкими местами платформы.
• Разработка и развитие инструментария для работы с каталогом метаданных.
• Развитие и поддержка кластера Hadoop.

Для этого тебе понадобится

• От 2-х лет опыта коммерческой разработки.
• Коммерческий опыт работы с Spark от 2-х лет.
• Коммерческий опыт разработки на Python.

Будет плюсом:

• Опыт работы с Docker и Docker Compose, умение писать и оптимизировать Dockerfile.
• Опыт работы с Unix-подобными системами на уровне уверенного пользователя или администратора.
• Опыт работы с планировщиками задач (AirFlow, Cron).
• Опыт работы с Vertica.
• Понимание принципов построения сервисов.

Что мы предлагаем

• Интересные проекты: создаём продукты для путешественников, тревел-агентов и отельеров по всему миру.
• Полную свободу для достижения результатов: гибкий график, удалёнка или офис — ты сам решаешь, где и когда работать.
• Нестандартный подход к работе и жажду нового, например, мы решаем некоторые задачи с помощью AI.
• Техническое комьюнити Ostrovok! Tech проводит митапы, хакатоны, участвует в конференциях и поддерживает даже самые смелые идеи.
• Профессиональное развитие: помогаем сотрудникам выступать конференциях — от подачи заявки до подготовки презентации.
• Заботу о самочувствии команды: с первого месяца работы у наших сотрудников есть ДМС и скидки в сервисе «Ясно.
• Внутренние программы адаптации и обучения, развития soft skills и лидерских навыков, подобранные индивидуально для каждого сотрудника.
• Частичную компенсацию участия во внешних тренингах и конференциях.
• Изучение английского языка: корпоративные групповые занятия, разговорные клубы и скидки на курсы Skyeng.
• Корпоративные цены на отели и другие тревел-услуги — чтобы наши сотрудники путешествовали чаще.
• Островок — аккредитованная IT-компания.

Просим ознакомиться и дать Согласие на обработку персональных данных.