Senior Big Data Engineer (SQL, Spark, Scala)

Задачи

• Написание ETL-процессов на Spark, PySpark, SQL.
• Разработка архитектуры хранилища.
• Помощь в подготовке аналитических отчетов.
• Техническая проработка фичей на основе данных.

Ожидания

• Владеете SQL на продвинутом уровне.
• Работали с аналитическими БД (ClickHouse, Presto, Druid и т.д.).
• Имеете практический опыт с Scala или Java.
• Имеете опыт работы более 6 лет.

Будет плюсом:

• Опыт завершения крупных и сложных проектов.
• Понимаете принципы обработки больших данных.
• Знаете Python.
• Работали с Map-Reduce решениями (Apache Spark, Hadoop Map Reduce, YT).
• Знакомы с облачными технологиями (EMR, Kubernetes, Databricks, Docker, Terraform и т.д.).
• Знакомы с планировщиками ETL процессов (Oozie, Airflow, Luigi и т.д.).

Мы будем рады кандидатам из смежных областей (Backend/DWH/ML), которым интересно стать Data Engineer'ом.

Условия

• Гибкий график.
• Возможность релокации в Лиссабон.
• В Москве офис возле м. Белорусская.
• Бесплатные обеды в офисе.
• Медицинская страховка для сотрудников и их детей, а также 100% оплата больничных.
• Корпоративное обучение: профессиональные мероприятия, тренинги, уроки английского и португальского языков.
• Совместные путешествия с командой раз в год, выездные мероприятия и крутые тимбилдинги.
• От 65.000 евро gross в год при работе в Лиссабоне. Зарплата выплачивается в валюте страны оформления, финальная сумма обсуждается индивидуально и зависит от персонального процента налога.