Разработчик DWH (Apache NiFi)

Чем предстоит заниматься

• Выполнять функциональные обязанности в рамках проектов по созданию хранилищ данных на Arenadata Greenplum DB.
• Осуществлять разработку сервисов по интеграции и управлению ETL-процессами с использованием Apache NiFi.
• Осуществлять разработку и проверку работоспособности ETL-процессов по загрузке данных из систем-источников в слои хранилища с использованием SQL, других языков (PL/pgSQL и т.п.) и специализированных средств разработки (разработка DAG-ов в Airflow, процедур в Greenplum, работа с ETL-фреймворком).
• Выполнять оптимизацию существующего кода ETL-процессов.
• Активно участвовать в организации процессов тестирования, автоматизации разработки, документировании кода.
• Участвовать в сборке поставки и выката на продуктивный контур.
• Активно участвовать в распространении знаний и хороших практик.

Ожидания

• Опыт работы в роли разработчика DWH или инженера данных не менее 2 лет.
• Уверенные знания SQL.
• Опыт работы с Greenplum, PostgreSQL (приветствуется также Teradata, Oracle, MSSQL).
• Опыт работы с Git.

Уверенные знания по работе с Apache NiFi, включая:

• Создание пайплайнов из стандартных процессоров.
• Понимание разницы между Avro, JSON, XML.
• Интеграцию с шинами данных или брокерами сообщений.
• Желательно — работа с NiFi Registry.

Будет плюсом:

• Опыт разработки на Java или Python.
• Опыт работы в проектах Teradata.
• Опыт работы с DBT.
• Опыт работы со стеком Hadoop (HDFS, Hive, Impala, Spark).

Условия

• Гибкий график работы — в офисе, удаленно или в гибридном формате.
• Поддержка новичков по программе наставничества Buddy.
• ДМС с возможностью подключения близких родственников.
• Сервис психологической поддержки, ведь нам очень важно, как ты себя чувствуешь.
• Корпоративный кафетерий льгот с возможностью компенсации билетов и отелей в отпуске, абонементов в спортзал, спортинвентаря, билетов в театр и многого другого.
• Насыщенная инножизнь: лекции и мастер-классы от известных спикеров, тимбилдинги, корпоративная библиотека и многое другое.
• Скидки и купоны от сотен компаний-партнёров на единой платформе.
• Маркетплейс мерча с собственной корпоративной валютой, которая начисляется за участие в активностях.
• Дополнительные выходные в дни радостных (и не только) событий.
• Дополнительный оплачиваемый отпуск (3 календарных дня).
• Широкие возможности внутреннего и внешнего обучения.
• Необходимая техника и софт для работы.
• Конкурентная зарплата по итогам интервью, наличие премиальной составляющей.

Вместе с нами ты сможешь решать интересные задачи, профессионально расти и развиваться, а также участвовать в кросс-командных проектах и определять собственную траекторию развития.