Вакансия в архиве
Компания больше не ищет сотрудника. Посмотрите похожие предложения

Архитектор ETL

в Т-Банк

от 350 000 ₽/мес на руки

📍 МоскваСанкт-ПетербургМожно удалённо из РФ

Специализация

Engineering Management

Уровень

Senior

Команда

11 - 20 человек

Тинькофф — онлайн-экосистема, основанная на финансовых и лайфстайл-услугах. Клиентами Тинькофф стали 27 млн. человек по всей России.

Data Platform в Tinkoff представляет собой единое хранилище, куда стекаются все данные группы компаний. ETL Platform состоит из инструментов, отвечающих за загрузку и трансформацию данных. Ежедневно 6000 ETL-процессов обрабатывают данные из сотен источников, обновляя витрины общим объемом более 200Tb. Большая часть процессов, разрабатываемых с помощью инструментов ETL Platform, являются батчевыми, и очень важно следить за оптимальностью их работы, развивать подходы и инструменты для их разработки.

Мы ищем в команду опытного Архитектора ETL, который поможет нам развивать направление Batch ETL, чтобы справляться с растущим объемом данных и заказчиков, совершенствовать подходы к разработке ETL процессов, оптимизировать уже существующие решения.

Технологии/инструменты

ETLGreenplumHadoopClickhouseApache Airflow

Greenplum / Hadoop / Clickhouse в качестве ядра обработки данных.
Собственное решение на базе Apache Airflow в качестве инструмента трансформации данных.

Чем предстоит заниматься

Создание платформы распределенных вычислений для ETL-трансформаций.
Постановка задач команде разработки на доработку функциональности батчевого ETL инструмента.
Развитие методологии разработки Batch ETL.

Кого ищем

Опыт работы в сфере Data Architecture/DWH/ETL от 3-х лет.
Опыт работы с батчевыми процессами загрузки данных.
Понимание архитектуры хранилищ и инструментов, которые с ним связаны.
Опыт проектирования ETL-процессов в распределенных системах.
Хорошее понимание и опыт работы с MPP СУБД.
Знакомство с инструментами: Airflow, Greenplum, Clickhouse будет плюсом.

Что предлагаем

Работу в офисе или удаленно — по договоренности.
Профессиональное развитие. Вы получите доступ к библиотеке с технической литературой, тренингам и мастер-классам для сотрудников.
Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким.
Бесплатный фитнес-зал или компенсацию затрат на спортивные занятия.