SRE-инженер (Datamart)

О команде

• Мы — команда хранилища данных Авито. У нас есть более сотни внутренних и внешних систем, из которых мы получаем данные. Мы хотим построить инструмент, в котором аналитики могут самостоятельно, не прибегая помощи инженеров dwh, находить ответы в данных, проверять гипотезы и принимать бизнес-решения.
• Наша цель — предоставлять платформу для решения задач, связанных с исследованиями, операционной отчетностью и продовыми интеграциями, обеспечивая изоляцию обработки и необходимый уровень доступности и качества данных.

Примеры задач

• Организация работы над внештатными ситуациями при обработке данных.
• Разрабатка инструментов автоматизации работы с внештатными ситуациями, сбоями, релизами, поддержкой.
• Разрабатка мониторинга, повышение observability процессов работы с данными.
• Поиск и оптимизация неэффективного использования ресурсов.

Вам предстоит

• Создавать инфраструктуру и процессы деплоя для дата-пайплайнов.
• Выбирать, настраивать и поддерживать CI/CD-сервер (замена TeamCity).
• Выбирать, настраивать и поддерживать Git-сервер (замена BitBucket).

Ожидания

• Опыт работы с Bare Metal серверами Linux.
• Опыт построения CI/CD-пайплайнов, включая версионирование, роллбэки, мониторинг здоровья систем.
• Опыт работы с мульти-env инфраструктурой (прод, стейджинг, тест), разработки скриптов, раскатки инфраструктуры.
• Опыт интеграции инструментов мониторинга и Triage.
• Опыт решения сложных распределенных систем.

Будет плюсом:

• Опыт работы DevOps в Data проектах (кластерная СУБД Vertica, ClickHouse, Greenplum).
• Пишете на Python.