YT — основная платформа для аналитики и построения batch-процессов в Яндексе, сочетающая в себе хранилище с интерфейсами процессинга. Под управлением YT работает почти четверть всех вычислительных мощностей компании. В самом большом кластере YT около миллиона процессорных ядер и хранилище эксабайтной вместимости.
Наша команда разрабатывает инструменты для эксплуатации кластеров YT:
Наши кластеры уже развёрнуты в контейнерах во внутреннем облаке сервисов Яндекса, а сейчас на основе публичных технологий мы разрабатываем оператор для их развёртывания в Kubernetes за пределами инфраструктуры Яндекса.
Примерно две трети наших инструментов написаны на Go, остальные на Python. Около 75% времени наши инженеры занимаются разработкой, часть времени уходит на задачи по реконфигурации кластеров и проведению регламентных операций.
Будет плюсом, если вы:
Команда Yandex Infrastructure создаёт и предоставляет внутреннюю инфраструктуру Яндекса — фундамент из продуктов и технологий, на базе которого тысячи инженеров разрабатывают, деплоят и эксплуатируют основные сервисы Яндекса: Поиск, Такси, Маркет, Алису, Кинопоиск и многие другие.