Middle QA Engineer (AI Agent Testing)

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее.

Ждем именно тебя!

Задача команды — разработать и внедрить AI-агентов в Управление развития искусственного интеллекта блока "Управление благосостоянием". Наше преимущество команды в инновационном подходе использования AI-решений в исследовательских задачах.

Предметная область

Финансовые продукты: * Персональное финансовое управление (портфели, цели, накопления). * Инвестиции (ПИФы, пенсионные продукты), страхование (ИНСЖ), депозитарные услуги. * Страхование (ОСАГО, КАСКО, др.).

Цифровые интерфейсы: * Чат-интерфейс Сбербанк Онлайн (цифровой помощник для клиентов). * Нативный чат GigaChat с интеграцией финансовых сценариев.

Обязанности

• Разработка и выполнение тест-кейсов для проверки функциональности, логики и поведения AI-агентов.
• Тестирование диалоговых сценариев и интеграций с внешними системами.
• Проведение регрессионного, интеграционного и end-to-end тестирования.
• Проведение ПСИ.
• Валидация качества ответов агента: релевантность, точность, безопасность.
• Создание автоматизированных тестов для API, UI и бизнес-логики агента.
• Проверка тестовых датасетов.
• Анализ результатов проведения тестирования и подготовка сводного отчёта о тестировании релиза.
• Анализ логов, метрик и ошибок для выявления паттернов сбоев.
• Подготовка тестовых данных.
• Тестирование обучающих датасетов / валидация данных для обучения моделей.
• Документирование багов, тест-планов и отчетов о качестве в Jira/Confluence.
• Участие в код-ревью тестовых скриптов и спецификаций.
• Работа в команде по методологии Agile.

Требования

• Опыт автоматизированного тестирования от 2 лет.
• Понимание принципов работы AI-агентов и LLM или сильная мотивация погрузиться в эту область.
• Знает и умеет использовать инструменты разработки для работы (IDEA/PyCharm, JUnit, REST-assured, Allure).
• Умеете дорабатывать тестовые фреймворки и их расширения.
• Умеете использовать Spring Boot (в случае Java).
• Умеет разрабатывать на Python/Java (уметь писать читаемый и поддерживаемый код).
• Умеете работать с версионированием кода и дистрибутивами.
• Базовое понимание DevOps-практик и желание развиваться в этом направлении.
• Инструменты разработчика в браузере (знать, как посмотреть, какие запросы отправляются на сервер).
• Знаете основные паттерны проектирования ПО и умеете применять их на практике.
• Знаете SQL на любом уровне.
• Умеете работать с инструментами для тестирования серверного API (Postman, SoapUI и т.д.).
• Опыт работы с системами контроля версий (Git) и CI/CD.
• Опыт работы с Jira, Confluence.
• Опыт тестирования мобильных приложений.
• Опыт тестирования сложных систем с интеграционным взаимодействием.
• Внимание к деталям.
• Умение работать с большим объемом информации.
• Критическое мышление, умение работать с неопределённостью, коммуникация с ML-командой.

Условия

• Полное соблюдение ТК РФ, льготные условия по программам страхования, кредитования для сотрудников Банка ;).
• График 5/2, офис на м. Кутузовская.
• Режим работы — гибрид.
• Достойный уровень вознаграждения (оклад + внушительная годовая премия).
• ДМС с первого дня работы и льготная мед. страховка для близких родственников.
• Социальная поддержка сотрудников.
• Возможность стать частью команды, реализующей программы цифровой трансформации банка — на основе передового опыта и инновационных идей.
• Широкие возможности для профессионального развития: корпоративный университет и множество онлайн-программ обучения. Корпоративное обучение за счет компании.
• Бесплатная подписка СберПрайм+, многочисленные скидки и бонусы от партнеров: СберМаркет, МегаМаркет, Самокат, Еаптека и др.
• Корпоративная пенсионная программа.