AQA-инженер по тестированию AI-агентов
Вакансия опубликована на hh.ru — открыть оригинал ↗
Похожие вакансии
Все вакансии →Инженер по тестированию и оценке качества ИИ
Тестирование и оценка качества ИИ-решений и агентских систем: развитие EvalOps с автоматизированными прогонами и регрессиями в CI/CD, настройка LLM-as-a-Judge, анализ трасс выполнения и проверка устойчивости к prompt injection. Разработка автотестов на Python (pytest, asyncio) и эталонных выборок, принятие решений о допуске релизов, блокировке или откате. Работа в офисе в Москве с возможностью гибридного формата.
QA Engineer
Тестирование финтех-платформы и AI-продуктов на уровнях UI, API, интеграций и E2E-сценариев; разработка и поддержка автотестов на Python (pytest, Playwright) с интеграцией в CI/CD, оценка качества RAG-систем и LLM-ответов, анализ логов и БД для локализации дефектов.
Инженер по тестированию
Тестирование AI-агентов и сервисов Госуслуг: планирование и сопровождение релизов, ручное функциональное, интеграционное, регрессионное и E2E-тестирование, тестирование API (REST, WebSocket), ведение тестовой документации и автоматизация рутинных проверок на Python (pytest, requests) в CI/CD. Дополнительно — оценка качества ML/LLM-компонентов (метрики, галлюцинации, LLM-as-judge).
QA Lead
Руководство QA-направлением команды, разрабатывающей внутренние AI-решения и системы автоматизации (АС «Багратион», дашборд «ДИТ СиБ», «Центр сопровождения AI-Агентов»). Задачи: стратегия тестирования Web и API, развитие автотестов на Python (Pytest) и TypeScript (Playwright), обеспечение качества AI-фич и внедрение AI-инструментов в QA-процессы. Офис в Москве на испытательном сроке, далее гибрид, премии и расширенный соцпакет.