Вступить в клуб →
← К вакансиям
Kokoc Tech80/100

QA Engineer ИИ-решений

от 1 400 RUB
Опубликовано: 2 октября 2026
middleremoteQAfulltimeМосква, Саранскruтест-дизайнтестовая документациябаг-трекерrestpostmansqlpythonllmragdifypytestci/cd
Контакты и отклик открываются после вступления в клубВступить →
QA Engineer ИИ-решений в компанию Kokoc Tech Специалист привлекается для поддержки AI-команды (RnD AI Team), реализующей портфель ИИ-инициатив для бизнес-подразделений компании на внутренней платформе Dify. 📝 Обязанности 1. Подготовка тест-кейсов на основании требований и критериев приемки инициатив; 2. Функциональное и интеграционное тестирование ИИ-агентов, workflow на платформе Dify, API-интеграций со внутренними системами; 3. Проверка позитивных, негативных и пограничных сценариев, включая нетипичные запросы пользователей и «галлюцинации» модели; 4. Регрессионное тестирование после изменений промптов, моделей, базы знаний (RAG) и интеграций; 5. Проверка соответствия результата согласованным требованиям и метрикам качества; 6. Формирование и поддержание тестовых выборок (golden set) совместно с бизнесом и ML-командой, участие в оценке качества ответов; 7. Фиксация дефектов, контроль их устранения, отчётность по качеству релизов; 8. Проведение приемочного тестирования перед выпуском в production и участие в приемке с бизнесом. 🔍 Требования От 3 лет в тестировании ПО. От 1 года тестирования продуктов на основе ML/LLM или тестирования API и интеграций backend-сервисов; понимание специфики недетерминированных ответов модели. Не менее 2 проектов тестирования интеграционных / API-решений или ИИ-продуктов с выводом в промышленную эксплуатацию; опыт построения регрессионных наборов и тестовых выборок. Желательно: e-commerce, ритейл, B2B-дистрибуция, клиентский сервис. Тест-дизайн, тестовая документация, работа с баг-трекером; Тестирование REST API (Postman или аналоги), чтение JSON, логов; SQL на уровне выборок для проверки данных; Python на базовом уровне для скриптов проверки и подготовки тестовых данных; Понимание принципов работы LLM, RAG, промптов и метрик качества ИИ. 💎 Будет преимуществом Опыт работы с платформами оркестрации LLM (Dify, LangChain и т.п.); Автоматизация тестирования API (pytest, requests) и LLM-eval инструменты (RAGAS, DeepEval, promptfoo или аналоги); Опыт разметки и оценки ответов модели (LLM-as-a-judge, ручная оценка по рубрикам); CI/CD, Git на базовом уровне. 🕹 Условия Проектная, долгосрочный проект (Фултайм). Удаленно по РФ. Локация: строго Москва, Саранск. Оформление: ГПХ, ИП. Вилка: до 1400р в час гросс. 📞 Контакты Telegram: @••••••

Похожие вакансии

Все вакансии →
Сбер. ITМоскваhybridfulltimemiddle78

QA инженер (Поток)

Тестирование backend-сервисов и UI ИИ-решения для анализа реализации стратегии Сбера: функциональное и регрессионное тестирование, тестовая документация, подготовка тестовых данных и участие в релизах и ПСИ. Отдельный блок — оценка качества LLM-генерации: eval-наборы (golden set), LLM-as-judge, метрики Ragas, тестирование RAG и агентных сценариев с tool calling (MCP), мониторинг качества в проде.

sqlapirestpostmanjsonllm+6
19 октября 2026
Bell IntegratorМоскваonsitefulltimejunior62

QA Automation Engineer (Python)

Автоматизация тестирования UI и API на Python (PyTest, Requests, Playwright) в проекте крупного банка. В задачи входит функциональное, интеграционное и регрессионное тестирование, доработка тестового фреймворка и подготовка тестовой модели. Требуется уверенный Python, понимание REST и LLM-приложений, опыт работы с CI/CD. Формат работы — офис в Москве, оформление по ТК РФ.

apiapi testingci/cdgitlab cijenkinsjira+15
13 октября 2026
Сбер. ITМоскваonsitefulltimemiddle70

AQA инженер (Поток)

Автоматизация тестирования цифровой платформы для командной работы «Поток»: функциональное, регрессионное и интеграционное тестирование веб-версии и мобильных приложений на iOS/Android, тестирование API (REST, WebSocket) и AI-сервисов, поддержка тестовой документации и участие в подготовке релизов. Требуется опыт тестирования веб-приложений от 3 лет и автоматизации на Python от 2 лет (Pytest, Selenium, Selenoid, requests, allure), знание SQL и CI/CD.

appiumci/cddevtoolsgitlab ci/cdgrafanajenkins+13
7 октября 2026
Сбер. ITМоскваhybridfulltimejunior74

Junior AQA инженер (Поток)

Автотестирование backend-сервисов и UI ИИ-решения Сбера для анализа реализации стратегии: функциональное тестирование, тестовые данные, регресс и ПСИ. Отдельный блок — оценка качества LLM/RAG и агентных сценариев: golden set, LLM-as-judge, метрики Ragas, мониторинг качества в проде. Требуется от года опыта AQA на Python, SQL, тестирование API и понимание принципов работы LLM.

pythonsqlapipostmanpytestllm+6
13 ноября 2026