200 автотестов запускает вручную их автор перед релизом: что даст встраивание в пайплайн
В команде есть 200 API-автотестов. Запускает их автор фреймворка со своей машины за день до релиза. Если он в отпуске, прогон пропускают.
Что изменится, если завести прогон в CI на каждый merge request?
- Регрессия обнаружится на merge request, а не за день до релиза, и прогон перестанет зависеть от того, вспомнил ли кто-то его запустить
- Тесты станут стабильнее сами по себе, потому что раннер мощнее и стабильнее рабочего ноутбука
- Поддержка тестов перестанет быть нужна: разбирать падения будет дежурный инженер инфраструктуры
- Покрытие вырастет само собой: пайплайн добавит недостающие проверки по изменённым файлам