Как сравнить результаты теста каратэ между двумя средами?

Question

У меня есть две разные среды (скажем) QA и QA2 Настройка для тестирования API каратэ.

Я хотел знать, возможно ли запускать тесты для обоих файлов с одинаковыми характеристиками и иметь сравнительный результат. Например, сколько тестов не пройдено на QA против QA2.

Как мне этого добиться?

Answer 1

Это очень конкретная c потребность, которая больше связана с вашей непрерывной интеграцией и сторонними отчетами, чем с каратэ (на мой взгляд).

Вы можете посмотреть в этой ветке идеи для сторонней организации. серверы отчетов et c: https://github.com/intuit/karate/issues/619

Вы, вероятно, можете взять файлы отчетов JSON (или данные Results, упомянутые в вышеупомянутой теме) и написать свой собственный решение, которое может быть лучшим подходом.