Как сравнить результаты Дженкинс с разных рабочих мест

Question

В моем текущем проекте я тестирую одно веб-приложение на разных браузерах. поэтому у меня есть один проект Selen / Maven и 16 заданий в jenkins: тесты в IE8, 9, FF, Chrome, Windows 7, Windows XP, 32 и 64-битных средах

Результаты заданий генерируют исходные отчеты, и у меня есть хорошие и чистые общие графики.

Но проблема заключается в сравнении результатов отдельных тестов: например, я хотел бы знать, какие тесты дают сбой в Internet Explorer, а не в Firefox или какой браузер стабилен, а какой нет.

В настоящее время я вынужден открывать X окон с разными результатами и сравнивать результаты вручную

есть ли плагин, который сравнивает результаты? или моя конфигурация Дженкинса неверна?

Answer 1

Вероятно, вы должны использовать «матричный» тип задания, называемый «Построить проект с несколькими конфигурациями» на странице «Новое задание».

Там вы настраиваете задание один раз, и оно автоматически выполняется несколько раз повсе комбинации осей, которые вы предоставляете

Я не уверен насчет специфики Selenium с Jenkins, но вы, вероятно, захотите установить две разные оси:

• Определяется пользователемось: браузер (FF, IE ...)
• подчиненная ось: сборка ведомого (XP_32, XP_64, W7_32 ...)

В целом, документация для этого немного тонкаяособенность, но посмотрите этот ответ для некоторой информации:
https://stackoverflow.com/a/424343/234938

Answer 2

Вы пробовали Анализатор результатов теста * Плагин 1002 * в Jenkins?

https://wiki.jenkins -ci.org / display / JENKINS / Тест + Результаты + Анализатор + Плагин