Сквозные тесты для нескольких агентов сборки?

Question

Я использую Cypress для сквозного тестирования веб-приложений, и для некоторых браузеров я заметил небольшие изменения в выводе при смене агента сборки.

Это то, что я раньше даже не рассматривал, но теперь мне интересно, имеет ли смысл проводить сквозное тестирование на нескольких агентах сборки (или операционных системах), или этого достаточно сделать это только на конкретном агенте сборки?

Answer 1

Основываясь на ответах, приведенных в этой ветке , на Software Quality Assurance , я пришел к следующим выводам:

Если пользователи приложения используя разные браузеры и операционные системы, или настольные / мобильные версии приложения, или разные версии браузеров, то рекомендуется протестировать на нескольких агентах сборки. Однако мы, конечно же, не хотим запускать тесты на случайных агентах с разными конфигурациями. Любые изменения следует продумывать и выбирать под конкретную цель c. В противном случае мы получим случайные нестандартные тесты, которые нам нужно будет проанализировать.

Хороший способ выяснить, какие тесты следует проводить, - это выявить матрицу фактического / предполагаемого использования для проведения тестирования на основе риска. Ниже приведен образец матрицы, который можно использовать для этой цели.