После долгих взломов стало очевидно, что лучшим решением является этот инструмент:
http://www.enjoyxstudy.com/selenium/autoexec/index.en.html
Он работает "из коробки", поддерживает htmlSuite, работает с windows и linux, запускает большинство браузеров, отправляет отчеты по электронной почте, может получать новые тесты из SVN, хорошо интегрируется с Jenkins и работает с тестами Selenium, которые не основаны на PHP но он творит чудеса по сравнению с другими инструментами, которые я опробовал.
Действительно, намного проще, очень удобно для пользователя, бесплатно и отлично работает.