Ошибка, которую вы видите в 2.1.2, связана с настройками режима вилки, которые необходимо выполнить в плагине.
установите forkmode = never и попробуйте его (я подозреваю, что может быть проблема в вашем свойстве useSystemclassloader).
В противном случае используйте плагин maven-surefire версии 2.5, который должен определенно работать и генерировать верные сообщения, даже если несколько тестов не пройдены.