В идеале, если вы поместили инициализацию отчета в вызов @BeforeSuite и flu sh () в @AfterSuite, то для всех наборов будут созданы отдельные отчеты.
Если вы следовали то же самое и все еще не так, как ожидалось, пожалуйста, поделитесь более подробной информацией.