Оказывается, что DataCollectors не работали во время выполнения тестов. Это было диагностировано в журнале событий в VSTT. К сожалению, он не обновляет обычные журналы MSBuild, и никакая другая информация не передается в журналы рабочего процесса.
Я закончил тем, что отключил сбор данных в файле local.testsettings, который используется как часть процесса сборки.