Я бы не рекомендовал запускать CTS в Windows.
До Android 4+ предложенное здесь использование обходного пути (используйте командный файл) работало, но когда я попробовал его, было много сбоев, и многие тесты даже не выполнялись вообще.
Кроме того, согласно документации Google CTS, он должен работать только на Linux или MAC, так как вы можете гарантировать, что сбои происходят из-за тестируемого устройства (реального сбоя) или потому, что вы используете его в неподдерживаемой среде?
Тем не менее, с Android 6+ использование командного файла в Windows не работало для меня, CTS будет искать bash, который существует только на компьютере с Linux, и завершит выполнение до его запуска.
При попытке запустить в Linux он работает прекрасно.