Это может быть проблема с правами доступа.
Начиная с Android 8, READ_EXTERNAL_STORAGE и WRITE_EXTERNAL_STORAGE необходимо запрашивать отдельно.Таким образом, даже если вы можете прочитать файл, возможно, вы не сможете его удалить.
Если вы уверены, что у вас нет проблем с правами доступа, измените код на
try {
Files.delete(theFileName);
} catch (Exception e) {
log.e(TAG, e.getMessage());
}
.указать причину, по которой удаление не удалось.