Изменить имя файла в xml
fileName="CRM_Update_Logs.log"
будет
fileName="${sys:logFilename}_CRM_Update_Logs.log"
и добавьте это к своему Java-коду
Date date = new Date();
String LogDate= new SimpleDateFormat("yyyyMMdd").format(date);
System.setProperty("logFilename", LogDate);