Вы можете попробовать Path.Combine
(при объединении каталога и имени файла) и интерполяцию строк $"{...}"
:
File.Copy(CurrentDatabasePath,
Path.Combine(PathtobackUp,
$"{DateTime.Now:yyyy'-'MM'-'dd' 'HH'.'mm'.'sss}_BackUp.accdb"),
true);
Здесь я поместил метку времени в формате yyyy-MM-dd HH.mm.ss
, например 2019-03-07 14.36.55_BackUp.accdb