Я бы попробовал что-то вроде этого:
import os
import datetime
filenames = os.listdir()
for filename in filenames:
if filename.endswith('.xlsx'): # only grab Excel files
date_object = datetime.datetime.strptime(my_filename, "activity_%Y_%m_%d_%I_%M_%S.xlsx")
print(date_object)
Где объясняются важные части парсинга времени здесь
Возможно, более ясным примером будет:
my_filename = "activity_2019_05_13_11_21_30.xlsx"
date_object = datetime.datetime.strptime(my_filename, "activity_%Y_%m_%d_%I_%M_%S.xlsx")
print(date_object)
Результаты в
2019-05-13 11: 21: 30