изменение временной метки pyspark при создании файла паркета - PullRequest
0 голосов
/ 13 февраля 2020

Я создаю фрейм данных и сохраняю его в формате паркета. после создания dataframe, когда я сделал df.show (), у меня отображается правильное отображение метки времени, но когда я использовал df.write.parquet ("имя файла"). это меняет метку времени.

оригинальные метки времени, когда я делал df.show () 2018-02-27 07:15:00, 2018-07-06 14: 23: 00

после создание паркета и чтение из этого файла паркета - 2018-02-27 02:15:00, 2018-07-06 10: 23: 00

Существует разница в 5 часов или 4 часа. это происходит. Спасибо за чтение

...