pyspark在创建拼花地板文件时更改时间戳

pyspark在创建拼花地板文件时更改时间戳,pyspark,timestamp,Pyspark,Timestamp,我正在创建一个数据框并将其保存为拼花格式。 当我使用df.show()创建数据帧后,我有正确的时间戳显示,但当我使用df.write.parquet(“文件名”)时。它正在更改时间戳 我做df.show时的原始时间戳2018-02-27 07:15:00,2018-07-06 14:23:00 创建拼花地板并读取该拼花地板文件后-2018-02-27 02:15:002018-07-06 10:23:00 要么相差5小时,要么相差4小时。你知道发生了什么吗。感谢阅读您是否使用hive metas

我正在创建一个数据框并将其保存为拼花格式。 当我使用df.show()创建数据帧后,我有正确的时间戳显示,但当我使用df.write.parquet(“文件名”)时。它正在更改时间戳

我做df.show时的原始时间戳2018-02-27 07:15:00,2018-07-06 14:23:00

创建拼花地板并读取该拼花地板文件后-2018-02-27 02:15:002018-07-06 10:23:00


要么相差5小时,要么相差4小时。你知道发生了什么吗。感谢阅读

您是否使用hive metastore进行拼花?我们没有使用hive metastore