使用 pyarrow 将字符串时间戳转换为日期时间

Question

在写入镶木地板文件之前，是否有可能将 pyarrow 表中的字符串时间戳转换为日期时间格式？

Answer 1

根据时间戳格式，您可以使用pyarrow.compute.strptime函数。它还没有详细记录，但您可以使用如下内容：

import pyarrow.compute as pc
pc.strptime(table.column("Timestamp"), format='%Y-%m-%d %H:%M:%S', unit='s')

前提是您的数据存储在table并且"Timestamp"是带有时间戳字符串的列的名称。