小编Ele*_*les的帖子

查找最新文件pyspark

所以我想出了如何使用 python 查找最新文件。现在我想知道是否可以使用 pyspark 找到最新的文件。目前我指定了一个路径,但我希望 pyspark 获取最新修改的文​​件。

当前代码如下所示:

df = sc.read.csv("Path://to/file", header=True, inderSchema=True)
Run Code Online (Sandbox Code Playgroud)

在此先感谢您的帮助。

apache-spark pyspark

4
推荐指数
1
解决办法
7644
查看次数

标签 统计

apache-spark ×1

pyspark ×1