当找到我想将其保存到变量的最大日期时，我在 spark 中创建了一个数据框。只是想弄清楚如何获得结果，这是一个字符串，并将其保存到一个变量中。
到目前为止的代码：
sqlDF = spark.sql("SELECT MAX(date) FROM account")
sqlDF.show()
结果是什么样的：
+--------------------+
| max(date)|
+--------------------+
|2018-04-19T14:11:...|
+--------------------+
谢谢
我有一个 2.37 GB 的 json 文件，包含大约 210 万条记录。我想使用 jq 来遍历文件并每 100000 条记录创建一个新文件。
IE
部分1.json 部分2.json 部分3.json 部分4.json 部分5.json 等
有人用jq做过这个吗？