相关疑难解决方法(0)

spark createOrReplaceTempView vs createGlobalTempView

Spark Dataset 2.0提供了两个功能createOrReplaceTempViewcreateGlobalTempView.我无法理解两种功能之间的基本区别.

根据API文件:

createOrReplaceTempView:此临时视图的生命周期与用于创建此数据集的[[SparkSession]]相关联.
所以,当我调用时sparkSession.close(),定义将被销毁.这是真的吗?

createGlobalTempView:此临时视图的生命周期与此Spark应用程序绑定.

何时会破坏这种类型的视图?任何例子.喜欢sparkSession.close()?

apache-spark apache-spark-dataset

20
推荐指数
2
解决办法
2万
查看次数

标签 统计

apache-spark ×1

apache-spark-dataset ×1