gop*_*rni 14 apache-spark apache-spark-sql
我只知道版本差异,但不知道功能或其他.即Sparksession内部有sparkcontext和conf.
小智 24
在旧版本的Spark中有不同的上下文,它们是不同api的入口点(用于核心api的sparkcontext,用于spark-sql api的sql上下文,用于Dstream api的流上下文等等).这是混淆的源头.开发人员并且是spark团队的优化点,因此在最新版本的spark中只有一个入口点(spark会话),从中你可以获得各种其他入口点(spark上下文,流上下文等) ....)
| 归档时间: |
|
| 查看次数: |
9898 次 |
| 最近记录: |