是否有任何关于 Spark 数据源 API 的官方文档。我只能从 DataBricks 教程中找到示例/示例实现信息。
所以没有任何关于如何使用 spark 创建自己的自定义数据源的官方文档，因为它在 spark developer api 中。我们仍然有一些不错的博客，您可以查看它们可能会有所帮助。我在这里提到一些博客
http://sparkdatasourceapi.blogspot.nl/2016/10/spark-data-source-api-write-custom.html
https://michalsenkyr.github.io/2017/02/spark-sql_datasource
还有一些示例代码也在这里请检查下面
https://github.com/VishvendraRana/spark-custom-datasource
如果您想检查使用 spark 数据源 api 的真实项目，请检查 apache carbondata
https://github.com/apache/carbondata
| 归档时间： |
|
| 查看次数： |
919 次 |
| 最近记录： |