通过C#进行Apache spark查询

Gro*_*oot 6 .net c# apache-spark .net-spark

我想知道是否有一种方法可以使用C#编写查询以在Apache spark上运行.我知道spark SQL查询可以用java/scala/python编写.c#有接口吗?

小智 0

您究竟想实现什么目标?如果你想编写使用 Spark api 的程序,可能你会运气不好,因为只公开了 scala、java 和 python api。但是如果你想查询 Spark 存储数据,那么你可以看到 thriftserver 附带了 Spark 并通过它传递你的查询。本质上它应该支持任何 jdbc 连接(请参阅文档中的 beeline 示例)