连接器spark-redshift的替代品

Question

我想知道它有spark-redshift连接器的任何其他替代品.它似乎不再维护,因为此库自动包含在Spark 2.1.0-db2及更高版本的Databricks集群映像中.

Answer 1

当前没有具有同等功能的替代方案 - 最接近的可用方法是使用 Postgres JDBC 驱动程序。 有关使用的信息，请参阅此线程。不幸的是，诸如完整查询下推之类的出色功能目前是闭源 Databricks 实现所独有的。