我在AWS Glue控制台中创建了一个Development Endpoint,现在我可以访问gluepyspark控制台中的SparkContext和SQLContext.
如何访问目录并列出所有数据库和表?通常sqlContext.sql("show tables").show()不起作用.
sqlContext.sql("show tables").show()
可能有用的是CatalogConnection类,但我不知道它在哪个包中.我尝试从awsglue.context导入并没有成功.
pyspark-sql aws-glue
aws-glue ×1
pyspark-sql ×1