Databricks - 不为空，但它不是 Delta 表

Question

我在 Databricks 上运行查询：

DROP TABLE IF EXISTS dublicates_hotels;
CREATE TABLE IF NOT EXISTS dublicates_hotels
...

我试图理解为什么我收到以下错误：

SQL 语句错误： AnalysisException：无法创建表（' default. dublicates_hotels'）。关联位置 ('dbfs:/user/hive/warehouse/dublicates_hotels') 不为空，但它不是 Delta 表

我已经找到了解决它的方法（通过手动删除它）：

dbutils.fs.rm('.../dublicates_hotels',recurse=True)

但我不明白为什么它仍然保留桌子？即使我创建了一个新集群（终止了前一个集群），并且我正在附加一个新集群来运行此查询。

任何人都可以帮助我理解这一点吗？

Answer 1

我也遇到了类似的问题，然后尝试了命令行 CREATE OR REPLACE TABLE ，它解决了我的问题。

Answer 2

DROP TABLE 和 CREATE TABLE 与 Metastore 中的条目一起使用，Metastore 是某种数据库，保存有关数据库和表的元数据。可能存在这样的情况：元存储中的条目不存在，因此DROP TABLE IF EXISTS不会执行任何操作。但是，当CREATE TABLE执行时，它还会检查 DBFS 上的位置，如果目录存在（可能包含数据），则失败。当在不使用元存储的情况下写入数据时，此目录可能是以前的一些实验留下的。

Answer 3

如果使用指定的 LOCATION 创建的表 - 这意味着该表是外部的，因此当您删除它时 - 您仅删除该表的配置单元元数据，目录内容保持原样。如果指定相同的 LOCATION，则可以通过 CREATE TABLE 恢复表（Delta 将表结构及其数据保留在目录中）。

如果创建表时未指定 LOCATION - 这是一个托管表，DROP 将破坏元数据和目录内容