在 Sqlite 3.34 中执行 UPSERT 时出错 - 错误：靠近“DO”：语法错误

Question

我正在尝试将每日 CSV 加载文件加载到main表中，以便插入所有新记录并更新所有现有记录。我正在使用UPSERTSqlite 的功能来实现此目的。

这是我的 shell 脚本。

LOAD_FILE="/tmp/main.csv"
LOAD_TABLE="tbl_tmp_main"
MAIN_TABLE="tbl_main"
COLUMNS="t_id, t_col1, t_col2"


CREATE_TABLE_QUERY="DROP TABLE IF EXISTS $LOAD_TABLE; CREATE TABLE $LOAD_TABLE AS SELECT $COLUMNS FROM $MAIN_TABLE WHERE false"
LOAD_TABLE_QUERY=".separator ','\n.import '$LOAD_FILE' $LOAD_TABLE"
UPSERT_TABLE_QUERY="
    INSERT INTO $MAIN_TABLE($COLUMNS) SELECT $COLUMNS FROM $LOAD_TABLE
    ON CONFLICT(t_id) DO UPDATE
    SET
        t_col1 = excluded.t_col1,
        t_col2 = excluded.t_col2
    ;
"

echo ""
echo "$CREATE_TABLE_QUERY" | sqlite3 mydatabase.sqlite3            # <-- This works
echo "[INFO] Temporary Table Created."

echo "$LOAD_TABLE_QUERY" | sqlite3 mydatabase.sqlite3              # <-- This works
echo "[INFO] Data Loaded into Temporary Table."

echo "$UPSERT_TABLE_QUERY" | sqlite3 mydatabase.sqlite3            # <-- This errors out
echo "[INFO] Records Inserted/Updated."
echo ""

这是错误。

Error: near line 2: near "DO": syntax error

我尝试检查文档，但我不确定上面的查询出了什么问题。有人可以指出为什么它不起作用。

这是我的 sqlite 版本

-> sqlite3 --version
3.34.1 2021-01-20 14:10:07 10e20c0b43500cfb9bbc0eaa061c57514f715d87238f4d835880cd846b9ebd1f

Answer 1

该错误是由于Parsing Ambiguity文档中提到的引起的。您需要添加WHERE true作为 SELECT 子句的一部分，这应该可以修复它。

这是更新后的 UPSERT 查询。

INSERT INTO $MAIN_TABLE($COLUMNS) SELECT $COLUMNS FROM $LOAD_TABLE  WHERE true
--                                                                  ^^^^^^^^^^
ON CONFLICT(t_id) DO UPDATE
SET
    t_col1 = excluded.t_col1,
    t_col2 = excluded.t_col2
;

这是Docs中的部分。

解析歧义

当附加 UPSERT 的 INSERT 语句从 SELECT 语句获取其值时，存在潜在的解析歧义。解析器可能无法判断“ON”关键字是否引入了 UPSERT 或者它是否是联接的 ON 子句。要解决此问题，SELECT 语句应始终包含 WHERE 子句，即使该 WHERE 子句只是“WHERE true”。

ON 的使用不明确：

INSERT INTO t1 SELECT * FROM t2
ON CONFLICT(x) DO UPDATE SET y=excluded.y;

使用 WHERE 子句解决了歧义：

INSERT INTO t1 SELECT * FROM t2 WHERE true
ON CONFLICT(x) DO UPDATE SET y=excluded.y;