将空值和格式不正确的日期时间值导入日期时间列 MySQL

Question

我正在使用带有 Sequel Pro 界面的 MySQL 数据库，并且是 SQL 的新手。我正在尝试从 csv 文件导入数据，我要导入的其中一列的类型为 datetime。但是，我接收数据的格式是 mm/dd/yy hh:mm AM/PM 或 null。最初，我将列的类型修改为 varchar 以避免该问题，但现在我需要对无法完成的数据执行一些日期函数，除非该列具有日期时间类型和格式，因此我需要一种方法将传入数据转换为正确的日期时间格式。

此外，不了解 SQL 或数据库的人将运行 import 语句，因此最好让他们简单地单击文件 - 导入，而不必在 mysql 命令行中输入任何复杂的内容。此外，在运行查询后，我需要以输入的相同格式导出数据（mm/dd/yy hh:mm AM/PM 或 null）。

以下是该列中的一些示例值：

Completion Time
null
6/16/14 10:33 AM
null
null
6/16/14 13:03 PM
6/17/14 13:53 PM
6/18/14 14:38 PM
6/18/14 14:52 PM
6/19/14 13:13 PM
6/18/14 18:56 PM
6/18/14 19:02 PM
null

从几个小时的谷歌搜索中我收集到的一个可能简单的解决方案可能不是一个好主意，将列类型保留为 varchar 然后以某种方式提取传入数据的 mm/dd/yy 部分，转换正确的 MySQL 日期格式，然后执行我的日期功能。

无论如何，任何帮助将不胜感激。

Answer 1

这对于 MySQL 的日期和时间函数来说并不是很困难。STR_TO_DATE执行导入所需的操作：

我接收数据的格式是 mm/dd/yy hh:mm AM/PM 或 null。

你得到你的 DATETIME 值

STR_TO_DATE(yourValue, '%m/%d/%y %h:%i %p')

您可以在函数DATE_FORMAT的描述中找到 STR_TO_DATE 的说明符

对于导出，您使用已经提到的函数 DATE_FORMAT 执行相反的操作，并使用完全相同的格式字符串：

SELECT DATE_FORMAT(your_datetime_col, '%m/%d/%y %h:%i %p')

看看这个演示

您可以在 INSERT 语句中进行转换，如下所示：

INSERT INTO example (date_time) VALUES 
(STR_TO_DATE('09/26/14 07:30 AM', '%m/%d/%y %h:%i %p'));

看到它在更新的演示中工作

使用 LOAD DATA INFILE 自定义导入

让我们有一个表，example有两列id，并date_time为

CREATE TABLE example (
    id INT NOT NULL PRIMARY KEY,
    date_time DATETIME
);

我们还有一个包含以下数据的 CSV 文件 example.csv：

id,date
1,09/26/14 07:30 AM
2,07/23/14 07:30 PM

要使用 LOAD DATA INFILE 导入此文件，您将使用以下语句：

LOAD DATA INFILE 'path/on/server/to/example.csv'
INTO TABLE example
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
IGNORE 1 LINES             -- because of the column headers in the first line
(id, @var1)                -- You've got to map every field of your csv file to a column
                           -- of your table.
                           -- You've got to list the names of the columns of your table,
                           -- not the headers in the csv file.
                           -- if one field should be ignored, use another variable for this
                           -- field.
SET date_time = STR_TO_DATE(@var1, '%m/%d/%y %h:%i %p');

如果 csv 文件中的日期包含指示 NULL 值的文字字符串“null”，则使用 CASE 运算符：

date
09/26/14 07:30 AM
null
07/23/14 07:30 PM

那么我们必须使用

LOAD DATA INFILE 'path/on/server/to/example.csv'
INTO TABLE example
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\r\n' -- your line endings
IGNORE 1 LINES             -- because of the column headers in the first line
(@var1)                     -- read all parts of the date in variables
SET completionTime = CASE 
                     WHEN @var1 = 'null' THEN NULL 
                     ELSE STR_TO_DATE(@var1, '%m/%d/%y %h:%i %p')
                     END;

包含分隔符的字段的问题，在这种情况下是逗号，您已经解决了用封闭字符封闭这些字段（或简单地全部）的问题。

但我们真的应该看看你的真实格式。