标签: load-data-infile

表T1结构:col1编号,col2编号

表T2结构:col1编号,col2编号,col3编号

csv文件:

row1:1,2,3,4,5,6
row2:1,2,3,4,5,6

我希望表T1中的数据为:

col1   col2
=====  ====
1       3
1       3

我希望表T2中的数据为:

col1   col2   col3
=====  ====   ==== 
1       3       5
1       3       5

以下控制文件无效

load data
infile *
insert into table T1 fields terminated by ',' TRAILING NULLCOLS 
(col1,fill1 filler,col2)
insert into table T2 fields terminated by ',' TRAILING NULLCOLS
(col1,fill2 filler,col2,fill3 filler,col3)
begindata
1,2,3,4,5,6
1,2,3,4,5,6

请帮我解决这个问题.

伪表:

 | primary_key | first_name | last_name | date_of_birth |
 | 1           | John Smith |           | 07/04/1982    |

目前,first_name包含许多行的用户全名.期望的结果是拆分数据,因此first_name包含"John",last_name包含"Smith".

我有一个CSV文件,其中包含所需的数据格式:

 | primary_key | first_name | last_name |
 | 1           | John       | Smith     |

是否有使用LOAD DATA INFILE命令来处理CSV文件更新使用primary_key此表中的所有行的方式 - 过程中(即DATE_OF_BIRTH)不能代替行中的任何其他数据？

MySql是否有批量加载命令行工具,如bcp for SQLServer和sqlldr for Oracle？我知道有一个SQL命令LOAD INFILE或类似命令,但我有时需要将一个不同的文件块批量加载到MySQL数据库.

我有一个脚本试图将一些数据加载到MySQL中LOAD DATA INFILE.出于某种原因,如果文件位于/tmp目录中,则它可以工作,但如果文件位于具有相同权限的另一个目录中,则不起作用.我找不到任何方法让MySQL从/tmp目录外部或数据库目录中导入数据,但我在手册中找不到任何解释为什么会出现这种情况的内容.

情况:

$ ls -l /
...
drwxrwxrwt  21 root root  4096 2010-10-19 20:02 tmp
drwxrwxrwt   2 root root  4096 2010-10-19 20:14 tmp2

$ ls -l /tmp/data.csv 
-rwxr-xr-x 1 timm timm 415431 2010-10-19 20:02 /tmp/data.csv

$ ls -l /tmp2/data.csv 
-rwxr-xr-x 1 timm timm 415431 2010-10-19 20:14 /tmp2/data.csv

AFAICT在重要方面是相同的.但是,如果在MySQL命令行,我做:

> LOAD DATA INFILE '/tmp2/data.csv' IGNORE INTO TABLE ports
      FIELDS TERMINATED BY ',' ENCLOSED BY '"' LINES TERMINATED BY ' ';
ERROR 29 (HY000): …

我想加快数据加载速度.

我使用MySQL 5.5,InnoDB并拥有1M行数据(65Mb文件).这需要5分钟.

什么mysql设置和命令会影响InnoDB的LOAD DATA INFILE的速度？

谢谢.

我们将数据库从在Web服务器上移动到单独的服务器(从Amazon EC2 Web服务器到RDS实例).

我们有一个LOAD DATA INFILE,在此之前需要添加LOCAL关键字,因为数据库将位于与Web服务器不同的机器上.

在我的开发服务器上测试,结果证明它不起作用:

• 我仍然可以从php中加载数据INFILE
• 我可以从mysql命令行加载DATA LOCAL INFILE(使用--local_infile = 1)
• 我无法从php加载DATA LOCAL INFILE.

在那两个有用的东西之间,它排除了:

• sql或php代码的问题
• 上传文件存在问题,包括语法和文件权限
• mysql服务器设置问题

我得到的错误是:ERROR 1148(42000):这个MySQL版本不允许使用命令(如果我不使用--local_infile = 1,我从mysql命令行中得到错误)

其他一些相关信息:

• Ubuntu 12.04,mysql 5.5.24,php 5.3.10
• 我正在使用php的mysql_connect(而不是mysqli,因为我们计划使用facebook的hiphop编译器,它不支持mysqli.)

• 因此,connect命令需要设置一个额外的标志:

  mysql_connect($dbHost, $dbUser, $dbPass, false, 128);
  

  Run Code Online (Sandbox Code Playgroud)
• 我用phpinfo()来证实这一点 mysql.allow_local_infile = On
• 我在Amazon RDS上尝试过(如果它是我的开发服务器中的一个问题),它也不能在那里工作.(打开local_infile参数.)

关于我没有尝试的唯一的事情就是在我的开发服务器上编译mysql服务器,打开标志以允许本地infile ...但即使我在我的开发服务器上运行它也不会帮助我使用Amazon RDS.(除此之外,LOAD DATA LOCAL INFILE可以在mysql命令行中运行.)

看起来这是php的mysql_connect()的具体问题

任何使用LOAD DATA LOCAL INFILE(可能来自Amazon RDS)知道让这个工作的诀窍的人？

我试图将数据加载到我的 MySQL 数据库的表中，并收到此错误。

LOAD DATA LOCAL INFILE 'C:\Users\Myself\Desktop\Blah Blah\LOAD DATA\week.txt' 
INTO TABLE week;

参考：这个

路径百分百正确，我通过按shift键并单击“复制路径为”复制它并检查了很多次。所以任何关于这方面的提示将不胜感激。. 我的研究：看到这个答案，我试图通过改变C:\Users来C:\\Users。它对我不起作用。

其次，有没有办法在这里使用某种相对路径（而不是绝对路径）？

我有一个名为dataset1.csv的csv文件,它包含3个变量att1(字符),att2和att3(数字数据)的标题.

我试过以下代码

filename test 'C:\Users\1502911\Desktop\Practice\SAS\Dataset';

data dataset1;
    infile test(dataset1.csv) dsd delimiter=',';
    input att1 $ att2 att3;
run;

我想要的输出是忽略第一行

我正在使用felixge/node-mysql模块从 node.js 与 MySQL 数据库进行交互。我在一次请求中向数据库插入大量数据时遇到了问题INSERT。

尽管这里描述了如何使用大型 INSERT 查询向数据库添加 500,000 条记录，但我的脚本因数据量更小而失败，并出现以下错误：

{ [Error: write EPIPE] code: 'EPIPE', errno: 'EPIPE', syscall:
'write', fatal: true }

我认为这个错误在某种程度上与mysql-node 的 github Load data infile failed with EPIPE for large files中的问题#359有关，该问题自创建以来的最后 5 个月内尚未分配给某人。

那么保证交付的查询的实际大小是多少？

上周这是有效的,今天却没有.我没有更改php文件.我在临时工作中所做的就是在我的Ubuntu 15.04服务器上运行apt-get update.

我的MySQL语句是:

LOAD DATA INFILE "/var/www/html/uploads/TitleList.csv" INTO TABLE tblLSITitleList FIELDS TERMINATED BY "," OPTIONALLY ENCLOSED BY "\"" IGNORE 5 LINES;

这会出现以下错误:

文件'/var/www/html/uploads/TitleList.csv'未找到(错误代码:13 - 权限被拒绝)

我尝试了以下解决方案(这是我上周初解决这个问题的方法: LOAD DATA INFILE错误代码:13

我检查了apparmor,上传文件夹仍在那里.

我也试过chmodding各种权限,包括777,但没有任何帮助.

有什么聪明的建议吗？