LOAD DATA LOCAL INFILE(导入1684472条数据用时42.87s)

来源:互联网 发布:window系统编程pdf 编辑:程序博客网 时间:2024/06/05 02:26

性能数据:导入1684472条数据用时42.87s(i5-6300hq,8G内存)


故事:
曾经年少无知,在某度云下载了无数的废弃裤子下来自己整合,大部分格式如下图①
最开始的时候自己写java方法用多线程导入数据库,
后来因为经常出错,又发现navicat有导入功能,转navicat,
后来又因为数据量太大,无奈等不起,
继续上网找方法,发现mysql有LOAD DATA LOCAL INFILE这个方法可以导入数据到数据库,
速度还蛮快的,所以….

LOAD DATA LOCAL INFILE "D:/200.txt"INTO TABLE wangyiFIELDS TERMINATED BY ';' ENCLOSED BY '"' LINES TERMINATED BY '\r\n';

数据格式①


这已经是一年多以前的故事了,现在发现ELK更快,性能更好。。

0 0
原创粉丝点击