性能数据:导入1684472条数据用时42.87s(i5-6300hq,8G内存)
故事:
曾经年少无知,在某度云下载了无数的废弃裤子下来自己整合,大部分格式如下图①
最开始的时候自己写java方法用多线程导入数据库,
后来因为经常出错,又发现navicat有导入功能,转navicat,
后来又因为数据量太大,无奈等不起,
继续上网找方法,发现mysql有LOAD DATA LOCAL INFILE这个方法可以导入数据到数据库,
速度还蛮快的,所以….
LOAD DATA LOCAL INFILE "D:/200.txt"
INTO TABLE wangyi
FIELDS TERMINATED BY ';' ENCLOSED BY '"' LINES TERMINATED BY '\r\n';
这已经是一年多以前的故事了,现在发现ELK更快,性能更好。。
本文讲述了作者从使用Java多线程导入数据库到采用Navicat工具,再到利用MySQL LOAD DATA LOCAL INFILE指令进行数据导入的过程,并最终发现ELK堆栈在处理大量数据时表现出更高的效率。
1895

被折叠的 条评论
为什么被折叠?



