读大文件到mysql

起初使用java读文件处理格式后存入数据库，运行后发现，效力太低太低，4G文本，4000多万行，估计需要30天左右才能完成处理。

数据格式：

每行->  XXXX ||| XXXXXXX ||| XXXXXXXXXXXXXXXXX

数据是严格结构化的，因此查询到1种直接从文件导入mysql的方法：

Load Data infile

参考文章：http://hunan.iteye.com/blog/752606

使用的指令以下：

成功导入47943428 rows ！

导入后发现每行结尾还有 存在，下面消除 符号

update detail_all set value = trim(TRAILING ' ' FROM `value`);

用trim消除开头和最后的符号。参考：http://nameyjj.blog.51cto.com/788669/621932

运行时报错：

即把超时的时间调大便可。

随后运行报错：

我这里是回滚进程没有结束，等待其结束便可。

生活不易，码农辛苦
如果您觉得本网站对您的学习有所帮助,可以手机扫描二维码进行捐赠