mysql数据导入增加速度方法
2017-02-26 23:32
295 查看
前天,在做大数据批量导入数据库中的时候,后台程序用的是jdbctemplate的batchupate方法,每次导入3000个数据,但是一分钟只能导入2000条左右的数据,这速度像蜗牛一样,肯定是不行的。后来在stackoverflow上查了一下该问题,发现别人也遇到了同样的问题,该方法与原生的批量插入方法相比,速度相差了几十倍,具体原因不知道是不是使用的方法不对,后来就改用了jdbctemplate的upate方法,将要执行的sql语句进行拼接,然后再执行,800w数据只用了4s钟,这速度简直是不可思议的。
原生态的方法:
insert into table values(1,2,3),(),....();
jdbctemplate.update(sql);
如果哪位大侠也遇到了同样的问题,请回答一下natchupdate的使用方法是否不对,谢谢!
原生态的方法:
insert into table values(1,2,3),(),....();
jdbctemplate.update(sql);
如果哪位大侠也遇到了同样的问题,请回答一下natchupdate的使用方法是否不对,谢谢!
相关文章推荐
- Mysql提升大数据导入速度的绝妙方法
- MySQL导入导出大量数据的程序实现方法
- 一种把ACCESS的数据导入到MySQL中的方法
- MySQL数据导入导出方法与工具介绍(1- myslqimport utility)
- 从MySQL导入导出大量数据的程序实现方法
- MySQL导入导出大量数据的程序实现方法
- MySQL数据导入导出方法与工具介绍(1- myslqimport ut
- MySQL导入数据的方法
- 从MySQL导入导出大量数据的程序实现方法
- MySQL 文本文件的导入导出数据的方法
- 将sqlserver的数据导入Mysql中(方法二)
- MySQL数据导入导出方法与工具介绍
- MySQL数据导入导出方法与工具mysqlimport
- MySQL数据导入导出方法与工具
- MySQL数据导入导出方法与工具介绍(3-Exporting Data)
- MySQL数据导入导出方法与工具介绍(1- myslqimport utility)
- mysql 大量数据导入方法[代码]
- 3步搞定纯真IP数据导入到MySQL的方法详解
- MySQL数据导入导出方法与工具mysqlimport
- MySQL数据导入导出方法与工具介绍(2-import from sql files)