MySQL社区

标题: 一个有关mysql数据库写入效率的问题 [打印本页]

作者: w4920    时间: 2015-11-3 11:41
标题: 一个有关mysql数据库写入效率的问题
最近在做一个项目,本人DBA新手,遇到一个问题,请社区内大神给我一些可行的方案建议。问题具体是这样的:有一个历史记录表是记录车辆上的相关信息,同一时间会有很多车辆的数据需要插入这个表,表内用车牌来区别各个车辆,所以会有大量的table,每个table对应一个车,里面的信息是历史信息,所以量会很大。现在打算按时间段来划分,比如收集好半天的车辆信息数据一次性往历史表内插,我试了下insert循环插5000条数据和addBatch()也要13秒,感觉插入效率比较低,有没有好的方案呢?我在网上看过说多线程并行插入,但是我对这个不太懂,哪位大虾能给个例子哈?

作者: w4920    时间: 2015-11-3 16:52
各路大侠SOS啊!!!
作者: nycle    时间: 2015-11-6 16:14
通常采用两种方式提升插入性能:
1.insert into xxx(xxx,xxx) values(xxx,xxx),(xxx,xxx),...(xxx,xxx);
2.load data local infile '/xxx/xxx.txt' into table xxx;
作者: w4920    时间: 2015-11-27 13:28
nycle 发表于 2015-11-6 16:14
通常采用两种方式提升插入性能:
1.insert into xxx(xxx,xxx) values(xxx,xxx),(xxx,xxx),...(xxx,xxx);
...

第二种方法应该比第一种效率更高,能不能详细说明一下啊
作者: w4920    时间: 2015-12-1 16:10
nycle 发表于 2015-11-6 16:14
通常采用两种方式提升插入性能:
1.insert into xxx(xxx,xxx) values(xxx,xxx),(xxx,xxx),...(xxx,xxx);
...

第二种方法里面的txt格式是什么样的啊?





欢迎光临 MySQL社区 (http://mysqlpub.com/) Powered by Discuz! X3.2