加快 mysql 插入速度有哪些方式呢

[caiji11]

• 最近用 java 做了一个小工具 可以向 mysql 插入大量插入随机数据 可是效率有点低
  之前想过生成随机数据后 写到 txt 文本 再读到 数据库 但这需要 mysql 开启读文本的权限
  想知道有其他方式优化插入速度么

[xuanbg]

楼主批量插入了解一下

[LGA1150]

是自增主键吗？

[caiji11]

@LGA1150 对的 有啥好的想法么

[caiji11]

@xuanbg 这样 value 后面拼接太多的话 也需要 去设置下 mysql 感觉别人用了工具 可能不知道要设置

[clrss]

server 端 prepare stmt 用了么

[ericbize]

lz 是单次插入单条吗？

[ZXCDFGTYU]

数据如果不重要的话可以把表结构设计为 memory，然后 insert 的时候，可以拼接多个 value，但是不要拼接太多

[johnsona]

九浅一深

[opengps]

机械硬盘的话，换成 ssd 硬盘
单条单次写入的话，改为多次批量写入
写入随机时候，保持聚集索引列是递增状态的

[wellsc]

换 myrocks 引擎，插入贼快，查找就有点捉急

[limuyan44]

只是生成随机数据还有比存储过程快的吗

[caiji11]

@clrss 没有 这个对 效率影响很大么 用 jdbc 简单的 insert 不过 刚才试了下批量插入 作用好像不是很明显

[wowo243]

@caiji11 好像连接的 jdbc url 里要加个配置，批量插曲是比单条快不少的

[caiji11]

@opengps 嗯嗯 自己可以这么做 我想做成开源的工具

[caiji11]

@wowo243 rewriteBatchedStatements=true 这个吧 有点作用 快了三秒

[caiji11]

@wellsc 谢谢啦 知道个新的引擎 不过我想做成开源的工具 想从 sql 入手

[caiji11]

@ericbize 已经改成了拼接的方式

[caiji11]

@limuyan44 没懂啥意思 可以再说下么

[ericls]

去掉 constraint 和 index

[foam]

@caiji11 他的意思是，你直接在存储过程里写随机值插数据。我没用过，对该方法不表态。

另外，如果用的是 inodb，插入前可以将 innodb_flush_log_at_trx_commit 设置为 0，保证最快插入，处理完再设置回去(默认值是 1)。该参数为 0 时表示每次事务(注意每次插入就是一次事务的提交)写到 buffer 后就返回了，会有个线程异步去刷到日志和落磁盘。而 1 则落到磁盘才返回。