MySQL insert语句慢查询的优化

近期发现MySQL slow log 里面有不少慢查询，而分析慢查询日志发现大量的慢查询是insert语句的。在高峰期（早上10点左右）半小时的慢查询量能够到28G左右。遂决定优化

 

优化方法：

一、 一个客户端在一个时候要插多条数据，那么用多个values

insert into t1 values(...),(...),(...)

若是是往一个非空的表里插数据，可调节bulk_insert_buffer_size（缺省为8388608字节=8M）

 

二、 若是多个客户端在同时插许多条数据，那么用insert delayed语句

利：客户端立刻返回，数据排成一队；数据整齐的写到一个块里，而不是分散。

弊：若是这个表被查获删数据，那么插入会变慢，另外，为这个表起一个handler线程来处理这些数据也要耗费一些额外资源

待插的数据放在内存里，一旦数据库被意外终止（如kill -9），那么数据会丢失。

这个方法只适用于myisam,memory,archive,blackhole引擎类表。

可调节delayed_insert_limit（缺省为一次100条）

delayed_insert_timeout（缺省为300）秒内，若无新的insert delayed语句，则handler线程退出。

delayed_queue_size（缺省为1000条）一旦满了，客户端的insert delayed会阻塞。

比第一个方法要慢。

并且对Myisam来讲，在可使用方法3时，不需用此方法2。

 

三、对Myisam表来讲，若是一个表中间没有删除过数据，那么，在Select语句执行时，能够同时执行insert语句将数据插在文件最后。

concurrent_insert必须为1（缺省就是1）

 

四、从文本文件执行load data infile通常要比用insert语句快20倍。

若是表有索引，能够先去掉索引，load完后，再加上索引。能够提升速度（相比load同时建索引，能够减小disk seek）。

这个过后建索引的方法在msisam表为空时自动执行。

 

五、若是插入多条语句，能够先lock tables t write，插入后再unlock tables(索引会只flush一次）; 但若是当中只有1条insert，那么不须要。

 

六、要提升Myisam表的load data和insert速度，可提升key_buffer_size（缺省为8M）

若是机器有256M以上内存，那么能够设key_buffer_size为64M，table_open_cache能够调高为256（缺省为64）

若是有128M以上内存，能够设key_buffer_size为16M