(1).首先咱们须要了解limit分页的工做流程内存
demo: SELECT * FROM table LIMIT 10000,5
一般咱们会认为以上SQL会从10000条后面取5条,正确的是取出10005条,而后再抛弃前面的10000条.随着分页的增长内存消耗越高工作流
eg:it
SELECT * from user` LIMIT 0,10 (执行查询用时0.001s) SELECT * from user` LIMIT 200000,10 (执行查询用时0.035s) SELECT * from user` LIMIT 20000000,10;(执行查询用时2.451s)
(2).解决方法:table
2.1.限制总分页数,例如百度限制最多76页.历史数据须要查询能够作站内筛选。百度
2.2.select
SELECT * from `user` where id>20000000 limit 10(执行查询用时0.001s) //2000W查询
本方法缺点是id中间必须保证连续性,删除数据时候作逻辑删除便可.不然id不连续很尴尬分页
2.3.方法
(2.3.1).select * from user limit 40000001,3;(原始方式4.9s) (2.3.2).SELECT * FROM user as a INNER JOIN (SELECT id FROM user limit 4000001,3) as b on a.id= b.id;(新方法0.5s) //2.3推荐的方法,4000w查询 0.5s
本方法解决了id不连续的问题,能够真实删除数据im