【MySQL】随机获取数据的方法,支持大数据量

在mysql中带了随机取数据的函数,在mysql中咱们会有rand()函数,不少朋友都会直接使用,若是几百条数据确定没事,若是几万或百万时你会发现,直接使用是错误的。下面我来介绍随机取数据一些优化方法。php

SELECT * FROM table_name ORDER BY rand() LIMIT 5;

rand在手册里是这么说的:
RAND()
RAND(N)
返回在范围0到1.0内的随机浮点值。若是一个整数参数N被指定,它被用做种子值。mysql

mysql> select RAND();
        -> 0.5925
mysql> select RAND(20);
        -> 0.1811
mysql> select RAND(20);
        -> 0.1811
mysql> select RAND();
        -> 0.2079
mysql> select RAND();
        -> 0.7888

你不能在一个ORDER BY子句用RAND()值使用列,由于ORDER BY将重复计算列屡次。sql

然而在MySQL3.23中,你能够作: SELECT * FROM table_name ORDER BY RAND(),函数

这是有利于获得一个来自SELECT * FROM table1,table2 WHERE a=b AND c<d ORDER BY RAND() LIMIT 1000的集合的随机样本。测试

注意在一个WHERE子句里的一个RAND()将在每次WHERE被执行时从新评估。优化

 

网上基本上都是查询max(id) * rand()来随机获取数据。spa

 

SELECT *
FROM `table` AS t1 JOIN (SELECT ROUND(RAND() * (SELECT MAX(id) FROM `table`)) AS id) AS t2
WHERE t1.id >= t2.id
ORDER BY t1.id ASC LIMIT 5;

 

可是这样会产生连续的5条记录。解决办法只能是每次查询一条,查询5次。即使如此也值得,由于15万条的表,查询只须要0.01秒不到。code



上面的语句采用的是JOIN,mysql的论坛上有人使用blog

SELECT *
FROM `table`
WHERE id >= (SELECT FLOOR( MAX(id) * RAND()) FROM `table` )
ORDER BY id LIMIT 1;

我测试了一下,须要0.5秒,速度也不错,可是跟上面的语句仍是有很大差距
后来请教了baidu,获得以下代码
完整查询语句是:table

SELECT * FROM `table`
WHERE id >= (SELECT floor( RAND() * ((SELECT MAX(id) FROM `table`)-(SELECT MIN(id) FROM `table`)) + (SELECT MIN(id) FROM `table`))) 
ORDER BY id LIMIT 1;
SELECT *
FROM `table` AS t1 JOIN (SELECT ROUND(RAND() * ((SELECT MAX(id) FROM `table`)-(SELECT MIN(id) FROM `table`))+(SELECT MIN(id) FROM `table`)) AS id) AS t2
WHERE t1.id >= t2.id
ORDER BY t1.id LIMIT 1;

最后在php中对这两个语句进行分别查询10次,
前者花费时间 0.147433 秒
后者花费时间 0.015130 秒

执行效率须要0.02 sec.惋惜的是,只有mysql 4.1.*以上才支持这样的子查询.
注意事项 查看官方手册,也说rand()放在ORDER BY 子句中会被执行屡次,天然效率及很低。

以上的sql语句最后一条,本人实际测试经过,100W数据,瞬间出结果。

相关文章
相关标签/搜索