mysql随机查询大量数据的sql语句性能分析

发布时间:2019-08-04编辑:脚本学堂
本文介绍下,在mysql中实现随机查询大量数据的不同方法,以及这些sql语句在性能上的差别,包括改进的操作方法等。有需要的朋友参考学习下。

本节主要内容:
mysql随机查询若干条数据的方法优化。

下面开始今天的mysql教程。

在mysql中查询5条不重复的数据:
 

复制代码 代码示例:
SELECT * FROM `table` ORDER BY RAND() LIMIT 5

不过,这种查询语句,在数据量稍大时,效率非常低。一个15万余条的库,查询5条数据,居然要8秒以上。

大家常见的方法,基本上都是查询max(id) * rand()来随机获取数据。
例如:
 

复制代码 代码示例:
SELECT *
FROM `table` AS t1 JOIN (SELECT ROUND(RAND() * (SELECT MAX(id) FROM `table`)) AS id) AS t2
WHERE t1.id >= t2.id
ORDER BY t1.id ASC LIMIT 5;
 

缺点:这样会产生连续的5条记录。

解决办法:
只能是每次查询一条,查询5次。
即便如此也值得,因为15万条的表,查询只需要0.01秒不到。
以上语句采用的是JOIN。

不过,mysql的论坛上有人使用:
 

复制代码 代码示例:
SELECT *
FROM `table`
WHERE id >= (SELECT FLOOR( MAX(id) * RAND()) FROM `table` )
ORDER BY id LIMIT 1;
 

亲测,需要0.5秒,速度也不错,但是跟上面的语句还是有很大差距。

把语句修改为:
 

复制代码 代码示例:
SELECT * FROM `table`
WHERE id >= (SELECT floor(RAND() * (SELECT MAX(id) FROM `table`))) 
ORDER BY id LIMIT 1;
 

效率又提高了,查询时间只有0.01秒

最后,再完善下语句,加上MIN(id)的判断。我
在最开始测试时,就是因为没有加上MIN(id)的判断,结果有一半的时间总是查询到表中的前面几行。

完整的查询语句:
 

复制代码 代码示例:
SELECT * FROM `table`
WHERE id >= (SELECT floor( RAND() * ((SELECT MAX(id) FROM `table`)-(SELECT MIN(id) FROM `table`)) + (SELECT MIN(id) FROM `table`))) 
ORDER BY id LIMIT 1;
SELECT *
FROM `table` AS t1 JOIN (SELECT ROUND(RAND() * ((SELECT MAX(id) FROM `table`)-(SELECT MIN(id) FROM `table`))+(SELECT MIN(id) FROM `table`)) AS id) AS t2
WHERE t1.id >= t2.id
ORDER BY t1.id LIMIT 1;
 

最后对这两个语句进行分别查询10次,
前者花费时间 0.147433 秒
后者花费时间 0.015130 秒

小结:
采用JOIN的语法,比直接在WHERE中使用函数效率还要高很多。

您可能感兴趣的文章:
mysql随机查询的经验分享
分享:mysql随机查询若干条数据的方法
解析mysql实现随机查询的几种方法
mysql 随机生成某个范围内的整数
mysql取随机数据的方法
mysql全文查询与随机查询的例子
mysql随机取数据的几种方法
mysql随机查询记录的效率测试笔记