MySQL 隨機取資料效率問題

2021-09-08 11:58:55 字數 2169 閱讀 8698

本文詳細解說了mysql order by rand()效率優化的方案,並給出了優化的思路過程,是篇不可多得的mysql order by rand()效率美文。

最近由於需要大概研究了一下mysql的隨機抽取實現方法。舉個例子,要從tablename表中隨機提取一條記錄,大家一般的寫法就是:select * from tablename order by rand() limit 1。

但是,後來我查了一下mysql的官方手冊,裡面針對rand()的提示大概意思就是,在order by從句裡面不能使用rand()函式,因為這樣會導致資料列被多次掃瞄。但是在mysql 3.23版本中,仍然可以通過order by rand()來實現隨機。

但是真正測試一下才發現這樣效率非常低。乙個15萬餘條的庫,查詢5條資料,居然要8秒以上。檢視官方手冊,也說rand()放在order by 子句中會被執行多次,自然效率及很低。

you cannot use a column with rand() values in an order by clause, because order by would evaluate the column multiple times.

搜尋google,網上基本上都是查詢max(id) * rand()來隨機獲取資料。

select * 

from `table` as t1 join (select round(rand() * (select max(id) from `table`)) as id) as t2 

where t1.id >= t2.id 

order by t1.id asc limit 5;

但是這樣會產生連續的5條記錄。解決辦法只能是每次查詢一條,查詢5次。即便如此也值得,因為15萬條的表,查詢只需要0.01秒不到。

下面的語句採用的是join,mysql的論壇上有人使用

select * 

from `table` 

where id >= (select floor( max(id) * rand()) from `table` ) 

order by id limit 1;

我測試了一下,需要0.5秒,速度也不錯,但是跟上面的語句還是有很大差距。總覺有什麼地方不正常。

於是我把語句改寫了一下。

select * from `table` 

where id >= (select floor(rand() * (select max(id) from `table`)))  

order by id limit 1;

這下,效率又提高了,查詢時間只有0.01秒

最後,再把語句完善一下,加上min(id)的判斷。我在最開始測試的時候,就是因為沒有加上min(id)的判斷,結果有一半的時間總是查詢到表中的前面幾行。

完整查詢語句是:

select * from `table` 

where id >= (select floor( rand() * ((select max(id) from `table`)-(select min(id) from `table`)) + (select min(id) from `table`)))  

order by id limit 1;

select * 

from `table` as t1 join (select round(rand() * ((select max(id) from `table`)-(select min(id) from `table`))+(select min(id) from `table`)) as id) as t2 

where t1.id >= t2.id 

order by t1.id limit 1;

最後在php中對這兩個語句進行分別查詢10次,

前者花費時間 0.147433 秒

後者花費時間 0.015130 秒

看來採用join的語法比直接在where中使用函式效率還要高很多。

參考文獻

mysql order by索引優化:

mysql order by語法:

mysql order by rand()效率:

mysql order by用法:

MySQL 隨機取資料效率問題

本文詳細解說了mysql order by rand 效率優化的方案,並給出了優化的思路過程,是篇不可多得的mysql order by rand 效率美文。最近由於需要大概研究了一下mysql的隨機抽取實現方法。舉個例子,要從tablename表中隨機提取一條記錄,大家一般的寫法就是 select...

mysql 取隨機編號 mysql取隨機資料的方法

先看手冊中的sql select from table name order by rand limit 5 描述 rand rand n 返回在範圍0到1.0內的隨機浮點值。如果乙個整數引數n被指定,它被用作種子值。mysql select rand 0.5925 mysql select ran...

mysql隨機取資料的幾種高效率方法

介紹高效的mysql隨機資料的方法 1 普通方法,效率太低 如下 複製 select from table order by rand limit 10 2 join的方法 如下 複製 select from table as t1 join select round rand select max...