mysql數據量大時使用limit分頁,隨著頁碼的增大,查詢效率越低下。
實驗
1.直接使用用limit start, count分頁語句:
select * from order limit start, count
當起始頁較小時,查詢沒有性能問題,我們分別看下從10, 100, 1000, 10000開始分頁的執(zhí)行時間(每頁取20條), 如下:
select * from order limit 10, 20 0.016秒
select * from order limit 100, 20 0.016秒
select * from order limit 1000, 20 0.047秒
select * from order limit 10000, 20 0.094秒
我們已經看出隨著起始記錄的增加,時間也隨著增大, 這說明分頁語句limit跟起始頁碼是有很大關系的,那么我們把起始記錄改為40w看下
select * from order limit 400000, 20 3.229秒
再看我們取最后一頁記錄的時間
select * from order limit 800000, 20 37.44秒
顯然這種時間是無法忍受的。
從中我們也能總結出兩件事情:
1)limit語句的查詢時間與起始記錄的位置成正比
2)mysql的limit語句是很方便,但是對記錄很多的表并不適合直接使用。
2.對limit分頁問題的性能優(yōu)化方法
利用表的覆蓋索引來加速分頁查詢
我們都知道,利用了索引查詢的語句中如果只包含了那個索引列(覆蓋索引),那么這種情況會查詢很快。
因為利用索引查找有優(yōu)化算法,且數據就在查詢索引上面,不用再去找相關的數據地址了,這樣節(jié)省了很多時間。另外Mysql中也有相關的索引緩存,在并發(fā)高的時候利用緩存就效果更好了。
在我們的例子中,我們知道id字段是主鍵,自然就包含了默認的主鍵索引。現在讓我們看看利用覆蓋索引的查詢效果如何:
這次我們之間查詢最后一頁的數據(利用覆蓋索引,只包含id列),如下:
select id from order limit 800000, 20 0.2秒
相對于查詢了所有列的37.44秒,提升了大概100多倍的速度
那么如果我們也要查詢所有列,有兩種方法,一種是id>=的形式,另一種就是利用join,看下實際情況:
SELECT * FROM order WHERE ID > =(select id from order limit 800000, 1) limit 20
查詢時間為0.2秒,簡直是一個質的飛躍啊,哈哈
另一種寫法
SELECT * FROM order a JOIN (select id from order limit 800000, 20) b ON a.ID = b.id
查詢時間也很短
您可能感興趣的文章:- MySQL百萬級數據分頁查詢優(yōu)化方案
- MSSQL MySQL 數據庫分頁(存儲過程)
- MySQL百萬級數據量分頁查詢方法及其優(yōu)化建議
- MySQL單表百萬數據記錄分頁性能優(yōu)化技巧
- MySQL 千萬級數據量如何快速分頁
- MySQL學習筆記之數據定義表約束,分頁方法總結
- Mysql 如何實現多張無關聯(lián)表查詢數據并分頁
- 淺談MySQL 億級數據分頁的優(yōu)化