MySQL limit使用方法以及超大分頁問題解決
前言
日常開發(fā)中,我們使用mysql來實現(xiàn)分頁功能的時候,總是會用到mysql的limit語法.而怎么使用卻很有講究的,今天來總結(jié)一下.
limit語法
limit語法支持兩個參數(shù),offset和limit,前者表示偏移量,后者表示取前l(fā)imit條數(shù)據(jù).
例如:
## 返回符合條件的前10條語句 select * from user limit 10 ## 返回符合條件的第11-20條數(shù)據(jù) select * from user limit 10,20
從上面也可以看出來,limit n 等價于limit 0,n.
性能分析
實際使用中我們會發(fā)現(xiàn),在分頁的后面一些頁,加載會變慢,也就是說:
select * from user limit 1000000,10
語句執(zhí)行較慢.那么我們首先來測試一下.
首先是在offset較小的情況下拿100條數(shù)據(jù).(數(shù)據(jù)總量為200左右).然后逐漸增大offset.
select * from user limit 0,100 ---------耗時0.03s select * from user limit 10000,100 ---------耗時0.05s select * from user limit 100000,100 ---------耗時0.13s select * from user limit 500000,100 ---------耗時0.23s select * from user limit 1000000,100 ---------耗時0.50s select * from user limit 1800000,100 ---------耗時0.98s
可以看到隨著offset的增大,性能越來越差.
這是為什么呢?因為limit 10000,10的語法實際上是mysql查找到前10010條數(shù)據(jù),之后丟棄前面的10000行,這個步驟其實是浪費掉的.
優(yōu)化
用id優(yōu)化
先找到上次分頁的最大ID,然后利用id上的索引來查詢,類似于select * from user where id>1000000 limit 100.
這樣的效率非???因為主鍵上是有索引的,但是這樣有個缺點,就是ID必須是連續(xù)的,并且查詢不能有where語句,因為where語句會造成過濾數(shù)據(jù).
用覆蓋索引優(yōu)化
mysql的查詢完全命中索引的時候,稱為覆蓋索引,是非常快的,因為查詢只需要在索引上進行查找,之后可以直接返回,而不用再回數(shù)據(jù)表拿數(shù)據(jù).因此我們可以先查出索引的ID,然后根據(jù)Id拿數(shù)據(jù).
select * from (select id from job limit 1000000,100) a left join job b on a.id = b.id;
耗時0.2秒.
總結(jié)
用mysql做大量數(shù)據(jù)的分頁確實是有難度,但是也有一些方法可以進行優(yōu)化,需要結(jié)合業(yè)務(wù)場景多進行測試.
當用戶翻到10000頁的時候,不如我們直接返回空好了,這么無聊的嗎...
好了,以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對腳本之家的支持。
相關(guān)文章
詳解MySQL?Shell?運行?SQL?的兩種內(nèi)置方法
這篇文章主要介紹了MySQL?Shell?運行?SQL?的兩種內(nèi)置方法概述,我們來介紹 MySQL Shell 的組件:MYSQLX 組件的兩個檢索函數(shù)在具體使用上的一些區(qū)別,需要的朋友可以參考下2022-11-11mysql實現(xiàn)查詢最接近的記錄數(shù)據(jù)示例
這篇文章主要介紹了mysql實現(xiàn)查詢最接近的記錄數(shù)據(jù),涉及mysql查詢相關(guān)的時間轉(zhuǎn)換、排序等相關(guān)操作技巧,需要的朋友可以參考下2018-07-07