Advanced Pagination for MySQL(mysql高級分頁)
在葉子的文章里談到了使用inner join 從而減少了對page的掃描也就是減少了所謂的回表 例如:
SELECT * FROM `t1` INNER JOIN ( SELECT id FROM `t1`ORDER BY id DESC LIMIT 935500,10) t2 USING (id)
通過直接對id的操作 而不是整張表的掃描 通過id 的join 抓出符合條件id 然后通過ID 再去做數(shù)據(jù)的抓取。這樣就避免了對不需要的頁面的掃描。
不過這樣也不是最佳的方法 還可以通過對id 的 range更加縮小范圍 例如:
我們要分100條記錄分一頁 可以寫成
$page_size=100 select * from t where id > 99 order by id asc limit $page_size ; select * from t where id >199 order by id asc limit $page_size;
盡量避免limit M,N 這種寫法 mysql在對M值很大 而offset很小的時(shí)候的處理方式很不人性化 ,所以盡量不要使用offset來取得特定行數(shù)。
在這里有一個(gè)問題 比如根據(jù)不是唯一索引的column分頁 那么可能存在一個(gè)問題,例如一個(gè)列column1存在11個(gè)key=100的值 那么你使用limit N 之后取到的min value還是同一個(gè)值
這種情況如何處理? 給個(gè)例子:
比如要每10條記錄分一頁
select * from t order by column1 desc limit 10
注意這里取到的min value還是100 (11個(gè)連續(xù)的100) 對下面的分頁會(huì)產(chǎn)生影響,如何處理?
雅虎給出的方案非常好 取一個(gè)extra的column 例如PK 或者unique index key 例如:
select * from t order by column1 desc, id desc limit 10 -- 第一個(gè)頁
select * from t where column1 <=minvalue_col1 and (id < minvalue_id or column1 < minvalue_col1) limit 10 ---第二個(gè)頁
這樣就確保了唯一性 保證了每頁的數(shù)據(jù)不會(huì)重復(fù) 思想就是通過add一個(gè)唯一的extra 取得這個(gè)extra的邊界值 結(jié)合range column來進(jìn)行分頁。
這個(gè)SQL 還能被優(yōu)化成:
SELECT m2.* FROM t m1, t m2 WHERE m1.id = m2.id AND m1.column1 <= minvalue_col1
AND (m1.id < minvalue_id OR m1.column1 < minvalue_col1) ORDER BY m1.column1 DESC, m1.id DESC LIMIT 10;
核心思想: 通過extra過濾 配合ID掃描 避免大量的回表操作 這樣就達(dá)到了要取多少條 就掃描多少條 (in page)
相關(guān)文章
mysql滑動(dòng)聚合/年初至今聚合原理與用法實(shí)例分析
這篇文章主要介紹了mysql滑動(dòng)聚合原理與用法,結(jié)合實(shí)例形式分析了mysql滑動(dòng)聚合的相關(guān)功能、原理、使用方法及操作注意事項(xiàng),需要的朋友可以參考下2019-12-12淺析MySQL內(nèi)存的使用說明(全局緩存+線程緩存)
本篇文章是對MySQL內(nèi)存的使用說明(全局緩存+線程緩存)進(jìn)行了詳細(xì)的分析介紹,需要的朋友參考下2013-06-06MySQL數(shù)據(jù)庫的多種連接方式以及實(shí)用工具
mysql連接操作是客戶端進(jìn)程與mysql數(shù)據(jù)庫實(shí)例進(jìn)程進(jìn)行通信,下面這篇文章主要給大家介紹了關(guān)于MySQL數(shù)據(jù)庫的多種連接方式以及實(shí)用工具的相關(guān)資料,文中通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-02-02Django+mysql配置與簡單操作數(shù)據(jù)庫實(shí)例代碼
這篇文章主要介紹了Django+mysql配置與簡單操作數(shù)據(jù)庫實(shí)例,需要的朋友可以參考下2017-07-07mysql group_concat 實(shí)現(xiàn)把分組字段寫成一行的方法示例
這篇文章主要介紹了mysql group_concat實(shí)現(xiàn)把分組字段寫成一行的方法,結(jié)合實(shí)例形式分析了group_concat函數(shù)的功能、查詢用法及相關(guān)操作技巧,需要的朋友可以參考下2019-10-10MySQL優(yōu)化之對RAND()的優(yōu)化方法
這篇文章主要介紹了MySQL優(yōu)化之對RAND()的優(yōu)化方法,本文詳細(xì)分析了Mysql中對RAND()的幾種優(yōu)化方法,并最終得出一個(gè)結(jié)論,需要的朋友可以參考下2014-07-07MySQL時(shí)間戳與日期格式的相互轉(zhuǎn)換
在MySQL數(shù)據(jù)庫中,時(shí)間戳和日期格式是常用的數(shù)據(jù)類型,在MySQL中,我們可以使用函數(shù)還相互轉(zhuǎn)換時(shí)間戳和日期格式,下面我將詳細(xì)的給大家介紹如何進(jìn)行轉(zhuǎn)換,并提供相應(yīng)的代碼示例,感興趣的小伙伴跟著小編一起來看看吧2024-01-01MySQL中的count(*)?和?count(1)?區(qū)別性能對比分析
這篇文章主要介紹了MySQL中的count(*)和count(1)區(qū)別性能對比,本節(jié)還介紹了我們常說的索引下推,結(jié)合實(shí)例代碼給大家介紹的非常詳細(xì),需要的朋友可以參考下2023-05-05