order?by?+?limit分頁(yè)時(shí)數(shù)據(jù)重復(fù)問(wèn)題及解決方法
問(wèn)題描述:MYSQL version 5.6.8command 表結(jié)構(gòu)
CREATE TABLE command ( ID INT NOT NULL, NAME VARCHAR(16), DESCRIPTION VARCHAR(32), INDEX idx_command_id (ID) ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
表數(shù)據(jù)
order by + limit分頁(yè)查詢(xún)
查詢(xún)第1頁(yè)
select * from command order by age limit 0,4;
查詢(xún)第2頁(yè)
select * from command order by age limit 4,4;
可以看到第2頁(yè)中查出了第1頁(yè)中存在的重復(fù)數(shù)據(jù)
原因分析:
查看以上語(yǔ)句的執(zhí)行計(jì)劃
可以看到,order by limit時(shí)Mysql會(huì)進(jìn)行優(yōu)化,使用的是內(nèi)存中的filesort文件排序,in memory filesort 使用的是優(yōu)先級(jí)隊(duì)列(priority queue),優(yōu)先級(jí)隊(duì)列使用的二叉堆;
使用 priority queue 的目的,就是在不能使用索引有序性的時(shí)候,如果要排序,并且使用了limit n,那么只需要在排序的過(guò)程中,保留n條記錄即可這樣雖然不能解決所有記錄都需要排序的開(kāi)銷(xiāo),但是只需要 sort buffer 少量的內(nèi)存就可以完成排序。
因此,在limit n時(shí),只會(huì)堆排序前n個(gè),且是不穩(wěn)定排序,因此并不能保證字段值相同時(shí)的相對(duì)順序,因此分頁(yè)時(shí)可能造成重復(fù);
MySQL 5.5 沒(méi)有這個(gè)優(yōu)化,所以也就不會(huì)出現(xiàn)這個(gè)問(wèn)題,5.6版本之后才出現(xiàn)了這種情況。
解決方案:
1. 新加一個(gè)排序字段,這個(gè)字段絕對(duì)有序,在第1個(gè)排序字段重復(fù)時(shí), 使用第2個(gè)字段排序
2. 利用索引的有序性,如給id加上主鍵約束,排序字段添加索引
explain select id,age from command order by age limit 4,4
可以看到查詢(xún)走了索引,排序就穩(wěn)定了,沒(méi)什么問(wèn)題
(3)一些常見(jiàn)的數(shù)據(jù)庫(kù)排序問(wèn)題
不加order by的時(shí)候的排序問(wèn)題
用戶(hù)在使用Oracle或MySQL的時(shí)候,發(fā)現(xiàn)MySQL總是有序的,Oracle卻很混亂,這個(gè)主要是因?yàn)镺racle是堆表,MySQL是索引聚簇表的原因。
所以沒(méi)有order by的時(shí)候,數(shù)據(jù)庫(kù)并不保證記錄返回的順序性,并且不保證每次返回都一致的。
分頁(yè)問(wèn)題
分頁(yè)重復(fù)的問(wèn)題
如前面所描述的,分頁(yè)是在數(shù)據(jù)庫(kù)提供的排序功能的基礎(chǔ)上,衍生出來(lái)的應(yīng)用需求,數(shù)據(jù)庫(kù)并不保證分頁(yè)的重復(fù)問(wèn)題。
到此這篇關(guān)于order by + limit分頁(yè)時(shí)數(shù)據(jù)重復(fù)的文章就介紹到這了,更多相關(guān)order by limit分頁(yè)時(shí)數(shù)據(jù)重復(fù)內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
MySQL中truncate誤操作后的數(shù)據(jù)恢復(fù)案例
這篇文章主要介紹了MySQL中truncate誤操作后的數(shù)據(jù)恢復(fù)案例,主要是要從日志中定位到truncate操作的地方然后備份之前丟失的數(shù)據(jù),需要的朋友可以參考下2015-05-05mysql日志文件General_log和Binlog開(kāi)啟及詳解
MySQL中的數(shù)據(jù)變化會(huì)體現(xiàn)在上面日志中,下面這篇文章主要給大家介紹了關(guān)于mysql日志文件General_log和Binlog開(kāi)啟及詳解的相關(guān)資料,文中通過(guò)實(shí)例代碼介紹的非常詳細(xì),需要的朋友可以參考下2022-07-07VSCODE連接MySQL數(shù)據(jù)庫(kù)服務(wù)圖文教程
最近做網(wǎng)頁(yè)碰到連接數(shù)據(jù)庫(kù)的問(wèn)題,上網(wǎng)查了挺久終于搞明白了,下面這篇文章主要給大家介紹了關(guān)于VSCODE連接MySQL數(shù)據(jù)庫(kù)服務(wù)的相關(guān)資料,文中通過(guò)圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-06-06MySQL對(duì)JSON數(shù)據(jù)進(jìn)行查詢(xún)實(shí)例代碼
這篇文章主要給大家介紹了關(guān)于MySQL對(duì)JSON數(shù)據(jù)進(jìn)行查詢(xún)的相關(guān)資料,MySQL支持使用JSON類(lèi)型存儲(chǔ)數(shù)據(jù),并提供了多種查詢(xún)JSON數(shù)據(jù)的方法,需要的朋友可以參考下2023-07-07MYSQL無(wú)法啟動(dòng)提示: Default storage engine (InnoDB) is not availabl
自己用的MYSQL都是用MYISAM數(shù)據(jù)庫(kù),還沒(méi)涉及到需要INNODB,因此打算直接不加載INNODB引擎。2011-05-05