order?by?+?limit分頁時數(shù)據(jù)重復(fù)問題及解決方法
問題描述：MYSQL version 5.6.8command 表結(jié)構(gòu)
CREATE TABLE command ( ID INT NOT NULL, NAME VARCHAR(16), DESCRIPTION VARCHAR(32), INDEX idx_command_id (ID) ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
表數(shù)據(jù)
order by + limit分頁查詢
查詢第1頁
select * from command order by age limit 0,4;
查詢第2頁
select * from command order by age limit 4,4;
可以看到第2頁中查出了第1頁中存在的重復(fù)數(shù)據(jù)
原因分析：
查看以上語句的執(zhí)行計劃
可以看到，order by limit時Mysql會進(jìn)行優(yōu)化，使用的是內(nèi)存中的filesort文件排序，in memory filesort 使用的是優(yōu)先級隊列（priority queue），優(yōu)先級隊列使用的二叉堆；
使用 priority queue 的目的，就是在不能使用索引有序性的時候，如果要排序，并且使用了limit n，那么只需要在排序的過程中，保留n條記錄即可這樣雖然不能解決所有記錄都需要排序的開銷，但是只需要 sort buffer 少量的內(nèi)存就可以完成排序。
因此，在limit n時，只會堆排序前n個，且是不穩(wěn)定排序，因此并不能保證字段值相同時的相對順序，因此分頁時可能造成重復(fù)；
MySQL 5.5 沒有這個優(yōu)化，所以也就不會出現(xiàn)這個問題，5.6版本之后才出現(xiàn)了這種情況。
解決方案：
1. 新加一個排序字段，這個字段絕對有序，在第1個排序字段重復(fù)時， 使用第2個字段排序
2. 利用索引的有序性，如給id加上主鍵約束，排序字段添加索引
explain select id,age from command order by age limit 4,4
可以看到查詢走了索引，排序就穩(wěn)定了，沒什么問題
（3）一些常見的數(shù)據(jù)庫排序問題
不加order by的時候的排序問題
用戶在使用Oracle或MySQL的時候，發(fā)現(xiàn)MySQL總是有序的，Oracle卻很混亂，這個主要是因為Oracle是堆表，MySQL是索引聚簇表的原因。
所以沒有order by的時候，數(shù)據(jù)庫并不保證記錄返回的順序性，并且不保證每次返回都一致的。
分頁問題
分頁重復(fù)的問題
如前面所描述的，分頁是在數(shù)據(jù)庫提供的排序功能的基礎(chǔ)上，衍生出來的應(yīng)用需求，數(shù)據(jù)庫并不保證分頁的重復(fù)問題。
到此這篇關(guān)于order by + limit分頁時數(shù)據(jù)重復(fù)的文章就介紹到這了,更多相關(guān)order by limit分頁時數(shù)據(jù)重復(fù)內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
DBeaver是免費、開源、通用數(shù)據(jù)庫工具,是許多開發(fā)開發(fā)人員和數(shù)據(jù)庫管理員的所選,下面這篇文章主要給大家介紹了關(guān)于DBeaver連接MySQL的超詳細(xì)步驟,文中通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-05-05
在本篇文章里小編給大家分享的是關(guān)于navicat 8 for mysql建庫的方法以及相關(guān)知識點，需要的朋友們參考學(xué)習(xí)下。2019-08-08
MySQL分區(qū)建索引以及分區(qū)介紹總結(jié)
當(dāng)mysql一張數(shù)據(jù)表中的數(shù)據(jù)達(dá)到一定的量時,在其中查詢某一個數(shù)據(jù),需要花費大量的時間,下面這篇文章主要給大家介紹了關(guān)于MySQL分區(qū)建索引以及分區(qū)介紹的相關(guān)資料,需要的朋友可以參考下2022-04-04
這篇文章主要介紹了?SQL 中 CASE 表達(dá)式的使用方式，文章通過圍繞主題展開詳細(xì)的內(nèi)容介紹，具有一定的參考價值，需要的小伙伴可以參考一下2022-09-09
物理服務(wù)機(jī)的CPU、內(nèi)存、存儲設(shè)備、連接數(shù)等資源有限，某個時段大量連接同時執(zhí)行操作，會導(dǎo)致數(shù)據(jù)庫在處理上遇到性能瓶頸。為了解決這個問題，行業(yè)先驅(qū)門充分發(fā)揚了分而治之的思想，對大庫表進(jìn)行分割2022-01-01
這篇文章主要介紹了MySQL8.0.23免安裝版配置教程,本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下2021-03-03
觸發(fā)器是由事件來觸發(fā)某個操作，這些事件包括INSERT、UPDATE和DELETE語句。如果定義了觸發(fā)程序，當(dāng)數(shù)據(jù)庫執(zhí)行這些語句的時候就會激發(fā)觸發(fā)器執(zhí)行相應(yīng)的操作,需要的朋友可以參考下2023-05-05
centos上安裝mysql并設(shè)置遠(yuǎn)程訪問的操作方法
這篇文章主要介紹了centos上安裝mysql并設(shè)置遠(yuǎn)程訪問的操作方法,需要的朋友可以參考下2017-11-11
Mysql中常用函數(shù)之分組,連接查詢功能實現(xiàn)
在MySQL中,函數(shù)可以進(jìn)行各種數(shù)據(jù)操作,如字符處理、數(shù)學(xué)計算和日期格式化等,單行函數(shù)處理單條數(shù)據(jù)記錄,而分組函數(shù)則處理多條數(shù)據(jù)記錄,本文給大家介紹Mysql中常用函數(shù)之分組,連接查詢功能實現(xiàn),感興趣的朋友一起看看吧2024-10-10
解決MySQL 5.7.9版本sql_mode=only_full_group_by問題
這篇文章主要介紹了解決MySQL 5.7.9版本sql_mode=only_full_group_by問題,需要的朋友可以參考下2017-05-05