电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術(shù)文章
文章詳情頁

MySql分頁時使用limit+order by會出現(xiàn)數(shù)據(jù)重復(fù)問題解決

瀏覽:58日期:2023-10-26 12:54:19
目錄摘要問題描述分析問題解決問題摘要

能把復(fù)雜的知識講的簡單很重要

在學習的過程中我們看過很多資料、視頻、文檔等,因為現(xiàn)在資料視頻都較多所以往往一個知識點會有多種多樣的視頻形式講解。除了推廣營銷以外,確實有很多人的視頻講解非常優(yōu)秀,例如李永樂老師的短視頻課,可以在一個黑板上把那么復(fù)雜的知識,講解的那么容易理解,那么透徹。而我們學習編程的人也是,不只是要學會把知識點講明白,也要寫明白。

問題描述

在 MySQL 中我們通常會采用 limit 來進行翻頁查詢,比如 limit(0,10) 表示列出第一頁的10條數(shù)據(jù), limit(10,10) 表示列出第二頁。但是,當 limit 遇到 order by 的時候,可能會出現(xiàn)翻到第二頁的時候,竟然又出現(xiàn)了第一頁的記錄。

具體如下:

SELECT `post_title`, `post_date`FROM postWHERE `post_status` = ’publish’ORDER BY view_count descLIMIT 5, 5

使用上述SQL查詢的時候,很有可能出現(xiàn)和 LIMIT 0,5 相同的某條記錄。而如果使用如下方式,則不會出現(xiàn)重復(fù)的情況:

SELECT *FROM postWHERE post_status = ’publish’ORDER BY view_count descLIMIT 5, 5

但是,由于 post 表的字段很多,僅僅希望用這兩個字段,不想把 post_content也查出來。為了解決這個情況,在 ORDER BY 后面使用了兩個排序條件來解決這個問題,如下:

SELECT `post_title`, `post_date`FROM postWHERE `post_status` = ’publish’ORDER BY view_count desc, ID ascLIMIT 5, 5

按理來說, MySQL 的排序默認情況下是以主鍵ID作為排序條件的,也就是說,如果在 view_count 相等的情況下,主鍵ID作為默認的排序條件,不需要我們多此一舉加 ID asc。但是事實就是,MySQL 在 order by 和 limit 混用的時候,出現(xiàn)了排序的混亂情況。

分析問題

在 MySQL 5.6 的版本上,優(yōu)化器在遇到 order by limit 語句的時候,做了一個優(yōu)化,即 使用了 priority queue。

使用 priority queue 的目的,就是在不能使用索引有序性的時候,如果要排序,并且使用了 limit n,那么只需要在排序的過程中,保留n條記錄即可,這樣雖然不能解決所有記錄都需要排序的開銷,但是只需要 sort buffer 少量的內(nèi)存就可以完成排序。

之所以 MySQL 5.6 出現(xiàn)了第二頁數(shù)據(jù)重復(fù)的問題,是因為 priority queue 使用了堆排序的排序方法,而堆排序是一個不穩(wěn)定的排序方法,也就是相同的值可能排序出來的結(jié)果和讀出來的數(shù)據(jù)順序不一致。

MySQL 5.5 沒有這個優(yōu)化,所以也就不會出現(xiàn)這個問題。

也就是說,MySQL 5.5 是不存在本文提到的問題的,5.6 版本之后才出現(xiàn)了這種情況。

再看下MySQL解釋sql語言時的執(zhí)行順序:

(1) SELECT (2) DISTINCT <select_list>(3) FROM <left_table>(4) <join_type> JOIN <right_table>(5) ON <join_condition>(6) WHERE <where_condition>(7) GROUP BY <group_by_list>(8) HAVING <having_condition>(9) ORDER BY <order_by_condition>(10) LIMIT <limit_number>

執(zhí)行順序依次為 form… where… select… order by… limit… ,由于上述 priority queue 的原因,在完成 select 之后,所有記錄是以堆排序的方法排列的,在進行 order by 時,僅把 view_count 值大的往前移動。

但由于 limit 的因素,排序過程中只需要保留到5條記錄即可, view_count 并不具備索引有序性,所以當?shù)诙摂?shù)據(jù)要展示時, mysql 見到哪一條就拿哪一條,因此,當排序值相同的時候,第一次排序是隨意排的,第二次再執(zhí)行該sql的時候,其結(jié)果應(yīng)該和第一次結(jié)果一樣。

解決問題

(1) 索引排序字段

如果在字段添加上索引,就直接按照索引的有序性進行讀取并分頁,從而可以規(guī)避遇到的這個問題。

(2) 正確理解分頁

分頁是建立在排序的基礎(chǔ)上,進行了數(shù)量范圍分割。排序是數(shù)據(jù)庫提供的功能,而分頁卻是衍生出來的應(yīng)用需求。

在 MySQL 和 Oracle 的官方文檔中提供了 limit n 和 rownum < n 的方法,但卻沒有明確的定義分頁這個概念。

還有重要的一點,雖然上面的解決方法可以緩解用戶的這個問題,但按照用戶的理解,依然還有問題:比如,這個表插入比較頻繁,用戶查詢的時候,在 read-committed 的隔離級別下,第一頁和第二頁仍然會有重合。

所以,分頁一直都有這個問題,不同場景對數(shù)據(jù)分頁都沒有非常高的準確性要求。

(3) 一些常見的數(shù)據(jù)庫排序問題

不加 order by 的時候的排序問題

用戶在使用 Oracle 或 MySQL 的時候,發(fā)現(xiàn) MySQL 總是有序的, Oracle 卻很混亂,這個主要是因為 Oracle 是堆表, MySQL 是索引聚簇表的原因。所以沒有 order by 的時候,數(shù)據(jù)庫并不保證記錄返回的順序性,并且不保證每次返回都一致的。

分頁問題 分頁重復(fù)的問題

如前面所描述的,分頁是在數(shù)據(jù)庫提供的排序功能的基礎(chǔ)上,衍生出來的應(yīng)用需求,數(shù)據(jù)庫并不保證分頁的重復(fù)問題。

NULL值和空串問題

不同的數(shù)據(jù)庫對于 NULL 值和空串的理解和處理是不一樣的,比如 Oracle NULL 和 NULL 值是無法比較的,既不是相等也不是不相等,是未知的。而對于空串,在插入的時候, MySQL 是一個字符串長度為0的空串,而 Oracle 則直接進行 NULL 值處理。

到此這篇關(guān)于MySql分頁時使用limit+order by會出現(xiàn)數(shù)據(jù)重復(fù)問題解決的文章就介紹到這了,更多相關(guān)MySql limit+order by分頁內(nèi)容請搜索好吧啦網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持好吧啦網(wǎng)!

相關(guān)文章:
主站蜘蛛池模板: 活性氧化铝球|氧化铝干燥剂|分子筛干燥剂|氢氧化铝粉-淄博同心材料有限公司 | 档案密集架_电动密集架_移动密集架_辽宁档案密集架-盛隆柜业厂家现货批发销售价格公道 | 球磨机,节能球磨机价格,水泥球磨机厂家,粉煤灰球磨机-吉宏机械制造有限公司 | 山西3A认证|太原AAA信用认证|投标AAA信用证书-山西AAA企业信用评级网 | 齿轮减速机_齿轮减速电机-VEMT蜗轮蜗杆减速机马达生产厂家瓦玛特传动瑞环机电 | 喷播机厂家_二手喷播机租赁_水泥浆洒布机-河南青山绿水机电设备有限公司 | 浙江筋膜枪-按摩仪厂家-制造商-肩颈按摩仪哪家好-温州市合喜电子科技有限公司 | 【电子厂招聘_普工招工网_工厂招聘信息平台】-工立方打工网 | 2-羟基泽兰内酯-乙酰蒲公英萜醇-甘草查尔酮A-上海纯优生物科技有限公司 | 南京欧陆电气股份有限公司-风力发电机官网 | 营养师网,营养师考试时间,报名入口—网站首页 | TPE塑胶原料-PPA|杜邦pom工程塑料、PPSU|PCTG材料、PC/PBT价格-悦诚塑胶 | loft装修,上海嘉定酒店式公寓装修公司—曼城装饰 | 耐酸碱泵-自吸耐酸碱泵型号「品牌厂家」立式耐酸碱泵价格-昆山国宝过滤机有限公司首页 | PAS糖原染色-CBA流式多因子-明胶酶谱MMP-上海研谨生物科技有限公司 | 温控器生产厂家-提供温度开关/热保护器定制与批发-惠州市华恺威电子科技有限公司 | 威海防火彩钢板,威海岩棉复合板,威海彩钢瓦-文登区九龙岩棉复合板厂 | 热缩管切管机-超声波切带机-织带切带机-无纺布切布机-深圳市宸兴业科技有限公司 | 云南标线|昆明划线|道路标线|交通标线-就选云南云路施工公司-云南云路科技有限公司 | 精密机械零件加工_CNC加工_精密加工_数控车床加工_精密机械加工_机械零部件加工厂 | 超声波清洗机_超声波清洗机设备_超声波清洗机厂家_鼎泰恒胜 | 「阿尔法设计官网」工业设计_产品设计_产品外观设计 深圳工业设计公司 | 气力输送设备_料封泵_仓泵_散装机_气化板_压力释放阀-河南锐驰机械设备有限公司 | 上海单片机培训|重庆曙海培训分支机构—CortexM3+uC/OS培训班,北京linux培训,Windows驱动开发培训|上海IC版图设计,西安linux培训,北京汽车电子EMC培训,ARM培训,MTK培训,Android培训 | 塑胶跑道_学校塑胶跑道_塑胶球场_运动场材料厂家_中国塑胶跑道十大生产厂家_混合型塑胶跑道_透气型塑胶跑道-广东绿晨体育设施有限公司 | 杭州|上海贴标机-百科 | 防渗膜厂家|养殖防渗膜|水产养殖防渗膜-泰安佳路通工程材料有限公司 | 2-羟基泽兰内酯-乙酰蒲公英萜醇-甘草查尔酮A-上海纯优生物科技有限公司 | 设定时间记录电子秤-自动累计储存电子秤-昆山巨天仪器设备有限公司 | 中央空调维修、中央空调保养、螺杆压缩机维修-苏州东菱空调 | 3d打印服务,3d打印汽车,三维扫描,硅胶复模,手板,快速模具,深圳市精速三维打印科技有限公司 | 北京西风东韵品牌与包装设计公司,创造视觉销售力! | 锂辉石检测仪器,水泥成分快速分析仪-湘潭宇科分析仪器有限公司 | 仿古瓦,仿古金属瓦,铝瓦,铜瓦,铝合金瓦-西安东申景观艺术工程有限公司 | 北京网站建设-企业网站建设-建站公司-做网站-北京良言多米网络公司 | SOUNDWELL 编码器|电位器|旋转编码器|可调电位器|编码开关厂家-广东升威电子制品有限公司 | 气动隔膜阀_气动隔膜阀厂家_卫生级隔膜阀价格_浙江浙控阀门有限公司 | 防爆电机_ybx3系列电机_河南省南洋防爆电机有限公司 | 聚丙烯酰胺_厂家_价格-河南唐达净水材料有限公司| 贴片电容代理-三星电容-村田电容-风华电容-国巨电容-深圳市昂洋科技有限公司 | 全温恒温摇床-水浴气浴恒温摇床-光照恒温培养摇床-常州金坛精达仪器制造有限公司 |