电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術文章
文章詳情頁

淺析SQL Server三大算法的I/O成本

瀏覽:144日期:2023-10-28 07:04:03

本文作者先對SQL Server三大算法的IO成本進行分析,然后提出優化原則。希望可以給讀者帶來幫助。

1. Nested Loop Join(嵌套循環聯結)

算法:

其思路相當的簡單和直接:對于關系R的每個元組 r 將其與關系S的每個元組 s 在JOIN條件的字段上直接比較并篩選出符合條件的元組。寫成偽代碼就是:

代價:

被聯結的表所處內層或外層的順序對磁盤I/O開銷有著非常重要的影響。而CPU開銷相對來說影響較小,主要是元組讀入內存以后(in-memory)的開銷,是 O (n * m)

對于I/O開銷,根據 page-at-a-time 的前提條件,I/O cost = M + M * N,

翻譯一下就是 I/O的開銷 = 讀取M頁的I/O開銷 + M次讀取N頁的I/O開銷。

2. Sort-Merge Join (排序合并聯結)

Nested Loop一般在兩個集合都很大的情況下效率就相當差了,而Sort-Merge在這種情況下就比它要高效不少,尤其是當兩個集合的JOIN字段上都有聚集索引(clustered index)存在時,Sort-Merge性能將達到最好。

算法:

基本思路也很簡單(復習一下數據結構中的合并排序吧),主要有兩個步驟:

a.按JOIN字段進行排序

b.對兩組已排序集合進行合并排序,從來源端各自取得數據列后加以比較(需要根據是否在JOIN字段有重復值做特殊的“分區”處理)

代價:(主要是I/O開銷)

有兩個因素左右Sort-Merge的開銷:JOIN字段是否已排序 以及 JOIN字段上的重復值有多少。

◆最好情況下(兩列都已排序且至少有一列沒有重復值):O (n + m) 只需要對兩個集合各掃描一遍。(這里的m,n如果都能用到索引那就更好了)

◆最差情況下(兩列都未排序且兩列上的所有值都相同):O (n * log n + m * log m + n * m) 兩次排序以及一次全部元組間的笛卡爾乘積

3. Hash Join (哈希聯結)

Hash Join在本質上類似于兩列都有重復值時的Sort-Merge的處理思想——分區(patitioning)。但它們也有區別:Hash Join通過哈希來分區(每一個桶就是一個分區)而Sort-Merge通過排序來分區(每一個重復值就是一個分區)。

值得注意的是,Hash Join與上述兩種算法之間的較大區別同時也是一個較大限制是它只能應用于等值聯結(equality join),這主要是由于哈希函數及其桶的確定性及無序性所導致的。

算法:

基本的Hash Join算法由以下兩步組成:

同nested loop,在執行計劃中build input位于上方,probe input位于下方。

hash join操作分兩個階段完成:build(構造)階段和probe(探測)階段。

a.Build Input Phase: 基于JOIN字段,使用哈希函數h2為較小的S集合構建內存中(in-memory)的哈希表,相同鍵值的以linked list組成一個桶(bucket)

b.Probe Input Phase: 在較大的R集合上對哈希表進行核對以完成聯結。

代價:

值得注意的是對于大集合R的每個元組 r ,hash bucket中對應 r 的那個bucket中的每個元組都需要與 r 進行比較,這也是算法最耗時的地方所在。

CPU開銷是O (m + n * b) b是每個bucket的平均元組數量。

總結:

三種join方法,都是擁有兩個輸入,優化的基本原則:

1.避免大數據的hash join,(hash join適合低并發情況,他占用內存和io是很大的);

2.盡量將其轉化為高效的merge join、nested loop join。可能使用的手段有表結構設計、索引調整設計、SQL優化,以及業務設計優化。

標簽: Sql Server 數據庫
主站蜘蛛池模板: 博医通医疗器械互联网供应链服务平台_博医通 | 匀胶机旋涂仪-声扫显微镜-工业水浸超声-安赛斯(北京)科技有限公司 | 高中学习网-高考生信息学习必备平台 | 济南拼接屏_山东液晶拼接屏_济南LED显示屏—维康国际官网 | 兰州牛肉面加盟,兰州牛肉拉面加盟-京穆兰牛肉面 | 步进驱动器「一体化」步进电机品牌厂家-一体式步进驱动 | 招商帮-一站式网络营销服务|搜索营销推广|信息流推广|短视视频营销推广|互联网整合营销|网络推广代运营|招商帮企业招商好帮手 | 成都装修公司-成都装修设计公司推荐-成都朗煜装饰公司 | 汽液过滤网厂家_安平县银锐丝网有限公司 | 爱佩恒温恒湿测试箱|高低温实验箱|高低温冲击试验箱|冷热冲击试验箱-您身边的模拟环境试验设备技术专家-合作热线:400-6727-800-广东爱佩试验设备有限公司 | 海日牌清洗剂-打造带电清洗剂、工业清洗剂等清洗剂国内一线品牌 海外整合营销-独立站营销-社交媒体运营_广州甲壳虫跨境网络服务 | 标准件-非标紧固件-不锈钢螺栓-非标不锈钢螺丝-非标螺母厂家-三角牙锁紧自攻-南京宝宇标准件有限公司 | 包塑丝_高铁绑丝_地暖绑丝_涂塑丝_塑料皮铁丝_河北创筹金属丝网制品有限公司 | 动物麻醉机-数显脑立体定位仪-北京易则佳科技有限公司 | 手机游戏_热门软件app下载_好玩的安卓游戏下载基地-吾爱下载站 | QQ房产导航-免费收录优秀房地产网站_房地产信息网 | 拉卡拉POS机官网 - 官方直营POS机办理|在线免费领取 | 超声波清洗机-超声波清洗设备定制生产厂家 - 深圳市冠博科技实业有限公司 | 臭氧灭菌箱-油桶加热箱-原料桶加热融化烘箱-南京腾阳干燥设备厂 臭氧发生器_臭氧消毒机 - 【同林品牌 实力厂家】 | 针焰试验仪,灼热丝试验仪,漏电起痕试验仪,水平垂直燃烧试验仪 - 苏州亚诺天下仪器有限公司 | GAST/BRIWATEC/CINCINNATI/KARL-KLEIN/ZIEHL-ABEGG风机|亚喜科技 | 短信通106短信接口验证码接口群发平台_国际短信接口验证码接口群发平台-速度网络有限公司 | 江西自考网| R507制冷剂,R22/R152a制冷剂厂家-浙江瀚凯制冷科技有限公司 | 济南网站策划设计_自适应网站制作_H5企业网站搭建_济南外贸网站制作公司_锐尚 | 沈阳庭院景观设计_私家花园_别墅庭院设计_阳台楼顶花园设计施工公司-【沈阳现代时园艺景观工程有限公司】 | 北京公寓出租网-北京酒店式公寓出租平台| 蓝牙音频分析仪-多功能-四通道-八通道音频分析仪-东莞市奥普新音频技术有限公司 | 恒压供水控制柜|无负压|一体化泵站控制柜|PLC远程调试|MCGS触摸屏|自动控制方案-联致自控设备 | EFM 022静电场测试仪-套帽式风量计-静电平板监测器-上海民仪电子有限公司 | 橡胶接头_橡胶软接头_可曲挠橡胶接头-巩义市创伟机械制造有限公司 | 电脑刺绣_绣花厂家_绣花章仔_织唛厂家-[源欣刺绣]潮牌刺绣打版定制绣花加工厂家 | 垃圾处理设备_餐厨垃圾处理设备_厨余垃圾处理设备_果蔬垃圾处理设备-深圳市三盛环保科技有限公司 | 深圳善跑体育产业集团有限公司_塑胶跑道_人造草坪_运动木地板 | 消电检公司,消电检价格,北京消电检报告-北京设施检测公司-亿杰(北京)消防工程有限公司 | 深圳市超时尚职业培训学校,培训:月嫂,育婴,养老,家政;化妆,美容,美发,美甲. | 家庭教育吧-在线家庭教育平台,专注青少年家庭教育 | 找培训机构_找学习课程_励普教育 | ★塑料拖链__工程拖链__电缆拖链__钢制拖链 - 【上海闵彬】 | Eiafans.com_环评爱好者 环评网|环评论坛|环评报告公示网|竣工环保验收公示网|环保验收报告公示网|环保自主验收公示|环评公示网|环保公示网|注册环评工程师|环境影响评价|环评师|规划环评|环评报告|环评考试网|环评论坛 - Powered by Discuz! | 电线电缆厂家|沈阳电缆厂|电线厂|沈阳英联塑力线缆有限公司 |