电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術文章
文章詳情頁

高并發狀態下Replace Into造成的死鎖問題解決

瀏覽:121日期:2023-02-18 16:43:25
目錄
  • 1.問題出現:
  • 2.分析解決
  • 3.解決方案:

1.問題出現:

在測試階段,大數據并發的情況下,發現sql語句造成表的死鎖,過一段時間,死鎖消失。于是進行排查

報錯如下:

對應的sql語句如下:

    @Insert("replace into ${tableName}( windcode,date, \n" +    "      code, high, open, low, \n" +    "      `close`, volume, turnover,gtm_modify) "    + "values (#{obj.windcode},#{obj.date},#{obj.code},#{obj.high},#{obj.open},#{obj.low},#{obj.close},#{obj.volume},#{obj.turnover},#{obj.updateTime})" )    int insertOne(@Param("obj") KDTO obj, @Param("tableName") String tableName);

在排除了數據問題和線程重復調用以后,我們關注了一下sql語句本身。 看了網上很多經驗分享,覺得問題可能出現在 Replace Into 語句上。

2.分析解決

首先我們分析一下為什么并發replace into導致MySQL死鎖

Replace into 一般作用是,當存在沖突時,會把舊記錄替換成新的記錄。也就是說這條語句執行,分為了兩個大步:判斷和執行

1.判斷:

首先判斷我們需要操作的記錄是否存在(根據主鍵或者唯一索引判斷

2.操作:

  • 針對不存在的記錄,語句會執行insert,插入操作。
  • 針對已經存在的記錄,語句可以拆分為delete+insert操作

測試:

建立表

插入數據:

我們使用replace into語句去執行一個已經存在的數據:

可以清楚的發現,影響的行數是兩行

第一行的數據被修改了

我們使用replace into語句去執行一個不存在的數據:

可以清楚的發現,影響的行數是一行

執行了插入操作:

邏輯非常的清晰,但是這種單條sql語句在什么情況下會出現死鎖呢?我們就要去考慮這個加鎖的時機。

正常的插入邏輯是:

  • 首先插入聚集索引記錄,在上例中id列為自增列。
  • 隨后插入二級索引num,由于其是唯一索引,在檢查duplicate key時,為其加上類型為LOCK_X的記錄鎖。

發現錯誤:

  • 由于檢測到duplicate key,因此第一步插入的聚集索引記錄需要被回滾掉(row_undo_ins)。
  • 從InnoDB層失敗返回到Server層后,收到duplicate key錯誤,首先檢索唯一鍵沖突的索引,并對沖突的索引記錄(及聚集索引記錄)加鎖。

轉換模式:

如果發生uk沖突的索引是最后一個唯一索引、沒有外鍵引用、且不存在delete trigger時,使用UPDATE ROW的方式來解決沖突;
否則,使用DELETE ROW + INSERT ROW的方式解決沖突。

更新記錄:

  • 對于聚集索引,由于PK列發生變化,采用delete + insert 聚集索引記錄的方式更新。
  • 對于二級uk索引,同樣采用標記刪除 + 插入的方式。

所以死鎖的問題多半就會出現在X記錄鎖上面。

死鎖分析:

所以再多線程高并發的環境狀態下,存在兩個事務同時去獲取一個記錄的修改的情況:

  • 事務1拿到X記錄鎖,
  • 事務2檢測到沖突,獲取X|NK鎖,被事務1阻塞
  • 事務1檢測到沖突,申請獲取S|NK,被事務2阻塞
事務1事務2LOCK_X LOCK_NOT_GAP--LOCK_X-LOCK_NEXT_KEY 阻塞LOCK_S-LOCK_NEXT_KEY死鎖回滾

所以在等待執行期間sql會有死鎖報錯,高并發環境下的死鎖也就出現了,再事務執行完成回滾操作以后,死鎖回滾,也就解釋了死鎖消失的問題。

3.解決方案:

經過多方討論,最終決定使用 insetr + ON DUPLICATE KEY UPDATE語句替換高并發環境下的Replace Into語句解決死鎖問題。

ON DUPLICATE KEY UPDATE語句的作用是:

若該數據的主鍵值/ UNIQUE KEY 已經在表中存在,則執行更新操作, 即UPDATE 后面的操作。

否則插入一條新的記錄。

實現了Replace Into有相同的查重替換功能,而避免了高并發的死鎖問題。

但是UPDATE操作性能相比DELETE操作會有一定的性能上的影響,需要后續測試跟進。

到此這篇關于高并發狀態下Replace Into造成的死鎖問題解決的文章就介紹到這了,更多相關Replace Into死鎖內容請搜索以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持!

標簽: MySQL
相關文章:
主站蜘蛛池模板: 欧盟ce检测认证_reach检测报告_第三方检测中心-深圳市威腾检验技术有限公司 | 深圳市人通智能科技有限公司 | 塑胶跑道施工-硅pu篮球场施工-塑胶网球场建造-丙烯酸球场材料厂家-奥茵 | 淘剧影院_海量最新电视剧,免费高清电影随心观看 | 合肥展厅设计-安徽展台设计-合肥展览公司-安徽奥美展览工程有限公司 | 昆明网络公司|云南网络公司|昆明网站建设公司|昆明网页设计|云南网站制作|新媒体运营公司|APP开发|小程序研发|尽在昆明奥远科技有限公司 | 单柱拉力机-橡胶冲片机-哑铃裁刀-江都轩宇试验机械厂 | 南溪在线-南溪招聘找工作、找房子、找对象,南溪综合生活信息门户! | 三氯异氰尿酸-二氯-三氯-二氯异氰尿酸钠-优氯净-强氯精-消毒片-济南中北_优氯净厂家 | 污水处理设备维修_污水处理工程改造_机械格栅_过滤设备_气浮设备_刮吸泥机_污泥浓缩罐_污水处理设备_污水处理工程-北京龙泉新禹科技有限公司 | 清水混凝土修复_混凝土色差修复剂_混凝土色差调整剂_清水混凝土色差修复_河南天工 | 智慧旅游_智慧景区_微景通-智慧旅游景区解决方案提供商 | 课件导航网_ppt课件_课件模板_课件下载_最新课件资源分享发布平台 | 天津次氯酸钠酸钙溶液-天津氢氧化钠厂家-天津市辅仁化工有限公司 | 铸铝门厂家,别墅大门庭院大门,别墅铸铝门铜门[十大品牌厂家]军强门业 | 宁波普瑞思邻苯二甲酸盐检测仪,ROHS2.0检测设备,ROHS2.0测试仪厂家 | PC阳光板-PC耐力板-阳光板雨棚-耐力板雨棚,厂家定制[优尼科板材] | 飞行者联盟-飞机模拟机_无人机_低空经济_航空技术交流平台 | 深圳彩钢板_彩钢瓦_岩棉板_夹芯板_防火复合彩钢板_长鑫 | 振动筛,震动筛,圆形振动筛,振动筛价格,振动筛厂家-新乡巨宝机电 蒸汽热收缩机_蒸汽发生器_塑封机_包膜机_封切收缩机_热收缩包装机_真空机_全自动打包机_捆扎机_封箱机-东莞市中堡智能科技有限公司 | 土壤墒情监测站_土壤墒情监测仪_土壤墒情监测系统_管式土壤墒情站-山东风途物联网 | 健康管理师报考条件,考试时间,报名入口—首页 | 氧化锆陶瓷_氧化锆陶瓷加工_氧化锆陶瓷生产厂家-康柏工业陶瓷有限公司 | 深圳公司注册-工商注册代理-注册公司流程和费用_护航财税 | 耐破强度测试仪-纸箱破裂强度试验机-济南三泉中石单品站 | 小港信息港-鹤壁信息港 鹤壁老百姓便民生活信息网站 | 除尘器布袋骨架,除尘器滤袋,除尘器骨架,电磁脉冲阀膜片,卸灰阀,螺旋输送机-泊头市天润环保机械设备有限公司 | 渗透仪-直剪仪-三轴仪|苏州昱创百科| 农产品溯源系统_农产品质量安全追溯系统_溯源系统 | 石牌坊价格石牌坊雕刻制作_石雕牌坊牌楼石栏杆厂家_山东嘉祥石雕有限公司 | 喷砂机厂家_自动除锈抛丸机价格-成都泰盛吉自动化喷砂设备 | 炉门刀边腹板,焦化设备配件,焦化焦炉设备_沧州瑞创机械制造有限公司 | 德国EA可编程直流电源_电子负载,中国台湾固纬直流电源_交流电源-苏州展文电子科技有限公司 | 特材真空腔体_哈氏合金/镍基合金/纯镍腔体-无锡国德机械制造有限公司 | Eiafans.com_环评爱好者 环评网|环评论坛|环评报告公示网|竣工环保验收公示网|环保验收报告公示网|环保自主验收公示|环评公示网|环保公示网|注册环评工程师|环境影响评价|环评师|规划环评|环评报告|环评考试网|环评论坛 - Powered by Discuz! | 水质监测站_水质在线分析仪_水质自动监测系统_多参数水质在线监测仪_水质传感器-山东万象环境科技有限公司 | 外贮压-柜式-悬挂式-七氟丙烷-灭火器-灭火系统-药剂-价格-厂家-IG541-混合气体-贮压-非贮压-超细干粉-自动-灭火装置-气体灭火设备-探火管灭火厂家-东莞汇建消防科技有限公司 | 冷却塔减速机器_冷却塔皮带箱维修厂家_凉水塔风机电机更换-广东康明冷却塔厂家 | 爱佩恒温恒湿测试箱|高低温实验箱|高低温冲击试验箱|冷热冲击试验箱-您身边的模拟环境试验设备技术专家-合作热线:400-6727-800-广东爱佩试验设备有限公司 | 恒压供水控制柜|无负压|一体化泵站控制柜|PLC远程调试|MCGS触摸屏|自动控制方案-联致自控设备 | 亚克力制品定制,上海嘉定有机玻璃加工制作生产厂家—官网 |