电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術文章
文章詳情頁

ZooKeeper分布式協調服務設計核心概念及安裝配置

瀏覽:235日期:2023-04-06 15:09:26
目錄
  • 一、ZooKeeper 簡介
    • 1.ZooKeeper 設計目標
    • 2.核心概念
      • 1)Session 會話
      • 2)數據節點
      • 3)Watcher
      • 4)ACL
    • 3.Zab 協議介紹
    • 二、ZooKeeper Cluster 安裝
      • 1.安裝 ZooKeeper
        • 2.使用 Golang 連接 ZooKeeper 的 API 接口
          • 3.配置 ZooKeeper Cluster

          一、ZooKeeper 簡介

          ZooKeeper 是一個開源的分布式協調服務,目前由 Apache 進行維護。ZooKeeper 可以用于實現分布式系統中常見的發布/訂閱、負載均衡、命令服務、分布式協調/通知、集群管理、Master 選舉、分布式鎖和分布式隊列等功能。 它具有以下特性:

          順序一致性: 來自客戶端的更新操作將會按照順序被應用;

          原子性: 即要么全部更新成功,要么要不更新失敗,沒有部分的結果;

          統一的系統鏡像: 即不管客戶端連接的是哪臺服務器,都能看到同樣的服務視圖(也就是無狀態的)

          可靠性: 一旦寫入操作被執行,那么這個狀態將會被持久化,直到其它客戶端的修改生效。

          實時性: 一旦一個事務被成功應用,ZooKeeper 可以保證客戶端立即讀取到這個事務變更后的最新狀態的數據。

          1.ZooKeeper 設計目標

          • ZooKeeper 致力于為那些高吞吐的大型分布式系統提供一個高性能、高可用、且具有嚴格順序訪問控制能力的分布式協調服務。

          1)簡單的數據模型:

          ZooKeeper 通過樹形結構來存儲數據,它由一系列被稱為 ZNode 的數據節點組成,類似于常見的文件系統;

          不過和常見的文件系統不同,ZooKeeper 將數據全量存儲在內存中,以此來實現高吞吐,減少訪問延遲。

          2)可配置 Cluster:

          為了保證高可用,最好是以集群形態部署 ZooKeeper,這樣只要集群中大部分機器是可用的,那么 ZooKeeper 本身仍然可用。

          上圖中每一個 Server 代表一個安裝 ZooKeeper 服務的服務器,組成 ZooKeeper 服務的服務器都會在內存中維護當前的服務器狀態,并且每臺服務器間都保持著通信。并通過 Zab 協議來保持數據的一致性。

          3)順序訪問:

          對于來自客戶端的每個更新請求,ZooKeeper 都會分配一個全局唯一的遞增 ID,這個 ID 決定了所有事務操作的先后順序。

          4)高性能高可用

          ZooKeeper 將數據全量存儲在內存中以保持高性能,并通過服務集群來實現高可用;由于 ZooKeeper 的所有更新和刪除都是基于事務的,所以其在讀多寫少的應用場景中有著很高的性能表現。

          2.核心概念

          Cluster 角色:

          角色作用Leader提供讀寫服務,并維護集群狀態(經過選舉產生)Follower提供讀寫服務,并定期向 Leader 匯報自己的節點狀態(同時也參加 過半寫成功 的策略和 Leader 的選舉)OBServer提供讀寫服務,并定期向 Leader 匯報自己的節點狀態(因為不參加策略和選舉,所以可以在不影響寫性能的情況下提升集群的讀性能)

          1)Session 會話

          當 Client 通過 TCP 長連接 連接到 ZooKeeper 服務器時,Session 便開始建立連接,并通過 tickTime(心跳檢測)機制來保持有效的會話狀態。通過這個連接,Client 可以發送請求并接收響應,同時也可以接收到 Watch 事件的通知。

          另外,當由于網絡故障或者 Client 主動斷開等原因,導致連接斷開,此時只要在會話超時時間之內重新建立連接,則之間創建的會話依然有效。(這個取決于 tickTime 配置)

          2)數據節點

          ZooKeeper 數據模型是由一系列基本數據單元 ZNode(數據節點)組成的節點樹,其中根節點為 /(每個節點上都會保存自己的數據和節點信息);ZooKeeper 中的節點可以分為兩大類:

          持久節點: 節點一旦創建,除非被主動刪除,否則一直存在。

          臨時節點: 一旦創建該節點的客戶端會話(Session)失效,則所有該客戶端創建的臨時節點都會被刪除。

          3)Watcher

          ZooKeeper 中一個常用的功能是 Watcher(事件監聽器),它允許用戶在指定節點上針對感興趣的事件注冊監聽,當事件發生時,監聽器會被觸發,并將事件推送到客戶端。該機制是 ZooKeeper 實現分布式協調服務的重要特性。

          4)ACL

          命令作用create可以進行創建操作read可以進行查看操作write可以對創建的內容進行寫入操作delete可以進行刪除操作admin可以進行配置權限操作

          命令作用create可以進行創建操作read可以進行查看操作write可以對創建的內容進行寫入操作delete可以進行刪除操作admin可以進行配置權限操作

          3.Zab 協議介紹

          Zab(ZooKeeper Atomic Broadcast 原子廣播)協議是為分布式協調服務 ZooKeeper 專門設計的一種 支持崩潰恢復的原子廣播協議;

          在 ZooKeeper 中,主要依賴 Zab 協議來實現分布式數據一致性;

          基于 Zab 協議,ZooKeeper 實現了一種主備模式的系統架構來保持集群中各個副本間的數據一致性。

          二、ZooKeeper Cluster 安裝

          準備工作:

          主機名操作系統IP 地址ZooKeeperCentOS 7.4192.168.1.1

          安裝 JDK:下載地址(需要創建 Oracle 賬號)

          [root@ZooKeeper ~]# lsanaconda-ks.cfg  jdk-8u181-linux-x64.tar.gz[root@ZooKeeper ~]# tar zxf jdk-8u181-linux-x64.tar.gz [root@ZooKeeper ~]# lsanaconda-ks.cfg  jdk1.8.0_181  jdk-8u181-linux-x64.tar.gz[root@ZooKeeper ~]# mv jdk1.8.0_181 /usr/local/java[root@ZooKeeper ~]# cat <<END >> /etc/profileexport JAVA_HOME=/usr/local/javaexport PATH=$PATH:$JAVA_HOME/binEND[root@ZooKeeper ~]# source /etc/profile[root@ZooKeeper ~]# java -version

          1.安裝 ZooKeeper

          [root@ZooKeeper ~]# wget http://dlcdn.apache.org/zookeeper/zookeeper-3.6.3/apache-zookeeper-3.6.3-bin.tar.gz[root@ZooKeeper ~]# lsanaconda-ks.cfg  apache-zookeeper-3.6.3-bin.tar.gz  jdk-8u181-linux-x64.tar.gz[root@ZooKeeper ~]# tar zxf apache-zookeeper-3.6.3-bin.tar.gz[root@ZooKeeper ~]# mv apache-zookeeper-3.6.3-bin /usr/local/zookeeper[root@ZooKeeper ~]# mkdir /usr/local/zookeeper/data[root@ZooKeeper ~]# cat <<END >> /usr/local/zookeeper/conf/zoo.cfgtickTime=2000initLimit=10syncLimit=5dataDir=/usr/local/zookeeper/dataclientPort=2181END

          注解:

          tickTime:Client 和服務器間的通信會話限制(相當于健康檢查,tickTime 的時間為 ms (1s = 1000ms))

          initLimit:Leader 和 Follower 間初始通信限制。

          syncLimit:Leader 和 Follower 間同步通信限制(當響應時間超于 syncLimit * tickTime 時,Leader 便會將 Follower 進行移除)

          dataDir:此目錄用于存放保存在內存數據庫中的快照信息(當未配置 dataLogDir 參數時,日志信息也會存放到此目錄)

          clientPort:ZooKeeper 監聽的端口,用于客戶端連接使用。

          啟動 ZooKeeper

          [root@ZooKeeper ~]# /usr/local/zookeeper/bin/zkServer.sh start						# 啟動[root@ZooKeeper ~]# /usr/local/zookeeper/bin/zkServer.sh status						# 查看狀態

          連接到 ZooKeeper

          [root@ZooKeeper ~]# /usr/local/zookeeper/bin/zkCli.sh -server 127.0.0.1:2181Welcome to ZooKeeper!JLine support is enabledWATCHER::WatchedEvent state:SyncConnected type:None path:null[zk: 127.0.0.1:2181(CONNECTED) 0] 

          當連接成功后,系統會輸出 ZooKeeper 的相關配置信息和相關環境,并在屏幕上輸出 Welcome to ZooKeeper! 等信息。

          2.使用 Golang 連接 ZooKeeper 的 API 接口

          3.配置 ZooKeeper Cluster

          在原來的基礎上,在增加兩臺服務器:

          主機名操作系統IP 地址ZooKeeper-2CentOS 7.4192.168.1.2ZooKeeper-3CentOS 7.4192.168.1.3

          1)將 Java 和 ZooKeeper 傳給新的服務器:

          [root@ZooKeeper ~]# scp -r /usr/local/java root@192.168.1.2:/usr/local/[root@ZooKeeper ~]# scp -r /usr/local/zookeeper root@192.168.1.2:/usr/local/

          2)在新的服務器上啟動 ZooKeeper:

          [root@ZooKeeper ~]# cat <<END >> /etc/profileexport JAVA_HOME=/usr/local/javaexport PATH=$PATH:$JAVA_HOME/binEND[root@ZooKeeper ~]# source /etc/profile[root@ZooKeeper ~]# /usr/local/zookeeper/bin/zkServer.sh start

          3)配置 Cluster 集群(三臺服務器上操作一樣)

          [root@ZooKeeper ~]# cat <<END >> /usr/local/zookeeper/conf/zoo.cfgserver.1=192.168.1.1:2888:3888server.2=192.168.1.2:2889:3889server.3=192.168.1.3:2890:3890END

          4)創建 myid 文件

          [root@ZooKeeper ~]# echo "1" > /usr/local/zookeeper/data/myid[root@ZooKeeper-2 ~]# echo "2" > /usr/local/zookeeper/data/myid[root@ZooKeeper-2 ~]# echo "3" > /usr/local/zookeeper/data/myid

          需要確保每臺服務器的 myid 文件中數字不同,并且和自己所在機器的 zoo.cfgserver.id=host:port:portid 值一樣。

          另外,id 的范圍是 1 ~ 255。

          5)重啟 ZooKeeper 服務

          [root@ZooKeeper ~]# /usr/local/zookeeper/bin/zkServer.sh restart			# 三臺服務器都要重啟

          查看 ZooKeeper 狀態:

          驗證:

          以上就是ZooKeeper分布式協調服務設計核心概念及安裝配置的詳細內容,更多關于ZooKeeper分布式協調服務核心安裝配置的資料請關注其它相關文章!

          標簽: Zabbix
          主站蜘蛛池模板: 哲力实业_专注汽车涂料汽车漆研发生产_汽车漆|修补油漆品牌厂家 长沙一级消防工程公司_智能化弱电_机电安装_亮化工程专业施工承包_湖南公共安全工程有限公司 | 精密冲床,高速冲床等冲压设备生产商-常州晋志德压力机厂 | 电镀标牌_电铸标牌_金属标贴_不锈钢标牌厂家_深圳市宝利丰精密科技有限公司 | 818手游网_提供当下热门APP手游_最新手机游戏下载 | 网架支座@球铰支座@钢结构支座@成品支座厂家@万向滑动支座_桥兴工程橡胶有限公司 | SDI车窗夹力测试仪-KEMKRAFT方向盘测试仪-上海爱泽工业设备有限公司 | 专业音响设备_舞台音响设备_会议音响工程-首选深圳一禾科技 | 超声波焊接机_超音波熔接机_超声波塑焊机十大品牌_塑料超声波焊接设备厂家 | 塑料薄膜_PP薄膜_聚乙烯薄膜-常州市鑫美新材料包装厂 | 仓储笼_金属箱租赁_循环包装_铁网箱_蝴蝶笼租赁_酷龙仓储笼租赁 测试治具|过炉治具|过锡炉治具|工装夹具|测试夹具|允睿自动化设备 | 高低温万能试验机-复合材料万能试验机-馥勒仪器 | 间甲酚,间甲酚厂家-山东祥东新材料| 安徽合肥项目申报咨询公司_安徽合肥高新企业项目申报_安徽省科技项目申报代理 | 深圳工程师职称评定条件及流程_深圳职称评审_职称评审-职称网 | 西安标准厂房_陕西工业厂房_西咸新区独栋厂房_长信科技产业园官方网站 | 交通气象站_能见度检测仪_路面状况监测站- 天合环境科技 | arch电源_SINPRO_开关电源_模块电源_医疗电源-东佑源 | 气动隔膜泵-电动隔膜泵-循环热水泵-液下排污/螺杆/管道/化工泵「厂家」浙江绿邦 | 迪威娱乐|迪威娱乐客服|18183620002 | 塑料异型材_PVC异型材_封边条生产厂家_PC灯罩_防撞扶手_医院扶手价格_东莞市怡美塑胶制品有限公司 | 电动球阀_不锈钢电动球阀_电动三通球阀_电动调节球阀_上海湖泉阀门有限公司 | 热缩管切管机-超声波切带机-织带切带机-无纺布切布机-深圳市宸兴业科技有限公司 | 北京三友信电子科技有限公司-ETC高速自动栏杆机|ETC机柜|激光车辆轮廓测量仪|嵌入式车道控制器 | 东莞画册设计_logo/vi设计_品牌包装设计 - 华略品牌设计公司 | 交流伺服电机|直流伺服|伺服驱动器|伺服电机-深圳市华科星电气有限公司 | 欧版反击式破碎机-欧版反击破-矿山石料破碎生产线-青州奥凯诺机械 | 铝箔袋,铝箔袋厂家,东莞铝箔袋,防静电铝箔袋,防静电屏蔽袋,防静电真空袋,真空袋-东莞铭晋让您的产品与众不同 | 排烟防火阀-消防排烟风机-正压送风口-厂家-价格-哪家好-德州鑫港旺通风设备有限公司 | 硬质合金模具_硬质合金非标定制_硬面加工「生产厂家」-西迪技术股份有限公司 | 气密性检测仪_气密性检测设备_防水测试仪_密封测试仪-岳信仪器 | 卫生纸复卷机|抽纸机|卫生纸加工设备|做卫生纸机器|小型卫生纸加工需要什么设备|卫生纸机器设备多少钱一台|许昌恒源纸品机械有限公司 | 全温度恒温培养摇床-大容量-立式-远红外二氧化碳培养箱|南荣百科 | 青岛球场围网,青岛车间隔离网,青岛机器人围栏,青岛水源地围网,青岛围网,青岛隔离栅-青岛晟腾金属制品有限公司 | 建筑工程资质合作-工程资质加盟分公司-建筑资质加盟 | 无纺布包装机|径向缠绕包装机|缠绕膜打包机-上海晏陵智能设备有限公司 | 煤棒机_增碳剂颗粒机_活性炭颗粒机_木炭粉成型机-巩义市老城振华机械厂 | 煤矿支护网片_矿用勾花菱形网_缝管式_管缝式锚杆-邯郸市永年区志涛工矿配件有限公司 | 影合社-影视人的内容合作平台| 接地电阻测试仪[厂家直销]_电缆故障测试仪[精准定位]_耐压测试仪-武汉南电至诚电力设备 | 三氯异氰尿酸-二氯-三氯-二氯异氰尿酸钠-优氯净-强氯精-消毒片-济南中北_优氯净厂家 | 铣刨料沥青破碎机-沥青再生料设备-RAP热再生混合料破碎筛分设备 -江苏锡宝重工 |