电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術文章
文章詳情頁

基于docker 搭建Prometheus+Grafana的過程詳解

瀏覽:74日期:2024-11-04 18:33:05
一、介紹Prometheus

Prometheus(普羅米修斯)是一套開源的監控&報警&時間序列數據庫的組合,起始是由SoundCloud公司開發的。隨著發展,越來越多公司和組織接受采用Prometheus,社會也十分活躍,他們便將它獨立成開源項目,并且有公司來運作。Google SRE的書內也曾提到跟他們BorgMon監控系統相似的實現是Prometheus。現在最常見的Kubernetes容器管理系統中,通常會搭配Prometheus進行監控。

Prometheus基本原理是通過HTTP協議周期性抓取被監控組件的狀態,這樣做的好處是任意組件只要提供HTTP接口就可以接入監控系統,不需要任何SDK或者其他的集成過程。這樣做非常適合虛擬化環境比如VM或者Docker 。

Prometheus應該是為數不多的適合Docker、Mesos、Kubernetes環境的監控系統之一。

輸出被監控組件信息的HTTP接口被叫做exporter 。目前互聯網公司常用的組件大部分都有exporter可以直接使用,比如Varnish、Haproxy、Nginx、MySQL、Linux 系統信息 (包括磁盤、內存、CPU、網絡等等),具體支持的源看:https://github.com/prometheus。

與其他監控系統相比,Prometheus的主要特點是:

一個多維數據模型(時間序列由指標名稱定義和設置鍵/值尺寸)。 非常高效的存儲,平均一個采樣數據占~3.5bytes左右,320萬的時間序列,每30秒采樣,保持60天,消耗磁盤大概228G。 一種靈活的查詢語言。 不依賴分布式存儲,單個服務器節點。 時間集合通過HTTP上的PULL模型進行。 通過中間網關支持推送時間。 通過服務發現或靜態配置發現目標。 多種模式的圖形和儀表板支持。二、Prometheus架構概覽

該圖說明了普羅米修斯(Prometheus)及其一些生態系統組件的整體架構:

基于docker 搭建Prometheus+Grafana的過程詳解

它的服務過程是這樣的Prometheus daemon負責定時去目標上抓取metrics(指標) 數據,每個抓取目標需要暴露一個http服務的接口給它定時抓取。

Prometheus:支持通過配置文件、文本文件、zookeeper、Consul、DNS SRV lookup等方式指定抓取目標。支持很多方式的圖表可視化,例如十分精美的Grafana,自帶的Promdash,以及自身提供的模版引擎等等,還提供HTTP API的查詢方式,自定義所需要的輸出。

Alertmanager:是獨立于Prometheus的一個組件,可以支持Prometheus的查詢語句,提供十分靈活的報警方式。

PushGateway:這個組件是支持Client主動推送metrics到PushGateway,而Prometheus只是定時去Gateway上抓取數據。

如果有使用過statsd的用戶,則會覺得這十分相似,只是statsd是直接發送給服務器端,而Prometheus主要還是靠進程主動去抓取。

大多數Prometheus組件都是用Go編寫的,它們可以輕松地構建和部署為靜態二進制文件。訪問prometheus.io以獲取完整的文檔,示例和指南。

三、Prometheus的數據模型

Prometheus從根本上所有的存儲都是按時間序列去實現的,相同的metrics(指標名稱) 和label(一個或多個標簽) 組成一條時間序列,不同的label表示不同的時間序列。為了支持一些查詢,有時還會臨時產生一些時間序列存儲。

metrics name&label指標名稱和標簽

每條時間序列是由唯一的”指標名稱”和一組”標簽(key=value)”的形式組成。

指標名稱:一般是給監測對像起一名字,例如http_requests_total這樣,它有一些命名規則,可以包字母數字_之類的的。通常是以應用名稱開頭_監測對像_數值類型_單位這樣。例如:push_total、userlogin_mysql_duration_seconds、app_memory_usage_bytes。

標簽:就是對一條時間序列不同維度的識別了,例如一個http請求用的是POST還是GET,它的endpoint是什么,這時候就要用標簽去標記了。最終形成的標識便是這樣了:http_requests_total{method=”POST”,endpoint=”/api/tracks”}。

記住,針對http_requests_total這個metrics name無論是增加標簽還是刪除標簽都會形成一條新的時間序列。

查詢語句就可以跟據上面標簽的組合來查詢聚合結果了。

如果以傳統數據庫的理解來看這條語句,則可以考慮http_requests_total是表名,標簽是字段,而timestamp是主鍵,還有一個float64字段是值了。(Prometheus里面所有值都是按float64存儲)。

四、Prometheus四種數據類型

Counter

Counter用于累計值,例如記錄請求次數、任務完成數、錯誤發生次數。一直增加,不會減少。重啟進程后,會被重置。

例如:http_response_total{method=”GET”,endpoint=”/api/tracks”} 100,10秒后抓取http_response_total{method=”GET”,endpoint=”/api/tracks”} 100。

Gauge

Gauge常規數值,例如 溫度變化、內存使用變化。可變大,可變小。重啟進程后,會被重置。

例如: memory_usage_bytes{host=”master-01″} 100 < 抓取值、memory_usage_bytes{host=”master-01″} 30、memory_usage_bytes{host=”master-01″} 50、memory_usage_bytes{host=”master-01″} 80 < 抓取值。

Histogram

Histogram(直方圖)可以理解為柱狀圖的意思,常用于跟蹤事件發生的規模,例如:請求耗時、響應大小。它特別之處是可以對記錄的內容進行分組,提供count和sum全部值的功能。

例如:{小于10=5次,小于20=1次,小于30=2次},count=7次,sum=7次的求和值。

Summary

Summary和Histogram十分相似,常用于跟蹤事件發生的規模,例如:請求耗時、響應大小。同樣提供 count 和 sum 全部值的功能。

例如:count=7次,sum=7次的值求值。

它提供一個quantiles的功能,可以按%比劃分跟蹤的結果。例如:quantile取值0.95,表示取采樣值里面的95%數據。

五、安裝運行Prometheus(docker版)

下面介紹如何使用Prometheus和Grafana對本機服務器性能進行監控。

監控本機,只需要一個exporter

node_exporter ? 用于機器系統數據收集

Grafana是一個開源的功能豐富的數據可視化平臺,通常用于時序數據的可視化。它內置了以下數據源的支持:

下面是我們安裝時用到的架構圖:

基于docker 搭建Prometheus+Grafana的過程詳解

注意:本文使用的是ubuntu-16.04.5-server-amd64,只需要一臺服務器即可!

安裝docker

apt-get install -y docker.io

注意:網上的文章說要安裝docker-engine和docker-ce,那都是扯淡的。包壓根都找不到!

只需要安裝docker.io就可以了!

如果是Centos系統,使用yum install -y docker-io 安裝

下載鏡像包

docker pull prom/node-exporterdocker pull prom/prometheusdocker pull grafana/grafana

啟動node-exporter

docker run -d -p 9100:9100 -v '/proc:/host/proc:ro' -v '/sys:/host/sys:ro' -v '/:/rootfs:ro' --net='host' prom/node-exporter

等待幾秒鐘,查看端口是否起來了

root@ubuntu:~# netstat -anptActive Internet connections (servers and established)Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program nametcp 0 0 0.0.0.0:22 0.0.0.0:*LISTEN 1147/sshd tcp 0 36 192.168.91.132:22 192.168.91.1:63648 ESTABLISHED 2969/0 tcp 0 0 192.168.91.132:22 192.168.91.1:63340 ESTABLISHED 1321/1 tcp6 0 0 :::9100 :::* LISTEN 3070/node_exporter

訪問url:

http://192.168.91.132:9100/metrics

效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

這些都是收集到數據,有了它就可以做數據展示了

啟動prometheus

新建目錄prometheus,編輯配置文件prometheus.yml

mkdir /opt/prometheuscd /opt/prometheus/vim prometheus.yml

內容如下:

global: scrape_interval: 60s evaluation_interval: 60s scrape_configs: - job_name: prometheus static_configs: - targets: [’localhost:9090’] labels: instance: prometheus - job_name: linux static_configs: - targets: [’192.168.91.132:9100’] labels: instance: localhost

注意:修改IP地址,這里的192.168.91.132就是本機地址

啟動prometheus

docker run -d -p 9090:9090 -v /opt/prometheus/prometheus.yml:/etc/prometheus/prometheus.yml prom/prometheus

等待幾秒鐘,查看端口狀態

root@ubuntu:/opt/prometheus# netstat -anptActive Internet connections (servers and established)Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program nametcp 0 0 0.0.0.0:22 0.0.0.0:*LISTEN 1147/sshd tcp 0 36 192.168.91.132:22 192.168.91.1:63648 ESTABLISHED 2969/0 tcp 0 0 192.168.91.132:22 192.168.91.1:63340 ESTABLISHED 1321/1 tcp6 0 0 :::9100 :::* LISTEN 3070/node_exportertcp6 0 0 :::22 :::* LISTEN 1147/sshd tcp6 0 0 :::9090 :::* LISTEN 3336/docker-proxy

訪問url:

http://192.168.91.132:9090/graph

效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

訪問targets,url如下:

http://192.168.91.132:9090/targets

效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

如果狀態沒有UP起來,等待一會,就會UP了

啟動grafana

新建空文件夾grafana-storage,用來存儲數據

mkdir /opt/grafana-storage

設置權限

chmod 777 -R /opt/grafana-storage

因為grafana用戶會在這個目錄寫入文件,直接設置777,比較簡單粗暴!

啟動grafana

docker run -d -p 3000:3000 --name=grafana -v /opt/grafana-storage:/var/lib/grafana grafana/grafana

等待幾秒鐘,查看端口狀態

root@ubuntu:/opt/prometheus# netstat -anptActive Internet connections (servers and established)Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program nametcp 0 0 0.0.0.0:22 0.0.0.0:*LISTEN 1147/sshd tcp 0 36 192.168.91.132:22 192.168.91.1:63648 ESTABLISHED 2969/0 tcp 0 0 192.168.91.132:22 192.168.91.1:63340 ESTABLISHED 1321/1 tcp6 0 0 :::9100 :::* LISTEN 3070/node_exportertcp6 0 0 :::22 :::* LISTEN 1147/sshd tcp6 0 0 :::3000 :::* LISTEN 3494/docker-proxytcp6 0 0 :::9090 :::* LISTEN 3336/docker-proxytcp6 0 0 192.168.91.132:9100 172.17.0.2:55108 ESTABLISHED 3070/node_exporter

訪問url:

http://192.168.91.132:3000/

默認會先跳轉到登錄頁面,默認的用戶名和密碼都是admin

基于docker 搭建Prometheus+Grafana的過程詳解

登錄之后,它會要求你重置密碼。你還可以再輸次admin密碼!

基于docker 搭建Prometheus+Grafana的過程詳解

密碼設置完成之后,就會跳轉到首頁

基于docker 搭建Prometheus+Grafana的過程詳解

點擊Add data source,由于使用的是鏡像方式,所以版本比較新。和網絡上的文章展示的圖片不一樣!

基于docker 搭建Prometheus+Grafana的過程詳解

name名字寫Prometheus

type 選擇Prometheus,因為數據都從它那里獲取

url 輸入Prometheus的ip+端口

點擊下面的Save & Test,如果出現綠色的,說明ok了

基于docker 搭建Prometheus+Grafana的過程詳解

回到首頁,點擊New dashboard

基于docker 搭建Prometheus+Grafana的過程詳解

點擊 Graph

基于docker 搭建Prometheus+Grafana的過程詳解

效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

點擊標題下方的編輯

基于docker 搭建Prometheus+Grafana的過程詳解

效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

輸入cpu,底部會有提示

基于docker 搭建Prometheus+Grafana的過程詳解

這里監控 node_load15,表示系統15分鐘的負載。點擊下面的Add Query

基于docker 搭建Prometheus+Grafana的過程詳解

效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

添加總內存

基于docker 搭建Prometheus+Grafana的過程詳解

這里會多出一條線

基于docker 搭建Prometheus+Grafana的過程詳解

點擊右邊的,可以刪除掉 總內存

基于docker 搭建Prometheus+Grafana的過程詳解

點擊General,修改標題為中文

基于docker 搭建Prometheus+Grafana的過程詳解

圖表效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

點擊上面的保存按鈕

基于docker 搭建Prometheus+Grafana的過程詳解

輸入名字

基于docker 搭建Prometheus+Grafana的過程詳解

效果如下:

基于docker 搭建Prometheus+Grafana的過程詳解

點擊首頁,就會有展示

基于docker 搭建Prometheus+Grafana的過程詳解

本文參考鏈接:

http://www.ywnds.com/?p=9656

到此這篇關于基于docker 搭建Prometheus+Grafana的過程詳解的文章就介紹到這了,更多相關docker 搭建Prometheus+Grafana內容請搜索好吧啦網以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持好吧啦網!

標簽: Docker
相關文章:
主站蜘蛛池模板: 气弹簧定制-气动杆-可控气弹簧-不锈钢阻尼器-工业气弹簧-可调节气弹簧厂家-常州巨腾气弹簧供应商 | 澳洁干洗店加盟-洗衣店干洗连锁「澳洁干洗免费一对一贴心服务」 干洗加盟网-洗衣店品牌排行-干洗设备价格-干洗连锁加盟指南 | 旋振筛_不锈钢旋振筛_气旋筛_旋振筛厂家—新乡市大汉振动机械有限公司 | 合肥升降机-合肥升降货梯-安徽升降平台「厂家直销」-安徽鼎升自动化科技有限公司 | 深圳诚暄fpc首页-柔性线路板,fpc柔性线路板打样生产厂家 | 压滤机-洗沙泥浆处理-压泥机-山东创新华一环境工程有限公司 | 高低温试验箱-模拟高低温试验箱订制-北京普桑达仪器科技有限公司【官网】 | 首页 - 军军小站|张军博客 | 电镀标牌_电铸标牌_金属标贴_不锈钢标牌厂家_深圳市宝利丰精密科技有限公司 | 国际线缆连接网 - 连接器_线缆线束加工行业门户网站 | 两头忙,井下装载机,伸缩臂装载机,30装载机/铲车,50装载机/铲车厂家_价格-莱州巨浪机械有限公司 | 青海电动密集架_智能密集架_密集架价格-盛隆柜业青海档案密集架厂家 | 假肢-假肢价格-假肢厂家-河南假肢-郑州市力康假肢矫形器有限公司 | 顶空进样器-吹扫捕集仪-热脱附仪-二次热解吸仪-北京华盛谱信仪器 | 特种阀门-调节阀门-高温熔盐阀-镍合金截止阀-钛阀门-高温阀门-高性能蝶阀-蒙乃尔合金阀门-福建捷斯特阀门制造有限公司 | 巨野电机维修-水泵维修-巨野县飞宇机电维修有限公司 | 熔体泵|换网器|熔体齿轮泵|熔体计量泵厂家-郑州巴特熔体泵有限公司 | 东莞压铸厂_精密压铸_锌合金压铸_铝合金压铸_压铸件加工_东莞祥宇金属制品 | 轻型地埋电缆故障测试仪,频响法绕组变形测试仪,静荷式卧式拉力试验机-扬州苏电 | 北京网站建设|北京网站开发|北京网站设计|高端做网站公司 | 宿松新闻网 宿松网|宿松在线|宿松门户|安徽宿松(直管县)|宿松新闻综合网站|宿松官方新闻发布 | 气密性检测仪_气密性检测设备_防水测试仪_密封测试仪-岳信仪器 | 课件导航网_ppt课件_课件模板_课件下载_最新课件资源分享发布平台 | 深圳希玛林顺潮眼科医院(官网)│深圳眼科医院│医保定点│香港希玛林顺潮眼科中心连锁品牌 | 户外-组合-幼儿园-不锈钢-儿童-滑滑梯-床-玩具-淘气堡-厂家-价格 | 阿米巴企业经营-阿米巴咨询管理-阿米巴企业培训-广东键锋企业管理咨询有限公司 | 欧景装饰设计工程有限公司-无锡欧景装饰官网 | 仓储笼_金属箱租赁_循环包装_铁网箱_蝴蝶笼租赁_酷龙仓储笼租赁 测试治具|过炉治具|过锡炉治具|工装夹具|测试夹具|允睿自动化设备 | 气象监测系统_气象传感器_微型气象仪_气象环境监测仪-山东风途物联网 | 自动化生产线-自动化装配线-直流电机自动化生产线-东莞市慧百自动化有限公司 | 济南网站策划设计_自适应网站制作_H5企业网站搭建_济南外贸网站制作公司_锐尚 | 耐火浇注料-喷涂料-浇注料生产厂家_郑州市元领耐火材料有限公司 耐力板-PC阳光板-PC板-PC耐力板 - 嘉兴赢创实业有限公司 | 盐水蒸发器,水洗盐设备,冷凝结晶切片机,转鼓切片机,絮凝剂加药系统-无锡瑞司恩机械有限公司 | 厂房出租-厂房规划-食品技术-厂房设计-厂房装修-建筑施工-设备供应-设备求购-龙爪豆食品行业平台 | 山东臭氧发生器,臭氧发生器厂家-山东瑞华环保设备 | 火锅底料批发-串串香技术培训[川禾川调官网] | 北京包装设计_标志设计公司_包装设计公司-北京思逸品牌设计 | 小型铜米机-干式铜米机-杂线全自动铜米机-河南鑫世昌机械制造有限公司 | 阁楼货架_阁楼平台_仓库仓储设备_重型货架_广州金铁牛货架厂 | 精密模具加工制造 - 富东懿| 机房监控|动环监控|动力环境监控系统方案产品定制厂家 - 迈世OMARA |