Prometheus + Grafana

运维相关知识

2021-07-29 11:14:00 约 1522 字预计阅读 4 分钟次阅读量

/2020-11-07-prometheus--grafana/featured-image.png

1. 背景介绍

1.1 Prometheus

中文是普罗米修斯，光听名字就感觉很有范，是很厉害的东西。让我来说说普罗米修斯的故事，他是雅典神话中的人物，传说就是他捏造了人形，雅典娜给每个人形赋予了灵魂。宙斯是禁止人类用火，这哥们看到人类处于困苦中，就从阿波罗手里盗取了火，因此触犯了宙斯，之后宙斯就将他关在高加索山的悬崖上，并且每天放出一只恶鹰去啄他的肝，又让他的肝每天都能长出来，让他承受各种痛苦。这神话还挺有意思，所以可以看到普罗米修斯是人类守护神，他来承受各种苦难，守护人类。所以今天说的这个东西也是这个功能，是一个性能监控工具，他是基于时间序列的一套开源的监控&报警用 Go语言写的一套系统。

它是基于HTTP协议抓取被监控点的状态信息，所以支持面就比较广，任何支持HTTP协议的组件都可以用它来作为被监控点，所以也广泛被用于docker，k8s和mesos环境的监控。输出被监控组件信息的HTTP接口是exporter，目前很多互联网公司常用的组件都可以直接使用exporter。

1.2 Grafana

用于可视化大型测量数据的开源程序，提供了强大，优雅的方式去创建、共享、浏览数据。Grafana和Prometheus配合使用，用图形化界面的方式去展示服务的运行情况。

2. 实战操练

我是用的vagrant + virtual Box的方式起了三个instance，中间的过程也是一波三折，主要开始是对vagrant不太熟悉，其实vagrant是对开发环境的隔离，和docker有点像，通过box镜像的方式来隔离不同的开发环境。在使用vagrant的时候把网络配置复习了一下，主要是NAT，桥接，host-only，交换机和路由器的区别。

先来说说交换机和路由器的区别吧，这个应该是经常遇到，首先这两个在OSI七层模型中所处的层级是不一样，交换机是处于第二层，数据链路层，而路由器是处于第三层，网络层。交换机是通过物理地址的方式去确定数据的目的地址，路由器是通过网络ID号来寻址。两者的不同方式注定了功能的不同。交换机可以理解为多了更多的LAN 口，每个LAN口的网络互不干扰，路由器恰好相反，是多个LAN口共用一个总的网络端口，所以是共用网络带宽。

NAT：网络地址转换，是虚拟机通过NAT的功能，通过宿主机所在的网络来访问公网。NAT模式下，局域网的其他主机不能访问虚拟机，虚拟机可以访问局域网的所有主机。

桥接：是本地的物理网卡和虚拟网卡通过虚拟交换机进行桥接，虚拟交换机相当于现实网络中的交换机。

host-only：虚拟网络是在一个全封闭的网络，唯一能访问的就是主机。

总共是起了三个instance，一个是安装prometheus，一个安装granfan，一个是安装node_exporter.

安装和启动prometheus

1
2
3
4
5


wget https://github.com/prometheus/prometheus/releases/download/v2.7.1/prometheus-2.7.1.linux-amd64.tar.gz
tar -xvzf prometheus-2.7.1.linux-amd64.tar.gz -C /usr/local/
mv prometheus-2.7.1.linux-amd64 prometheus
./prometheus --config.file="prometheus.yml" &  (后台运行)
lsof -i:9090 （列出端口进程）

弄完后，就启动了prometheus，占用的端口是9090端口，也就开始了性能的监控。

设置target就是监控的目标，默认情况下监控目标是自己，也可以设置其他的node节点进行监控。

安装和启动node_exporter节点

1
2
3


curl -OL https://github.com/prometheus/node_exporter/releases/download/v0.15.2/node_exporter-0.15.2.darwin-amd64.tar.gz
tar -xzf node_exporter-0.15.2.darwin-amd64.tar.gz
nohup /usr/local/node_exporter/node_exporter

这个就启动了node_exporter，进去后也是可以看到，实际上就是一堆下图这种日志。

这些日志是可以被prometheus 调用和展示的。

Granfan 安装和启动

这个是一个图形化界面的性能监控工具，安装和启动也是非常简单。

1
2


sudo apt-get install grafana
service grafana-server start

通过Grafana可以用dashboard把普罗米修斯添加到监控中。

总体来说，还是比较简单。

3. k8s 和 prometheus， Granfan结合的实战

https://www.qikqiak.com/post/kubernetes-monitor-prometheus-grafana/

这篇博文也是一个很好的k8s和prometheus Granfan相结合的例子。

4. Prometheus 常见的问题

https://www.ershicimi.com/p/b27a4437ff01832f1832c563a8a00437

目录