性能测试：k8s集群监控环境搭建（kube-prometheus）

选择kube-prometheus版本

k8s集群版本是1.22.x

5个节点

说明：如果你电脑配置低，也可以1个master节点，2个node节点

3个节点

Kube-Prometheus地址：https://github.com/prometheus-operator/kube-prometheus/

找到和自己Kubernetes版本对应的版本

选择0.9

克隆：git clone -b release-0.9 https://github.com/prometheus-operator/kube-prometheus.git

安装prometheus-operator

cd kube-prometheus/

cd manifests/

安装Prometheus Operator：kubectl create -f setup/

下面可以看到，ns是monitoring

查看Operator容器状态：kubectl get po -n monitoring

2/2才表示可用

为什么是两个容器呢？

cd setup

vim prometheus-operator-deployment.yaml

可以看到，是1个副本，一个pod里面两个容器

查看信息，镜像拉取失败

kubectl describe po prometheus-operator-75d9b475d9-wslbm -n monitoring

pod在master02上

可以在master02上，单独拉取

docker pull quay.io/prometheus-operator/prometheus-operator:v0.49.0

然后，自动变成running了

创建prometheus技术栈（部署prometheus）

kubectl create -f .

因为要下载镜像，这一步很耗时

image: quay.io/prometheus/alertmanager:v0.22.2

image: quay.io/prometheus/prometheus:v2.29.1

image: k8s.gcr.io/kube-state-metrics/kube-state-metrics:v2.1.1

image: quay.io/brancz/kube-rbac-proxy:v0.11.0

查看Prometheus容器状态

可以看到，每个节点上都有一个node-exporter，那是因为

vim node-exporter-daemonset.yaml

查看服务：kubectl get svc -n monitoring

暴露Prometheus端口

查看Prometheus的Service：kubectl get svc prometheus-k8s -n monitoring

将Prometheus的Service的type改成NodePort类型：kubectl edit svc prometheus-k8s -n monitoring

再次查看Prometheus的Service：kubectl get svc prometheus-k8s -n monitoring

对外暴露了一个端口32458

访问：http://192.168.117.142:32458

查询数据

暴露Grafana端口

查看Grafana的Service：kubectl get svc grafana -n monitoring

将Grafana的Service的type改成NodePort类型：kubectl edit svc grafana -n monitoring

再次查看Grafana的Service，对外暴露了一个端口32718

kubectl get svc grafana -n monitoring

安装了kube-proxy服务的节点都可以访问（grafana的pod必须是running状态）：

http://192.168.117.142:32718/login

http://192.168.117.143:32718/login

http://192.168.117.144:32718/login

http://192.168.117.145:32718/login

http://192.168.117.146:32718/login

Grafana默认登录的账号密码为admin/admin

已经有数据源

监控效果图

监控node

监控指定命名空间下的pod，比如：kube-system

监控指定node下的pod

添加其它模板

1 Node Exporter for Prometheus Dashboard CN v20201010

中文

https://grafana.com/grafana/dashboards/8919

英文

https://grafana.com/grafana/dashboards/11074

5个节点

3个节点

gcr镜像拉取失败的解决方案

详见：

https://www.cnblogs.com/uncleyong/p/15405315.html

https://www.cnblogs.com/uncleyong/p/15399642.html

【性能项目实战：jmeter+k8s+微服务+skywalking+efk】汇总

详见：https://www.cnblogs.com/uncleyong/p/15475614.html