Prometheusbu部署使用-1

Prometheus+grafana部署使用

主机列表：

192.168.161.130 ： Prometheus

192.168.161.128 : node-1

192.168.161.129 ： node-2

二进制手动部署

解压 prometheus-2.14.0.linux-amd64.tar.gz包

解压放至 /usr/local下

编辑服务启动脚本

vim /usr/lib/systemd/system/prometheus.service

[Unit]

Description=Prometheus server daemon

[Service]

ExecStart=/usr/local/prome/prometheus --config.file=/usr/local/prome/prometheus.yml

ExecReload=/bin/kill -HUP $MAINPID

KillMode=process

Restart=on-failure

RestartSec=42s

[Install]

WantedBy=multi-user.target

systemctl daemon-reload  # 加载后台服务

systemctl start | stop | restart | status prometheus

服务端监控配置文件内容

global:    # 全局配置段

  scrape_interval:      15s

  evaluation_interval:  15s

  external_labels:

      monitor: 'codelab-monitor'

rule_files:     # 告警规则配置

scrape_configs:     # 监控配置

  - job_name: 'prometheus'   #监控任务名称

    static_configs:  # 静态监控配置

      - targets: ['192.168.235.130:9090']

        labels:

          node: prome_server

使用动态发现添加主机

global:    # 全局配置段

  scrape_interval:      15s

  evaluation_interval:  15s

  external_labels:

      monitor: 'codelab-monitor'

rule_files:     # 告警规则配置

scrape_configs:     # 监控配置

  - job_name: 'prometheus'   #监控任务名称

#    static_configs:  # 静态监控配置

#      - targets: ['192.168.235.130:9090']

#        labels:

#          node: prome_server

    file_sd_configs: # 基于配置文件动态发现添加主机

       - files: ['/usr/local/prome/sd_config/*.yml']  # 定义服务发现配置路径

         refresh_interval: 5s  # 5秒发现刷洗发现一次

创建服务发现配置文件

mkdir /usr/local/prome/sd_config

编辑prometheus监控程序的配置文件

- targets:            # 直接指定动态发现下的 targets 目标主机

  - 192.168.235.130:9090

    labels:           # 给目标主机添加标签标识

      node: prome_server

重载服务

systemctl reload prometheus

被监控节点安装数据采集工具 node-exporter

解压

[root@localhost ~]# tar zxf node_exporter-0.18.1.linux-amd64.tar.gz

[root@localhost ~]# mv node_exporter-0.18.1.linux-amd64 /usr/local/

将服务做成系统服务管理运行

[Unit]

Description=Node_exporter server daemon

[Service]

ExecStart=/usr/local/node_exporter/node_exporter

Restart=on-failure

[Install]

WantedBy=multi-user.target

prometheus添加远程主机监控

在原来的prometheus.yml中添加任务，监控远程主机

# my global config

global:

  evaluation_interval: 15s

  scrape_interval:     15s

rule_files:

  # - "first_rules.yml"

  # - "second_rules.yml"

scrape_configs:

  - job_name: 'prometheus'

    static_configs:

    - targets: ['192.168.235.130:9090']

      labels:

        node: prome_server

#    file_sd_configs:

#      - files: ['/usr/local/prome/sd_config/*.yml']

#        refresh_interval: 5s

  - job_name: 'node-1'   # 添加主机node-1

    static_configs:

    - targets: ['192.168.235.128:9100']

      labels:

        node: node-1

  - job_name: 'node-2'  # 添加主机node-2

    static_configs:

    - targets: ['192.168.235.129:9100']

      labels:

        node: node-2

将node_exporter添加服务监控

node_exporter 还可以监控系统的服务状态，在启动是指定参数启用服务监控--collector.systemd --collector.systemd.unit-whitelist=服务名称

[Unit]

Description=Node_exporter server daemon

[Service]

ExecStart=/usr/local/node_exporter/node_exporter --collector.systemd  --collector.systemd.unit-whitelist=(sshd|docker|nginx).service

Restart=on-failure

[Install]

WantedBy=multi-user.target

--collector.systemd ：表示启用服务监控
--collector.systemd.unit-whitelist=(sshd|docker|nginx).service ：表示监控多个服务

grafan中快速使用监控模板快速监控

grafana 提供了大量的监控模板，针对各种exporter和数据源制作了不同的监控模板，在grafana中导入即可直接使用

https://grafana.com/grafana/dashboards

通过监控模板的ID值直接导入

选择某个监控模板，找到Get this dashboard:的值，这里针对node-exporter的模板有一个比较好的模板ID：8919 ,可以快速实现主机资源的监控。

同样，容器监控也一样。找到合适的模板即可