[转帖]PG Exporter

http://v0.pigsty.cc/zh/docs/reference/kernel-optimize/

Exporter

https://github.com/Vonng/pg_exporter

完全自研的 pg_exporter, 用于收集postgres与pgbouncer的指标：

支持PostgreSQL 9.4 ~ 13版本，Pgbouncer 1.8+版本

几乎所有指标都通过配置文件以SQL的形式获取，完全定制化，提供热重载功能

指标收集器可以根据类似Kubernetes的方式调度执行 （例如只在从库上执行，只在带有tag启动标签的节点执行，只在安装特定扩展的实例上执行等）

带有灵活的指标缓存策略，自动超时取消，最小化监控系统对数据库的性能影响。

提供健康检查，就绪探针，主从角色检查等功能，可用于流量分发

PG Exporter

Prometheus exporter for PostgreSQL metrics. Gives you complete insight on your favourate elephant!

Latest binaries & rpms can be found on release page. Supported pg version: PostgreSQL 9.4+ & Pgbouncer 1.8+. Default collectors definition is compatible with PostgreSQL 10,11,12,13.

Latest pg_exporter version: 0.3.1

Features

• Support both Postgres & Pgbouncer
• Flexible: Almost all metrics are defined in customizable configuration files in SQL style.
• Fine-grained execution control (Tags Filter, Facts Filter, Version Filter, Timeout, Cache, etc…)
• Dynamic Planning: User could provide multiple branches of a metric queries. Queries matches server version & fact & tag will be actually installed.
• Configurable caching policy & query timeout
• Rich metrics about pg_exporter itself.
• Auto discovery multi database in the same cluster (multiple database scrape TBD)
• Tested and verified in real world production environment for years (200+ Nodes)
• Metrics overhelming! Gives you complete insight on your favourate elephant!
• (Pgbouncer mode is enabled when target dbname is pgbouncer)

性能表现

对于极端场景（几十万张表与几万种查询），一次抓取最多可能耗费秒级的时长。

好在所有指标收集器都是可选关闭的，且pg_exporter 允许为收集器配置主动超时取消（默认100ms）

自监控

Exporter展示了监控系统组件本身的监控指标，包括：

• Exporter是否存活，Uptime，Exporter每分钟被抓取的次数
• 每个监控查询的耗时，产生的指标数量与错误数量。

Prometheus的配置

Prometheus的抓取频率建议采用10～15秒，并配置适当的超时。

演示或特殊情况也可以配置的更精细（例如2秒，5秒等）

单Prometheus节点可以支持几百个实例的监控，约几百万个时间序列 （Dell R740 64 Core / 400GB Mem/ 3TB PCI-E SSD）

更大规模的集群可以通过Prometheus级联、联邦或分片实现伸缩。例如为每一个数据库集群部署一个Prometheus，并使用上级Prometheus统筹抓取并计算衍生指标