Telegraf+InfluxDB+Grafana搭建服务器监控平台 tags:网站 个人网站:https://wanghualong.cn/ 效果展示 本站服务器状态监控:https://status.wanghualong.cn 前言 要搭建服务器监控平台,总共分三步: 第一步,数据采集: 第二步,数据存储: 第三步,数据可视化. 其中,数据存储连接数据采集与数据可视化,是非常重要的中间环节.本文非常凑巧的选择了时序数据库InfluxDB.(@(滑稽)为什么巧,当然不是因为我只会用这个) I…

在做性能测试的时候,重点关注点是各项性能指标,用Jmeter工具,查看指标数据,就是借助于聚合报告,但查看时也并不方便.那如何能更直观的查看各项数据呢?可以通过InfluxDB+Grafana+Jmeter来实现数据的可视化. 讲到这里,可能会对 InfluxDB+Grafana 陌生些,没关系,后续会详细讲解. 我们先来看一张官网的配图,如下所示: 如上所示,这就是接下来一系列教程的最终效果了,数据可视化,可添加各种指标数据,是不是很不错.觉得不错那就一起一探究竟吧. 注意:环境搭建基于lin…

在之前系列博文中,已经介绍完了数据采集和数据存储,那数据如何展示呢?所以今天就专门来讲下数据如何展示的问题. 以前博文参考: Docker系列--InfluxDB+Grafana+Jmeter性能监控平台搭建(一) Docker系列--InfluxDB+Grafana+Jmeter性能监控平台搭建(二) Grafana简介 既然都要使用Grafana了,那我们就先来简单认识下吧. Grafana 是 Graphite 和 InfluxDB 仪表盘和图形编辑器,同时也是开源的.功能齐全的度量仪表盘…

[系统集成] 基于telegraf, influxdb, grafana 建立 esxi 监控 https://www.cnblogs.com/hahp/p/7677420.html 之前在 nagios 上建立了 esxi 监控,指标少.配置麻烦.视觉效果差.最近我把 esxi 监控迁移到了 influxdb+grafana 平台上,无论是监控指标.可操作性还是视觉效果都有了很大提升.下面概括一下我的配置过程: 一.安装 influxdb 和 grafana 具体请参考 influxdb 和…

collect部署 1.安装 yum install collectd -y 2.配置/etc/collectd.conf LoadPlugin network <Plugin network> Server "10.10.83.229" "25826" </Plugin> 3.启动服务 /etc/init.d/collectd restart InfluxDB配置 1.修改文件/etc/influxdb/influxdb.conf [[co…

一.单节点环境部署 机器节点信息及 InfluxDB.Grafana 版本选择: 节点 Linux版本 部署服务 10.223.1.198 Centos 6.8 InfluxDB 1.7.7 10.223.1.199 Centos 6.8 Grafana 5.4.4 1.1 InfluxDB 环境部署 1. InfluxDB 官网下载地址 不同系统下载地址:https://portal.influxdata.com/downloads 2. 下载rpm包并安装 wget https://dl.i…

网上查看了很多关于环境搭建的文章,都比较久远了很多安装包源都不可用了,今天收集了很多资料组合尝试使用新版本来搭建,故在此记录. 采集数据(collectd)-> 存储数据(influxdb) -> 显示数据(grafana) 常用配置: influxdb + grafana安装在一台机器负责监控数据收集及展示 collectd安装在一台或多台被监控服务端,跟监控端的25826端口对接,上传本地监控的数据 influxdb监控25826端口以获得数据,自身处于8086端口,grafana从808…

搭建需求? jmeter自身的聚合测试报告可视化效果极差,为更加形象的.动态的展示测试过程,需要一个具有时序性的可视区来展示给我们的测试者, 这时候就需要用到后端监控,下面我们来开始搭建符合这种测试需求的测试平台 此次测试平台基于阿里云进行搭建,具体的环境读者可自行选择,例如centos或者readhat Docker环境搭建: 本章重点讲解性能平台建设,docker搭建及常用操作命令请参考docker讲解章节 jmeter环境搭建: 详细内容请参看jmeter环境 influxDB环境搭建:…

之前在 nagios 上建立了 esxi 监控,指标少.配置麻烦.视觉效果差.最近我把 esxi 监控迁移到了 influxdb+grafana 平台上,无论是监控指标.可操作性还是视觉效果都有了很大提升.下面概括一下我的配置过程: 一.安装 influxdb 和 grafana 具体请参考 influxdb 和 grafana 的文档. 安装后在 influxdb 中创建新数据库,可以命名为:vsphere,然后将该数据库加入到 grafana数据源中. 二.安装 telegraf:1.3.4…

第一部分 Telegraf 部署和配置 Telegraf 是实现 数据采集 的工具.Telegraf 具有内存占用小的特点,通过插件系统开发人员可轻松添加支持其他服务的扩展. 在平台监控系统中,可以使用 Telegraf 采集多种组件的运行信息,而不需要自己手写脚本定时采集,大大降低数据获取的难度:且 Telegraf 配置极为简单,只要有基本的 Linux 基础即可快速上手.Telegraf 按照时间序列采集数据,数据结构中包含时序信息,借助 Influxdb 可以针采集得到的数据完成各种分析…

一.Grafana 配置 InfluxDB 数据源 1.1 登录 Granfana 界面选择 InfluxDB 数据源 在前面我们已经部署好相应监控环境,登录Grafana:http://10.223.1.199:3000/,登录密码默认是 admin / admin,初次登录时会要求修改密码. 进入 Settings -> Data Sources -> Add data source,可以看到 Grafana 支持多种数据源,在这里我们选择 InfluxDB 数据源. 1.2 配置 Inf…

官方网址:https://prometheus.io/ GitHub网址:https://github.com/prometheus/prometheus 软件下载地址:https://prometheus.io/download/ 第三方中文介绍:https://github.com/1046102779/prometheus prometheus介绍 Prometheus是一个开源的系统监控和报警的工具包,最初由SoundCloud发布. 特点: 多维数据模型(有metric名称和键值对确定…

我们已经看到使用Collectd监控CPU /内存利用率(本文).但它没有提供所有信息来确定性能问题的瓶颈.在本文中,我们将使用Collectd Java插件来使用其JMX技术来监视和管理Java虚拟机(JVM). 目标: 使用Java的JMX技术监视和管理Java虚拟机(JVM). 建筑: 我们的高级架构如下所示 - 我们将监控所有应用服务器,JMeter服务器和JMeter-master的JVM. JMX(Java托管扩展): JMX是在Java 5.0发行版中引入的,用于在运行时管理/监视…

在上一篇博文中,主要是讲了InfluxDB的配置,博文链接:https://www.cnblogs.com/hong-fithing/p/14453695.html,今天来分享下Jmeter的配置. 在介绍Jmeter之前,必须是要有Jmeter环境的,至于环境怎么配,工具怎么用,可以看以前的博文.环境搭建:Jmeter--环境搭建:Jmeter系列博文:Jmeter系列.所以这些就不多讲了,可以自行查看,今天以性能监控平台配置为主,介绍Jmeter运行脚本来采集对应数据. Jmeter配置 添…

一.InfluxDB 1.下载InfluxDB wget https://dl.influxdata.com/influxdb/releases/influxdb-1.5.2.x86_64.rpm 2.安装InfluxDB rpm -ivh influxdb-.x86_64.rpm systemctl start influxdb.service 3.创建库.用户 influx CREATE DATABASE qkaweb use qkaweb create user ' 二.Grafana 1…

Tip: 此篇已加入.NET Core微服务基础系列文章索引 一.关于App.Metrics+InfluxDB+Grafana 1.1 App.Metrics App.Metrics是一款开源的支持.NET Core的监控插件,它还可以支持跑在.NET Framework上的应用程序(版本 >= 4.5.2).官方文档地址:https://www.app-metrics.io/ 1.2 InfluxDB InfluxDB是一款开源的分布式时序.时间和指标数据库,使用go语言编写,无需外部依赖.官…

Prometheus 是一套开源的系统监控报警框架.Prometheus 作为生态圈 Cloud Native Computing Foundation(简称:CNCF)中的重要一员,其活跃度仅次于 Kubernetes, 现已广泛用于 Kubernetes 集群的监控系统中. 每个人都应该使用Prometheus,它提供了自定义的时序监控功能,允许你instrument代码并在Grafana中以图形化的方式进行监视.你还可以搭建告警功能,当生产环境崩溃或延迟让顾客感到不满时,你能得到提醒.它同…

在centos6.5上influxdb + Grafana监控平台配置: 1.RedHat and CentOS users can install the latest stable version of InfluxDB using the yum package #cat <<EOF | sudo tee /etc/yum.repos.d/influxdb.repo [influxdb] name = InfluxDB Repository - RHEL \$releasever bas…

前言 随着公司postgresql数据库被广泛应用,尤其是最近多个项目在做性能测试的时候都是基于postgresql的数据库,为了确定性能瓶颈是否会出现在数据库中,数据库监控也被我推上了日程.在网上找了一遍好像没有特别好的监控工具,虽然推荐比较多的是pgwatch,但是部署比较麻烦,需要Linux环境,然而公司大部分都是Windows而且后期推广也不是很方便,因此果断放弃了. 最近在做一个服务器性能监控时发现telegraf+influxdb+grafana的组合比较不错,然后去官网和githu…

1.浅析监控方案 heapster是一个监控计算.存储.网络等集群资源的工具,以k8s内置的cAdvisor作为数据源收集集群信息,并汇总出有价值的性能数据(Metrics):cpu.内存.network.filesystem等,然后将这些数据输出到外部存储(backend),如InfluxDB,最后再通过相应的UI界面进行可视化展示,如grafana. 另外heapster的数据源和外部存储都是可插拔的,所以可以很灵活的组建出很多监控方案,如:Heapster+ElasticSearch+Ki…

这是一个大数据爆发的时代.面对信息的激流.多元化数据的涌现,我们在获取.存储.传输.理解.分析.应用.维护大数据时,无疑需要一种便捷的信息交流通道,以便快速.有效.准确地理解和驾驭这个过程.本文将通过时序数据库(InfluxDB)+Grafana的实践,来介绍如何将数据便捷地展现出来. 一.InfluxDB 开源的分布式时序.时间和指标数据库,使用Go语言编写,无需外部依赖.其中,时间序列数据库是数据格式里包含Timestamp字段的数据,比如某一时间用户上网流量.通话详单等.但是,有什么数据不…

背景: 话说Jmeter原生的监控确实太丑了,听大佬们在讨论Jmeter+InfluxDb+Grafana的监控,于是,为了有一个漂亮的测试报告,就手动开始进行部署. 安装步骤: 1.influxdb下载安装: [root@localhost ~]# wget https://dl.influxdata.com/influxdb/releases/influxdb-1.7.0.x86_64.rpm --no-check-certificate [root@localhost ~]# rpm -i…

一.组件介绍 我们采用现在比较流行的cAdvisor+InfluxDB+Grafana组合进行Docker监控. 1.cAdvisor(数据采集) 开源软件cAdvisor(Container Advisor)是用于监控容器运行状态的利器之一,该项目主页为https://github.com/google/cadvisor,它被用于多个与docker相关的开源项目中.实际上在Kubernetes系统中,cAdvisor已经被默认集成到了kubelet组件内.cAdvisor提供了web界面可供浏…

前言 在做性能测试时,如果有一个性能测试结果实时展示的页面,可以极大的提高我们对系统性能表现的掌握程度,进而提高我们的测试效率.但是我们每次打开Jmeter都会有几个硕大的字提示别用GUI模式进行负载测试,而且它自带的监视器效果实在一般:在Windows下渲染效果不好,在linux环境(非GUI环境)下更是无法使用,这一点我在如何选择性能测试工具中有过简单的描述. 所以,在做性能测试时,为Jmeter构建一个可视化的监控环境平台是非常有价值的.这也是这篇博客的目的. 首先我们来看一下最后的成品,…

cAdvisor+InfluxDB+Grafana cAdvisor:是谷歌开源的一个容器监控工具,采集主机上容器相关的性能指标数据.比如CPU.内存.网络.文件系统等. Heapster是谷歌开源的集群监控数据收集工具,会所有节点监控数据,Heapster作为一个pod在集群中运行,通过API获得集群中的所有节点,然后从节点kubelet暴露的10255汇总数据.目前社区用Metrics Server 取代 Heapster. InfluxDB:时序数据库,存储监控数据. Grafana:可视…

cadvisor+influxdb+grafana可以实现容器信息获取.存储.显示等容器监控功能,是目前流行的docker监控开源方案. 方案介绍 cadvisor Google开源的用于监控基础设施应用的工具,可以零配置运行在docker主机上来监控Docker主机以及Docker容器.其为单节点监控,只能监控一个主机.多节点监控可参考Google的Kubernetes.作为docker服务的监控数据收集器,提供给influxdb. influxdb InfluxDB 是用Go语言编写的一个开…

目录 一.Heapster 介绍 二.部署 三.使用 heapster 已经 deprecated 了:https://github.com/kubernetes/heapster,所以下面的演示主要针对 Kubernetes 1.10 之前的版本,我这里是新版本,所以是收集不到数据的. 一.Heapster 介绍 Heapster 是容器集群监控和性能分析工具,天然的支持 Kubernetes 和 CoreOS. Kubernetes 有个出名的监控 agent-cAdvisor.在每个 ku…

一.概要 1.1 背景 虚拟化技术如今已经非常热门,如果你不知道什么是虚拟化,那你应该了解虚拟机.虚拟化技术如同虚拟机一样,用于将某些硬件通过软件方式实现"复制",虚拟出"硬件系统" 并且能够对该虚拟的硬件系统实现一系列骚操作.       docker作为出色的虚拟化技术,其技术发展壮大的同时,使用docker部署主机和服务的情况越来越多.可虚拟化终究是虚拟化,它需要依托与真实的主机之上,所以面对日益庞大的docker服务群应用,需要做好有效的监控.       …

1.部署heapster 下载 heapster 相关 yaml 文件 [root@master dashboard]# wget https://raw.githubusercontent.com/kubernetes-retired/heapster/master/deploy/kube-config/influxdb/grafana.yaml [root@master dashboard]# wget https://raw.githubusercontent.com/kubernetes…

Grafana部署监控docker服务 一.使用InfluxDB+cAdvisor+Grafana配置Docker监控 1.1Docker监控组件 1.2cAdvisor: 1.3Docker监控安装与配置 安装influxDB 运行Grafana可视化平台并与influxDB容器进行互联 二.docker容器监控(cAdvisor+InfluxDB+Grafana) 2.1部署influxDB服务 部署cadvisor服务 布署granafa 三.Prometheus+Grafana部署监控d…