2、微信小程序端
3、后端界面展示功能(web,小程序通用)
二、 APM监控
我要推荐的是SkyWalking(国人开发的,得支持),这是一款开源的应用性能监控系统,包括指标监控,分布式追踪,分布式系统性能诊断。专为微服务、云本机架构和基于容器(Docker、K8s、Mesos)架构而设计。
其架构如下:
以下是监控效果图:
项目官网:https://skywalking.apache.org/zh/
源码地址:https://github.com/apache/skywalking
三、JMX监控
一般我们运行Java项目都会涉及到JMX的监控,本身JDK自带有的工具jconsole.exe就能完成,很多开源监控平台如Zabbix、open-falcon都有相关的监控插件,除此之外还有一些很流行的JMX监控组件如Jolokia、Jmxtrans,这些组件与其他工具组合就能构建出Java监控平台,我这里推荐的是Jmxtrans + Influxdb + Grafana组合,因为我自己用的比较多,相对比较顺手。
这种方式获取的监控指标是灵活的,界面展现也是自由配置的,最主要是免费轻量级的,监控效果如下:
四、服务器监控
关于服务器监控,主要指的是OS(操作系统)、Docker等环境监控,主要应用于运维监控方面(包括CPU、内存、进程、磁盘、网络的监控),这方面的开源平台也挺多,比如Zabbix、open-falcon。但这里我还是推荐用轻量级的数据采集组件Telegraf,可以组合搭配的方式为 Telegraf + Influxdb + Grafana,由于Telegraf有Linux、Windows、Docker的运行模式,所以可以广泛的采集多种服务器中的指标数据。
五、数据库监控
开源的数据库监控工具或平台其实也不多,因为数据库产品太多太复杂了,涉及到不同的数据库(包括Nosql)用不同的采集组件就已经让人崩溃了。不过幸运的是上面的Telegraf组件就很强大,它可以监控除Oracle以外的大部分常用数据库,如Mysql、SQL Server、Postgresql、Mongodb、Redis、CouchDB等。以下就举例Postgresql和Redis的监控效果图:
Telegraf_mysql 监控配置:https://github.com/influxdata/telegraf/tree/master/plugins/inputs/mysql
Telegraf_SqlServer 监控配置:https://github.com/influxdata/telegraf/tree/master/plugins/inputs/sqlserver
Telegraf_Postgresql 监控配置:https://github.com/influxdata/telegraf/tree/master/plugins/inputs/postgresql
Telegraf_Mongodb 监控配置:https://github.com/influxdata/telegraf/tree/master/plugins/inputs/mongodb
Telegraf_Redis 监控配置:https://github.com/influxdata/telegraf/tree/master/plugins/inputs/redis
六、CI/CD监控
现在最流行的话题是DevOps,这个方面的话题太高大上,涉及到监控也是很难定义,但是对于CI/CD过程涉及的Jenkins我们是可以监控的,比如采用 Jenkins_InfluxDB_Plugin + Influxdb + Grafana 组合方式来采集Jenkins的构建数据,并进行视图分析:
七、测试监控
到这里我们已经了解到 Influxdb + Grafana 组合的强大了,其实和Jmeter结合,我们就可以监视性能测试的压测请求,比起Jmeter本身所生成的html报告,这种方式实时性更好,轻量级的不占用过高资源,可以满足长时间的压测监控。
我们通过Jmeter的Backend Listener组件,就可以将Jmeter的数据发送到Influxdb,交由Grafana分析展示:
八、日志监控
如今最流行的日志监控分析框架是ELK(Elasticsearch + Logstash + Kibana),或者是搭配轻量级的日志采集分析框架Elasticsearch + Filebeat + Kibana。说下kibana作为日志展现方面的问题,Kibana往往在展现一条数据的时候效果是完美的,尤其是kibana4那种清淡的绿色让人心旷神怡。但很多时候我们要做多维度数据图表展现,这地方Kibana貌似没有做图表样式的优化。当很多条数据拥挤在一起时,很难区分出每个点的数值,换句话说很不直观。另外Kibana更加适合日志类型的展现, 虽然他也可以kv结构,但配置起来有些麻烦。所以现在还有一种搭配方式是 Elasticsearch + Logstash + Grafana 或 Elasticsearch + Filebeat + Logstash + Granfa,比起来Grafana比Kibana部署还要轻量化。以下是ELK监控Nginx日志,并通过Grafana展现的效果图:
写到这,我也差不多把我所了解的开源监控产品梳理了一通,其中有一些在我的推荐下,已经在公司内部得到了应用,另外Skywalking和Telegraf、Jmxtrans也集成到我自己的监控平台中,而Influxdb、Grafana也往Jmeter压测平台中做了集成。当然,我还会继续探索一些新的开源监控技术,争取做一个受欢迎的搬运工。
本文分享自微信公众号 - 测试开发技术(mikezhou_talk)。
如有侵权,请联系 [email protected] 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。