您可以捐助,支持我们的公益事业。

1元 10元 50元





认证码:  验证码,看不清楚?请点击刷新验证码 必填



  求知 文章 文库 Lib 视频 iPerson 课程 认证 咨询 工具 讲座 Model Center   Code  
会员   
   
 
     
   
 订阅
  捐助
zabbix监控tomcat(包含jvm监控)
 
作者:LonelysWorld
  2035  次浏览      15
 2020-6-29  
 
编辑推荐:
本文主要介绍了监控环境搭建,监控数据采集以及解决思路等相关问题,希望对大家有所帮助。
本文来自于csdn,由火龙果软件Alice编辑、推荐。

1.前言:

我们的监控系统是zabbix,最近刚做完jvm还有tomcat的监控,需要吐槽以下内容:

zabbix官方提供的jvm和tomcat监控模版,存在item书写格式的坑,导致很多内容无法获取到监控。

网友写的zabbix监控java文章,99%就只有环境的搭建,没有zabbix item键值,所以环境监控上了,item键值不知道怎么写。

本文监控jvm内容如下:

内存使用状态:堆内存(Heap memory)和非堆内存(No Heap memory),包括已用值、最大值、已提交;

堆内存内存池:新生代(eden space),survivor space,老年代(old gen)的内存使用状态;

非堆内存内存池:代码缓存(Code cache),元空间(meta space),压缩类空间(compressed class space);

类加载:加载总数,已加载,已卸载。

Java线程:总开启线程,活动线程,线程峰值。

本文监控tomcat内容如下:

Tomcat请求数:包括每秒请求数,每秒出错数;

Tomcat网络流量统计:包括进流量统计,出流量统计;

Tomcat线程:包括最大线程数,当前线程数,当前繁忙线程数。

我没有在zabbix中添加垃圾回收(gc)的监控,而是在catalina配置里面添加gc日输入来给开发进行分析,设置方式如下。

CATALINA_OPTS=”-XX:ParallelGCThreads=4 -XX:+PrintGCDetails -Xloggc:日志存放路径”

监控效果如下:

2.监控环境搭建

环境介绍:

[root@tomcat-01 ~]# /usr/local/tomcat/bin/version.sh
Server version: Apache Tomcat/8.0.23
Server built: May 19 2015 14:58:38 UTC
Server number: 8.0.23.0
OS Name: Linux
OS Version: 2.6.32-573.22.1.el6.x86_64
Architecture: amd64
JVM Version: 1.8.0_65-b17
JVM Vendor: Oracle Corporation

 

2.1.Server端配置

1、 Zabbix server端安装java jdk环境并开启javaGateway支持java监控。

javaGateway 启用方式如下:

Zabbix通过rpm包安装:只需要安装zabbix-java-gateway包即可。

Zabbix通过编译安装:在编译时需要加上—enable-java以支持jmx监控,如果之前没加需要重新编译。

2、修改zabbix-java-gateway配置文件

[root@zabbix ~]# vim /etc/zabbix/zabbix_java_gateway.conf
LISTEN_IP="192.168.10.3"
LISTEN_PORT=10052
PID_FILE="/var/run/zabbix/zabbix_java.pid"
START_POLLERS=5

修改zabbix-server配置文件

[root@zabbix ~]# vim /etc/zabbix/zabbix_server.conf
JavaGateway=192.168.10.3
JavaGatewayPort=10052
StartJavaPollers=5

2.2.Tomcat服务器配置

1、下载catalina-jmx-remote.jar包,到tomcat安装目录下的lib目录

wget -O /usr/local/tomcat/lib/catalina-jmx-remote.jar http://archive.apache.org/dist/tomcat/tomcat-8/v8.0.23/bin/extras/catalina-jmx-remote.jar

2、修改catalina.sh添加如下内容

CATALINA_OPTS="$CATALINA_OPTS -Dcom.sun.management.jmxremote
-Dcom.sun.management.jmxremote.port =8090
-Dcom.sun.management.jmxremote.ssl =false
-Dcom.sun.management.jmxremote.authenticate =false"

3、重启tomcat

4、监控测试

(1)下载cmdline-jmxclient-0.10.3.jar文件,下载地址http://crawler.archive.org/cmdline-jmxclient/downloads.html

(2)本地执行如下命令查看tomcat的堆内存信息

[root@tomcat-01 ~]# java -jar /root/cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:type =Memory HeapMemoryUsage
11/04/2016 15:23:16 +0800 org.archive.jmx.Client HeapMemoryUsage:
committed: 2146959360
init: 2147483648
max: 2146959360
used: 407611808

3.监控数据采集

3.1.堆内存

Tomcat本地查看堆内存信息:

[root@tomcat-01 ~]# java -jar cmdline -jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type =Memory HeapMemoryUsage
11/04/2016 15:36:58 +0800 org.archive.jmx.Client HeapMemoryUsage:
committed: 2145910784
init: 2147483648
max: 2145910784
used: 741540536

zabbix监控堆内存键值:

堆内存最大值: jmx["java.lang:type=Memory", "HeapMemoryUsage.max"]
已用堆内存: jmx["java.lang:type=Memory"," HeapMemoryUsage.used"]
已提交堆内存: jmx["java.lang:type=Memory", "HeapMemoryUsage.committed"]

一个完整的zabbix item填写方式如下,不同内容填写不同的键值即可:

3.2.内存池eden space:

Tomcat本地查看eden space:

java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:type =MemoryPool,name=PS\ Eden\ Space Usage

zabbix监控eden区域键值:

最大空间: jmx["java.lang:type=MemoryPool,name=PS Eden Space",Usage.max]
已用空间: jmx["java.lang:type=MemoryPool,name=PS Eden Space",Usage.used]
提交空间: jmx["java.lang:type=MemoryPool,name=PS Eden Space",Usage.committed]

3.3.内存池survivor space:

Tomcat本地查看Survivor space区域:

java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:type=MemoryPool,name=PS\ Survivor\ Space Usage

zabbix监控Survivor 键值:

jmx["java.lang:type=MemoryPool, name=PS Survivor Space",Usage.committed]
jmx["java.lang:type=MemoryPool, name=PS Survivor Space",Usage.max]
jmx["java.lang:type=MemoryPool, name=PS Survivor Space",Usage.used]

3.4.内存池old gen:

Tomcat本地查看old gen区域使用:

java -jar cmdline-jmxclient -0.10.3.jar - 127.0.0.1:8090 java.lang:name =PS\ Old\ Gen,type=MemoryPool Usage

zabbix监控old gen键值:

jmx["java.lang:type=MemoryPool, name=PS Old Gen",Usage.committed]
jmx["java.lang:type=MemoryPool, name=PS Old Gen",Usage.max]
jmx["java.lang:type=MemoryPool, name=PS Old Gen",Usage.used]

3.5.非堆内存:

Tomcat 本地查看非堆内存使用:

java -jar cmdline-jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type=Memory NonHeapMemoryUsag1
zabbix监控非堆内存使用
1jmx["java.lang:type=Memory","NonHeapMemoryUsag.committed"]
jmx["java.lang:type=Memory","NonHeapMemoryUsag.used"]

3.6.内存池meta space:

Tomcat 本地查看meta space区域使用:

java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:type=MemoryPool,name=Metaspace Usage

zabbix监控mete space区域键值

jmx["java.lang:type=MemoryPool, name=Metaspace",Usage.committed]
jmx["java.lang:type=MemoryPool, name=Metaspace",Usage.used]

3.7.内存池code cache:

Tomcat 本地查看code cache区域使用:

java -jar cmdline- jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:type=MemoryPool,name=Code\ Cache Usage

zabbix监控code cache区域使用:

jmx["java.lang:type=MemoryPool, name=Code Cache",Usage.committed]
jmx["java.lang:type=MemoryPool, name=Code Cache",Usage.max]
jmx["java.lang:type=MemoryPool, name=Code Cache",Usage.used]

3.8.内存池compressed class space:

Tomcat 本地查看compressed class space区域使用:

java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:type=MemoryPool,name=Compressed\ Class\ Space Usage

zabbix监控 compressed class space区域使用键值:

jmx["java.lang:type=MemoryPool, name=Compressed Class Space",Usage.committed]
jmx["java.lang:type=MemoryPool, name=Compressed Class Space",Usage.max]
jmx["java.lang:type=MemoryPool, name=Compressed Class Space",Usage.used]

3.9.类加载:

Tomcat本地查看类加载信息:

加载总数: java -jar cmdline-jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type= ClassLoading TotalLoadedClassCoun
已加载: java -jar cmdline-jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type= ClassLoading LoadedClassCount
已卸载: java -jar cmdline-jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type= ClassLoading UnloadedClassCount

Zabbix监控类加载键值:

加载总数: jmx["java.lang:type= ClassLoading", "TotalLoadedClassCount"]
已加载: jmx["java.lang:type= ClassLoading", "LoadedClassCount"]
已卸载: jmx["java.lang:type= ClassLoading", "UnloadedClassCount"]

3.10.java线程:

tomcat本地查看java线程:

总开启线程: java -jar cmdline-jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type= Threading TotalStartedThreadCount
活动线程: java -jar cmdline- jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type= Threading PeakThreadCount
线程峰值: java -jar cmdline- jmxclient-0.10.3.jar controlRole:tomcat 127.0.0.1:8090 java.lang:type= Threading PeakThreadCount

Zabbix监控java线程键值:

总开启线程: jmx["java.lang:type= Threading"," TotalStartedThreadCount"]
活动线程: jmx["java.lang:type= Threading", "ThreadCount"]
线程峰值: jmx["java.lang:type= Threading", "PeakThreadCount"]

3.11.tomcat线程:

本地查看tomcat线程信息:

最大线程:java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 Catalina:name=\"http-nio-8080\",type= ThreadPool maxThreads
当前线程:java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 Catalina:name= \"http-nio-8080\",type=ThreadPool currentThreadCount
繁忙线程:java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 Catalina:name=\"http-nio-8080\",type= ThreadPool currentThreadsBusy

Zabbix监控tomcat线程键值:

最大线程:jmx["Catalina:type =ThreadPool,name =\"http-nio-8080\"",maxThreads]
当前线程:jmx["Catalina:type =ThreadPool,name =\"http-nio-8080\"",currentThreadCount]
繁忙线程 jmx["Catalina:type =ThreadPool,name =\"http-nio-8080\"",currentThreadsBusy]

3.12.网络流量:

Tomcat本地查看接收的字节:

接收的字节:java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 Catalina:name=\"http-nio-8080\",type =GlobalRequestProcessor bytesReceived
发送的字节:java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 Catalina:name = \"http-nio-8080\",type=GlobalRequestProcessor bytesSent

Zabbix监控tomcat接受字节键值:

接收的字节:jmx["Catalina:type =GlobalRequestProcessor,name =\"http-nio-8080\"",bytesReceived]
发送的字节:jmx["Catalina:type =GlobalRequestProcessor,name =\"http-nio-8080\"",bytesSent]

3.13.tomcat请求,出错请求:

tomcat本地查看tomcat请求数:

tomcat请求数: java -jar cmdline-jmxclient-0.10.3.jar - 192.168.10.46:8090 Catalina:name =\"http-nio-8080\",type=GlobalRequestProcessor requestCount
tomcat出错请求: java -jar cmdline-jmxclient-0.10.3.jar - 192.168.10.46:8090 Catalina:name =\"http-nio-8080\", type=GlobalRequestProcessor errorCount

zabbix监控tomcat请求数:

tomcat请求数: jmx["Catalina:type= GlobalRequestProcessor,name= \"http-nio-8080\"",requestCount]
tomcat出错请求: jmx["Catalina:type= GlobalRequestProcessor,name=\"http-nio-8080\"",errorCount]

4.关于网友问题的解答

最近有网友联系我说,看着我的博文搭建完了环境,获取不到数据,我帮助排查了一下,找到了问题所在,特此记录。

网友的报错如下:

# java -jar /root/cmdline- jmxclient-0.10.3.jar - 127.0.0.1:9080 java.lang:type= MemoryPool,name=PS\ Eden\ Space Usag
11/11/2016 10:03:37 +0800
org.archive.jmx.Client java.lang:name= PS Eden Space,type= MemoryPool is not a registered bean

4.1.解决思路

如果你使用命令行监控获取不到数据,那么就先使用jconsole看看有没有数据,如果jconsole有数据,那么就往下看,反之检查你的环境。

如果jconsole有数据,但是命令行没有数据,那么就是Mbean的Object Name或者属性有问题,网友都是复制我的,但是自己本地环境和我的环境不一样所以导致获取不到数据,查询自己的本地Mbean方法有两种,分别是图形和命令行,网友的报错说事自己的Eden Space空间有问题,那么我就贴出来查看本地内存池的Object Name和属性的方法。

(1)通过jconsole查看:

(2)通过命令行查看:直接使用java -jar cmdline-jmxclient-0.10.3.jar – 127.0.0.1:8090命令可以获取所有的Mbean信息,输出太多这里就不贴输出结果了。我通过grep命令获取所有内存池的监控信息方式如下。

[root@tomcat-01 ~]# java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 | grep MemoryPool
java.lang:name= Compressed Class Space,type=MemoryPool
java.lang:name= Metaspace,type=MemoryPool
java.lang:name= PS Old Gen,type=MemoryPool
java.lang:name= PS Eden Space,type=MemoryPool
java.lang:name= PS Survivor Space,type=MemoryPool
java.lang:name= Code Cache,type=MemoryPool

然后我要获取Eden Space的所有属性信息方式如下:(一些特殊字符需要转义)

[root@tomcat-01 ~]# java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:name= PS\ Eden\ Space,type=MemoryPool
Attributes:
Usage: Usage (type=javax.management.openmbean.CompositeData)
PeakUsage: PeakUsage (type=javax.management.openmbean.CompositeData)
MemoryManagerNames: MemoryManagerNames (type=[Ljava.lang.String;)
UsageThreshold: UsageThreshold (type=long)
UsageThresholdExceeded: UsageThresholdExceeded (type=boolean)
UsageThresholdCount: UsageThresholdCount (type=long)
UsageThresholdSupported: UsageThresholdSupported (type=boolean)
CollectionUsageThreshold: CollectionUsageThreshold (type=long)
CollectionUsageThresholdExceeded: CollectionUsageThresholdExceeded (type=boolean)
CollectionUsageThresholdCount: CollectionUsageThresholdCount (type=long)
CollectionUsage: CollectionUsage (type=javax.management.openmbean.CompositeData)
CollectionUsageThresholdSupported: CollectionUsageThresholdSupported (type=boolean)
Valid: Valid (type=boolean)
Name: Name (type=java.lang.String)
Type: Type (type=java.lang.String)
ObjectName: ObjectName (type=javax.management.ObjectName)
Operations:
resetPeakUsage: resetPeakUsage
Parameters 0, return type=void

那么我们在查看Eden Space空间的使用信息。就看到已经出来数据了

[root@tomcat-01 ~]# java -jar cmdline-jmxclient-0.10.3.jar - 127.0.0.1:8090 java.lang:name=PS\ Eden\ Space,type=MemoryPool Usage
12/03/2016 08:33:58 +0800 org.archive.jmx.Client Usage:
committed: 712507392
init: 537395200
max: 712507392
used: 396006304

 

 
   
2035 次浏览       15
相关文章

DevOps转型融入到企业文化
DevOps 能力模型、演进及案例剖析
基于 DevOps 理念的私有 PaaS 平台实践
微软开发团队的DevOps实践启示
相关文档

DevOps驱动应用运维变革与创新
运维管理规划
如何实现企业应用部署自动化
运维自动化实践之路
相关课程

自动化运维工具(基于DevOps)
互联网运维与DevOps
MySQL性能优化及运维培训
IT系统运维管理
 
最新课程计划
信息架构建模(基于UML+EA)3-21[北京]
软件架构设计师 3-21[北京]
图数据库与知识图谱 3-25[北京]
业务架构设计 4-11[北京]
SysML和EA系统设计与建模 4-22[北京]
DoDAF规范、模型与实例 5-23[北京]
 
最新文章
DevOps 道法术器,立体化实施框架
DevOps 中高效测试基础架构的最佳实践
DevOps 在公司项目中的实践落地
如何基于 Kubernetes 构建完整的 DevOps 流水线
阿里云Kubernetes实战
最新课程
DevOps体系实践、工具与平台
基于Kubernetes的DevOps实践
互联网运维与DevOps
基于Kubernetes构建企业容器云
企业级DevOps工作体系与平台
更多...   
成功案例
北京 DevOps体系实践、工具与平台
神龙汽车 DevOps体系实践、工具与平台
中国移动通信 网络规划与管理
某航空公司 IT规划与企业架构
某金融公司 IT服务管理(ITIL V3)
更多...