在 CentOS 上监控 JSP 应用性能

要让一个部署在 CentOS 上的 JSP 应用稳定运行，一套清晰、立体的监控体系是运维工作的“眼睛”。这不仅仅是看几个数字那么简单，而是需要从系统底层到应用上层，层层递进，形成一个完整的观测闭环。

一 监控体系与分层

有效的监控从来不是单点作战。一个健壮的 JSP 应用性能监控，通常需要构建以下五个层次：

• 系统层：这是基础中的基础。先用 top/htop、vmstat、iostat、iftop、df 这些老伙计，把 CPU、内存、磁盘 I/O、网络这些基础资源的状况摸清楚。任何应用层的异常，都可能源于这里出现了瓶颈。
• 容器层：焦点转移到 Tomcat 和 JVM 本身。开启 JMX 是获取其运行时状态的钥匙，连接器的吞吐、线程池的活跃度、内存的涨落、类加载情况以及 GC 的细节，都从这里一览无余。
• 应用层：这一层直接关乎业务体验。借助像 PSI Probe 这样的工具，可以直观地观察请求吞吐量、响应时间、会话状态、日志流，甚至 JSP 编译耗时和数据源连接池情况。当需要深度诊断时，JVisualVM 或 Ja va Mission Control (JMC) 就能派上用场。
• 日志层：日志是事后复盘和问题追踪的“黑匣子”。持续跟踪 catalina.out、localhost*.log 和 access_log，重点关注错误率和那些拖慢系统的“慢请求”。
• 告警层：监控的最终目的是为了行动。将前面各层的关键指标接入 Zabbix 等监控平台，配置合理的阈值与通知机制，才能形成一个“发现-告警-处理”的完整闭环。

二 快速落地步骤

理论说完，来看看如何快速把这套体系搭建起来。遵循以下三步，可以迅速建立起监控能力。

• 启用 JMX 远程监控 Tomcat
  1. 打开 $CATALINA_HOME/bin/catalina.sh 文件，在 JA VA_OPTS 变量中追加 JMX 参数。一个用于快速测试的示例如下：

     -Dcom.sun.management.jmxremote
     -Dcom.sun.management.jmxremote.port=9010
     -Dcom.sun.management.jmxremote.authenticate=false
     -Dcom.sun.management.jmxremote.ssl=false
     -Dja va.rmi.server.hostname=你的服务器IP

  2. 重启 Tomcat 服务，然后使用本地的 jconsole 或 VisualVM，通过 JMX 连接上述 IP 和端口，验证是否成功。
• 部署 PSI Probe 做应用与容器可视化监控
  1. 下载 psi-probe 的 WAR 包，直接放入 $CATALINA_HOME/webapps 目录。
  2. 在 $CATALINA_HOME/conf/tomcat-users.xml 中配置一个具有 manager-gui 等权限的用户。
  3. 通过浏览器访问 https://你的IP:端口/probe，即可直观查看请求、会话、线程、JVM、日志、数据源等全方位信息。
• 接入 Zabbix 实现指标告警
  1. 部署 Zabbix Ja va Gateway（默认监听 10052 端口），并在 zabbix_server.conf 中启用 Ja vaGateway 并设置 Ja vaGatewayPort=10052。
  2. 确保 Tomcat 端 JMX 已开启（例如端口 9010）。在 Zabbix 前端，导入官方或社区提供的 JMX Tomcat 监控模板，并将其关联到对应的主机。
  3. 等待数据采集，验证无误后，开始配置关键的触发器，例如线程池繁忙度、堆内存使用率、GC 次数异常等。

三 关键指标与采集方式

知道看什么，和知道怎么看，同等重要。下表梳理了各监控层的核心观测点：

简单来说，PSI Probe 提供了开箱即用的可视化仪表盘；JMX 则提供了最细粒度的 JVM 和连接器指标；而 AccessLog 中的 %D 参数（记录请求处理时间），是分析慢请求的利器。

四 告警阈值与排障流程

有了指标，如何判断是否异常？以下是一些通用的建议阈值和排障思路，当然，具体数值需要根据实际业务负载进行调优。

• 建议阈值（需结合实际调优）：
  • JVM 堆使用率 > 80% 且持续超过 5 分钟
  • Full GC 次数每分钟 > 1 次，或 GC 总耗时每分钟出现明显上升趋势
  • Tomcat 线程池繁忙度 > 70%，或开始出现请求排队
  • 应用错误率 > 1%，或 P95/P99 响应时间突然大幅增长
• 排障流程：当告警响起，可以遵循一个从外到内、由浅入深的排查路径：
  1. 先看系统资源：检查 CPU、内存、I/O、网络是否出现异常峰值或瓶颈。
  2. 再看容器指标：通过 JMX 观察堆内存、GC 活动、线程状态和连接器，初步判断问题是否源于内存泄漏、GC 压力或线程饥饿。
  3. 深入应用内部：使用 PSI Probe 查看是否有特定的慢请求、会话数量是否异常暴涨、数据库连接池是否存在大量等待。
  4. 结合日志定位：根据 AccessLog 找到具体的慢请求 URL，并结合 catalina.out 中的异常堆栈信息，锁定问题代码。
  5. 必要时深度分析：如果问题复杂，使用 JVisualVM 或 JMC 进行远程 CPU 采样、生成内存堆转储（Heap Dump）或线程快照（Thread Dump），进行离线深度分析。

五 安全与维护要点

最后，但至关重要的一点：监控本身不能成为系统的安全漏洞或性能负担。

• 生产环境安全：务必为 JMX 启用认证（authenticate=true）和 SSL 加密（ssl=true），避免使用示例中的简易配置。同时，通过防火墙严格限制 JMX 端口的来源 IP，只允许监控服务器（如 Zabbix Ja va Gateway）和运维网段访问。
• 网络隔离：将 Zabbix Ja va Gateway 的端口（如 10052）和 Tomcat JMX 端口（如 9010）纳入 firewalld 或 iptables 的白名单策略进行管理。
• 管理界面保护：PSI Probe 这类管理工具应仅在内网访问，或启用强密码认证。分配 Tomcat 用户权限时要遵循最小权限原则，谨慎授予 manager-gui 等管理角色。
• 性能与维护：根据应用实际需求合理设置 JVM 参数（如初始堆 -Xms 和最大堆 -Xmx，选择合适的垃圾收集器）。同时，控制应用日志的级别和滚动策略，避免高频的日志滚动操作反过来影响磁盘 I/O 性能。