项目监控标准

在生产项目运行过程中，可能会遭遇各种问题。而一个问题的影响程度与其发现时间密切相关。因此，我梳理并总结了一套生产项目应具备的完整监控标准。

一、监控类型明确

1. ‌timer类监控‌：此类监控包含耗时和计数两种属性，涵盖tp50、tp90、tp99、max以及tps等指标。
2. ‌counter类监控‌：仅具备计数功能的监控类型，主要用于统计tps（每秒事务数）。
3. ‌gauge类监控‌：定时记录数值的监控类型，适用于需要周期性捕捉数据波动的场景。

二、必备监控项

（一）项目出入口监控

1. ‌对外接口监控‌：项目对外提供的http接口、dubbo接口，应配置timer类监控，以精确捕捉接口响应时间及吞吐量。
2. ‌消息消费监控‌：
   • 若消费线程内处理消息，则加timer类监控，以衡量处理耗时。
   • 若不在消费线程内处理，则加counter类监控，仅统计消息消费次数。
3. ‌外部调用监控‌：项目调用的其他项目接口，包括http接口、dubbo接口、redis操作、数据库访问、发送mq等，均需加timer类监控，确保外部调用性能可控。
4. ‌websocket接口监控‌：订阅的websocket接口，接收消息量应加counter类监控，以监控消息接收频率。

（二）项目内存缓存监控

1. ‌无限内存队列‌：队列大小应使用gauge类监控，实时反映队列内存占用情况。
2. ‌无限大小缓存‌：如guava缓存等，同样适用gauge类监控，确保缓存使用情况清晰可见。

（三）业务监控

1. ‌定时任务监控‌：不可中断的定时任务，或有一定间隔时间的任务，应增加执行时间、执行次数及间隔时间的监控，采用timer类监控。
2. ‌重要接口成功率‌：重要接口的成功率应使用counter类监控，确保接口稳定性。

三、可选监控项

1. ‌缓存命中率‌：使用缓存时，可分别加命中和不命中的counter监控，以评估缓存效率。
2. ‌处理流程分支命中率‌：处理流程的分支可分别加命中次数监控，采用counter类监控，优化流程设计。
3. ‌消息消费延迟监控‌：消费mq时，可加消息的消费延迟和处理延迟监控，采用timer类监控，确保消息处理及时性。
4. ‌内置系统监控‌：包括jvm、系统、数据库连接池等内置监控，可根据项目需求选择性配置。

四、不推荐监控项

1. ‌数值差别过大的监控‌：将数值差别过大的监控项放在一起，会导致数值小的数据异常时，在图表上难以体现，影响监控效果。
2. ‌监控数据过多‌：监控数据过多时，图表上会密密麻麻地布满线条，难以分辨个别数据的变化趋势。
3. ‌不必要的细分监控‌：对于不需要细分的监控项，只做一个监控即可。例如，下单接口的耗时监控，无需区分细节参数，避免监控冗余。

2.grafana监控配置标准（以下内容受版本影响较大，仅供参考）

timer类型

如果监控类型是timer，则需要配置avg，tp50，tp90,tp99，tps，在同一个图中，左边y轴为耗时，右边y轴为次数
假设监控的key是GET__api_v1_order则配置如下

// 监控方法耗时的平均值
avg(irate(POST__api_v1_order_seconds_sum[30s])/irate(POST__api_v1_order_seconds_count[30s]))
// tp50,tp90,tp99
max by (quantile)(POST__api_v1_order_seconds)
// 最大值
max(GET__api_v1_order_seconds_max)
// 调用速率，tps
sum(irate(GET__api_v1_order_seconds_count[30s]))

如果是counter类型的监控则只有tps

最终效果图

• 左边y轴是耗时，右边y轴是tps次数，点击下面指标可单独查看
  

具体配置方法

• 平均值和tp50,tp90和tp99配置
  

• 最大值和tps配置
  

• 将tps的值指定到右边Y轴
  

或

• 将左侧Y轴的单位指定为秒，会自动换算成毫秒或其他单位
  

单位选择

• 次数类的单位不用配置
• 时间类的单位在time→second(s)
• 字节类的单位在data→bytes
• 百分比的单位在Msci→percent(0-1)

监控分组

将重要和关键的监控单独分组

3.比较有用的内置函数

4.比较有用的内置监控项:

• 内置监控的key受依赖的监控包版本不同而有所不同，具体key可以在机器上请求监控key查看
• 以下key不一定在所有系统中存在

6.项目接入监控

项目需要提供http接口供普罗米修斯拉取监控数据，需要提供http接口给运维配置到普罗米修斯上
spring boot项目一般引入actuator包，然后配置以下配置提供http接口

spring boot项目如何使用actuator,grafana,普罗米修斯,请参考网上教程