42 篇博文 含有标签「practice」

使用 HertzBeat 对 线程池框架 DynamicTp 进行监控实践，5分钟搞定​

线程池框架 DynamicTp 介绍​

DynamicTp 是Jvm语言的基于配置中心的轻量级动态线程池，内置监控告警功能，可通过SPI自定义扩展实现。

• 支持对运行中线程池参数的动态修改，实时生效。
• 实时监控线程池的运行状态，触发设置的报警策略时报警，报警信息推送办公平台。
• 定时采集线程池指标数据，配合像 grafana 这种可视化监控平台做大盘监控。

HertzBeat 介绍​

HertzBeat 是一款开源，易用友好的实时监控工具，无需Agent，拥有强大自定义监控能力。

• 支持对应用服务，数据库，操作系统，中间件，云原生等监控，阈值告警，告警通知(邮件微信钉钉飞书短信 Slack Discord Telegram)。
• 其将Http, Jmx, Ssh, Snmp, Jdbc, Prometheus等协议规范可配置化，只需配置YML就能使用这些协议去自定义采集任何您想要采集的指标。您相信只需配置YML就能立刻适配一个K8s或Docker等新的监控类型吗？
• HertzBeat 的强大自定义，多类型支持，易扩展，低耦合，希望能帮助开发者和中小团队快速搭建自有监控系统。

在 HertzBeat 5分钟搞定监控 DynamicTp​

操作前提，您已拥有 DynamicTp 环境和 HertzBeat 环境​

• DynamicTp 集成接入文档
• HertzBeat 部署安装文档

一. 在 DynamicTp 端暴露出DynamicTp指标接口 /actuator/dynamic-tp，它将提供 metrics 接口数据​

1. 开启 SpringBoot Actuator Endpoint 暴露出DynamicTp指标接口

   management:
     endpoints:
       web:
         exposure:
           include: '*'
   

2. 重启后测试访问指标接口 ip:port/actuator/dynamic-tp 是否有响应json数据如下:

   [
     {
       "poolName": "commonExecutor",
       "corePoolSize": 1,
       "maximumPoolSize": 1,
       "queueType": "LinkedBlockingQueue",
       "queueCapacity": 2147483647,
       "queueSize": 0,
       "fair": false,
       "queueRemainingCapacity": 2147483647,
       "activeCount": 0,
       "taskCount": 0,
       "completedTaskCount": 0,
       "largestPoolSize": 0,
       "poolSize": 0,
       "waitTaskCount": 0,
       "rejectCount": 0,
       "rejectHandlerName": null,
       "dynamic": false,
       "runTimeoutCount": 0,
       "queueTimeoutCount": 0
     },
     {
       "maxMemory": "4 GB",
       "totalMemory": "444 MB",
       "freeMemory": "250.34 MB",
       "usableMemory": "3.81 GB"
     }
   ]
   

二. 在 HertzBeat 监控页面添加 DynamicTp 线程池监控​

1. 点击新增 DynamicTp 监控

   路径：菜单 -> 中间件监控 -> DynamicTp监控 -> 新增DynamicTp监控

   

2. 配置监控 DynamicTp 所需参数

   在监控页面填写 DynamicTp 服务IP，监控端口(默认8080)，最后点击确定添加即可。 其他参数如采集间隔，超时时间等可以参考帮助文档 https://hertzbeat.apache.org/docs/help/dynamic_tp/

   

3. 完成✅,现在我们已经添加好对 DynamicTp 的监控了，查看监控列表即可看到我们的添加项。

   

4. 点击监控列表项的操作->监控详情图标 即可浏览 DynamicTp线程池 的实时监控指标数据。

   

5. 点击监控历史详情TAB 即可浏览 DynamicTp线程池 的历史监控指标数据图表📈。

   

   

DONE！完成啦！通过上面几步，总结起来其实也就只用两步

• 第一步暴露 DynamicTp 端metrics端点/actuator/dynamic-tp
• 第二步在 HertzBeat 监控页面配置IP端口添加监控即可

接下来我们就来一步一步演示如何配置 HertzBeat 系统里的阈值告警通知，让 DynamicTp线程池 的指标异常时，及时通知给我们

三. 在 HertzBeat 系统添加 DynamicTp线程池 指标阈值告警​

1. 对某个重要指标配置告警阈值

   路径：菜单 -> 告警阈值 -> 新增阈值

   • 选择配置的指标对象，DynamicTp监控主要是一些线程池相关指标，我们举例对 运行超时线程数量 thread_pool_running -> run_timeout_count 这个指标进行阈值设置， 当线程运行超时数量大于1时发出告警。
   • 这里我们就配置当此指标thread_pool_running 的 run_timeout_count>1 时发出告警，告警级别为严重告警，三次即触发，具体如下图。

   

2. 新增消息通知接收人

   配置接收人，让告警消息知道要发给谁，用什么方式发。

   路径：菜单 -> 告警通知 -> 告警接收人 -> 新增接收人

   消息通知方式支持 邮件，钉钉，企业微信，飞书，WebHook，短信等，我们这里以常用的钉钉为例。

   • 参照此帮助文档 https://hertzbeat.apache.org/docs/help/alert_dingtalk 在钉钉端配置机器人，设置安全自定义关键词HertzBeat，获取对应access_token值。
   • 在 HertzBeat 配置接收人参数如下。

   【告警通知】->【新增接收人】 ->【选择钉钉机器人通知方式】->【设置钉钉机器人ACCESS_TOKEN】-> 【确定】

   

3. 配置关联的告警通知策略⚠️ 【新增通知策略】-> 【将刚设置的接收人关联】-> 【确定】

   配置告警通知策略，让告警消息与接收人绑定，这样就能决定哪些告警发给哪个人。

   

完毕，现在坐等告警消息过来啦。叮叮叮叮​

[HertzBeat告警通知]
告警目标对象 : dynamic_tp.thread_pool_running.run_timeout_count
所属监控任务ID : 205540620349493
所属任务名称 : DynamicTp_localhost
告警级别 : 严重告警
告警触发时间 : 2023-02-02 22:17:06
内容详情 : DynamicTp has run timeout thread, count is 2

小结​

DynamicTp Github: https://github.com/dromara/dynamic-tp HertzBeat Github: https://github.com/apache/hertzbeat

欢迎了解使用Star支持哦！

只需要一条docker命令即可安装体验heartbeat ： docker run -d -p 1157:1157 --name hertzbeat apache/hertzbeat