如何利用阿里巴巴 Sentinel、InfluxDB 和 Chronograf 构建高效监控大屏?
- 内容介绍
- 文章标签
- 相关推荐
本文共计1438个文字,预计阅读时间需要6分钟。
前言:在上文中,我们使用时序数据库InfluxDB进行了流控制数据存储,但数据存储并非最终目标,分析、监控和预警才是我们的终极目标。那么,如何更好地实现呢?我们可以使用阿里巴巴开源的巴巴巴巴+Sentinel。
巴巴巴巴(Apache Druid)是一个高性能、可扩展的实时数据流分析系统。它能够实时处理和分析大量数据,非常适合用于数据分析和监控。
Sentinel是阿里巴巴开源的一个易于使用的高可用系统保障组件,它提供流量控制、熔断降级和系统负载保护等功能。
结合巴巴巴巴和Sentinel,我们可以实现以下功能:
1. 使用巴巴巴巴实时处理和分析流控制数据,实现实时监控。
2.通过Sentinel实现流量控制、熔断降级和系统负载保护,确保系统稳定运行。
具体实现步骤如下:
1. 部署巴巴巴巴集群,配置好数据源。
2.将流控制数据通过巴巴巴巴的数据源接入,实现实时数据存储和分析。
3.在巴巴巴巴中创建实时分析任务,对数据进行实时监控和分析。
4.将巴巴巴巴分析结果接入Sentinel,实现流量控制、熔断降级和系统负载保护。
5.根据分析结果,对系统进行预警和优化。
通过巴巴巴巴+Sentinel的解决方案,我们可以更好地实现流控制数据的分析和监控,提高系统的稳定性和可用性。
前言
在上一篇推文中,我们使用时序数据库 InfluxDb 做了流控数据存储,但是数据存储不是目的,分析监控预警才是最终目标,那么问题来了,如何更好的实现呢?用过阿里巴巴 Sentinel 控制台的小伙伴,是不是觉得它的控制台丑爆了,而且只有短短的五厘米,显然不能满足大部分人或者场景的使用。
架构
工具
- sentinel-dashboard(控制台,收集数据)
- Influxdb(时序数据库,存储数据)
- Chronograf (展示控制台,显示数据并实现预警)
安装
Sentinel 控制台 和 时序数据库 Influxdb 的安装方式前面已经聊过,这里不再赘述,简单说下 Chronograf 展示控制台的安装方式,这里推荐使用 Docker 安装方式。
$ docker run -p 8888:8888 \ -v $PWD:/var/lib/chronograf \ chronograf
安装成功以后,浏览器访问 ip:8888 你应该看到一个欢迎页面:
然后,自行配置数据源,根据业务场景组装监控大屏。
大屏
这里根据 Sentinel 限流组件采集的数据,组装了一个简单的监控大屏,可以监控历史访问总量、最近一小时的访问量、限流数以及最近几分钟或者几小时的访问曲线等等,相比于阿里演示版是不是瞬间高大上的些许。
总访问量
SELECT SUM("successQps") AS "总访问量" FROM "sentinel_log"."autogen"."sentinelInfo"
最近一小时访问量
SELECT SUM("successQps") AS "访问量" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE TIME > NOW() - 1h
最近一小时限流数
SELECT SUM("blockQps") AS "限流数" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 1h
最近一小时异常数
SELECT SUM("exceptionQps") AS "异常数" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 1h
最近一小时的访问趋势图(秒级别)
SELECT SUM("successQps") AS "访问量" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 1h GROUP BY time(1s)
最近12小时资源访问排名
SELECT SUM("successQps") AS "成功qps", SUM("blockQps") AS "限流qps" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 12h GROUP BY resource
预警
后期我们在 Chronograf 中接入 Kapacitor ,Chronograf会自动打开该Configure Alert Endpoints部分,Kapacitor支持多个警报端点/事件处理程序。有兴趣的小伙伴也可以在 Sentinel 控制台中根据流控数据进行更智能化的设置,比如根据限流失败数以及机器指标动态调整流控规则。
小结
有了她,小哥哥、小姐姐们再也不用担心凌晨一点的闹钟了,是不是很爽?以上只是冰山一角,目前我们上线的监控系统平台,通过各种第三方组件库(Telegraf、InfluxDB、Chronograf、Kapacitor、Grafana、Prometheus、Consul、Elasticsearch、Kibana),接入了 1000 台服务器实时监控,200个监控大屏,上千个监控指标,每日处理成吨的数据。是不是很吊!?我唧唧都佩服我自己的想象力。
源码
gitee.com/52itstyle/sentinel-dashboard
参考
hub.docker.com/_/chronograf
总结
以上所述是小编给大家介绍的阿里巴巴 Sentinel + InfluxDB + Chronograf 实现监控大屏,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对自由互联网站的支持!
如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!
本文共计1438个文字,预计阅读时间需要6分钟。
前言:在上文中,我们使用时序数据库InfluxDB进行了流控制数据存储,但数据存储并非最终目标,分析、监控和预警才是我们的终极目标。那么,如何更好地实现呢?我们可以使用阿里巴巴开源的巴巴巴巴+Sentinel。
巴巴巴巴(Apache Druid)是一个高性能、可扩展的实时数据流分析系统。它能够实时处理和分析大量数据,非常适合用于数据分析和监控。
Sentinel是阿里巴巴开源的一个易于使用的高可用系统保障组件,它提供流量控制、熔断降级和系统负载保护等功能。
结合巴巴巴巴和Sentinel,我们可以实现以下功能:
1. 使用巴巴巴巴实时处理和分析流控制数据,实现实时监控。
2.通过Sentinel实现流量控制、熔断降级和系统负载保护,确保系统稳定运行。
具体实现步骤如下:
1. 部署巴巴巴巴集群,配置好数据源。
2.将流控制数据通过巴巴巴巴的数据源接入,实现实时数据存储和分析。
3.在巴巴巴巴中创建实时分析任务,对数据进行实时监控和分析。
4.将巴巴巴巴分析结果接入Sentinel,实现流量控制、熔断降级和系统负载保护。
5.根据分析结果,对系统进行预警和优化。
通过巴巴巴巴+Sentinel的解决方案,我们可以更好地实现流控制数据的分析和监控,提高系统的稳定性和可用性。
前言
在上一篇推文中,我们使用时序数据库 InfluxDb 做了流控数据存储,但是数据存储不是目的,分析监控预警才是最终目标,那么问题来了,如何更好的实现呢?用过阿里巴巴 Sentinel 控制台的小伙伴,是不是觉得它的控制台丑爆了,而且只有短短的五厘米,显然不能满足大部分人或者场景的使用。
架构
工具
- sentinel-dashboard(控制台,收集数据)
- Influxdb(时序数据库,存储数据)
- Chronograf (展示控制台,显示数据并实现预警)
安装
Sentinel 控制台 和 时序数据库 Influxdb 的安装方式前面已经聊过,这里不再赘述,简单说下 Chronograf 展示控制台的安装方式,这里推荐使用 Docker 安装方式。
$ docker run -p 8888:8888 \ -v $PWD:/var/lib/chronograf \ chronograf
安装成功以后,浏览器访问 ip:8888 你应该看到一个欢迎页面:
然后,自行配置数据源,根据业务场景组装监控大屏。
大屏
这里根据 Sentinel 限流组件采集的数据,组装了一个简单的监控大屏,可以监控历史访问总量、最近一小时的访问量、限流数以及最近几分钟或者几小时的访问曲线等等,相比于阿里演示版是不是瞬间高大上的些许。
总访问量
SELECT SUM("successQps") AS "总访问量" FROM "sentinel_log"."autogen"."sentinelInfo"
最近一小时访问量
SELECT SUM("successQps") AS "访问量" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE TIME > NOW() - 1h
最近一小时限流数
SELECT SUM("blockQps") AS "限流数" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 1h
最近一小时异常数
SELECT SUM("exceptionQps") AS "异常数" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 1h
最近一小时的访问趋势图(秒级别)
SELECT SUM("successQps") AS "访问量" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 1h GROUP BY time(1s)
最近12小时资源访问排名
SELECT SUM("successQps") AS "成功qps", SUM("blockQps") AS "限流qps" FROM "sentinel_log"."autogen"."sentinelInfo" WHERE time > now() - 12h GROUP BY resource
预警
后期我们在 Chronograf 中接入 Kapacitor ,Chronograf会自动打开该Configure Alert Endpoints部分,Kapacitor支持多个警报端点/事件处理程序。有兴趣的小伙伴也可以在 Sentinel 控制台中根据流控数据进行更智能化的设置,比如根据限流失败数以及机器指标动态调整流控规则。
小结
有了她,小哥哥、小姐姐们再也不用担心凌晨一点的闹钟了,是不是很爽?以上只是冰山一角,目前我们上线的监控系统平台,通过各种第三方组件库(Telegraf、InfluxDB、Chronograf、Kapacitor、Grafana、Prometheus、Consul、Elasticsearch、Kibana),接入了 1000 台服务器实时监控,200个监控大屏,上千个监控指标,每日处理成吨的数据。是不是很吊!?我唧唧都佩服我自己的想象力。
源码
gitee.com/52itstyle/sentinel-dashboard
参考
hub.docker.com/_/chronograf
总结
以上所述是小编给大家介绍的阿里巴巴 Sentinel + InfluxDB + Chronograf 实现监控大屏,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对自由互联网站的支持!
如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!

