【开源】.net 分布式架构之监控平台

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: net 分布式集群监控平台,用于集群的性能监控,应用耗时监控管理,统一日志管理等多维度的性能监控分析。

开源地址: http://git.oschina.net/chejiangyi/Dyd.BaseService.Monitor

.net 简单监控平台,用于集群的性能监控,应用耗时监控管理,统一日志管理等多维度的性能监控分析。

集群的性能监控:(需要服务器部署监控节点)

  1. 目前仅支持windows服务器监控,
  2. 支持windows自带的性能分析器所有配置项监控,及预警的定制。
  3. 支持自定义的插件扩展服务器采集dll进行各类性能采集及预警的定制。
  4. 支持性能采集快照。
  5. 支持cpu,内存,磁盘读写,网络上传下载,iis请求这些基础的服务器性能图展示。

应用耗时监控管理:(需要应用在api和sql层嵌入sdk进行拦截)

  1. 支持sql的耗时(均值,最大值,最小值,查询次数)性能分析及性能图展示。
  2. 支持api接口的耗时(均值,最大值,最小值,查询次数)性能分析及性能图展示。
  3. 支持api与api内部sql的对照参照分析。
  4. 问题sql:未进行参数化sql的分析列表。

统一日志管理:(需要应用集成sdk)

  1. 整个平台的错误日志集中管理及预警邮件发送。
  2. 整个平台的普通日志集中管理。

监控平台任务:(需要将"任务"挂载在"任务调度平台"开源项目, .net 任务调度平台)

  1. 统计SQLHASH和URL的对照
  2. 统计服务器监控信息
  3. 自动创表
  4. 统计SQLHASH对照和SQL执行次数
  5. SQL性能监控统计
  6. API性能监控统计
  7. 耗时性能预警任务
  8. 错误频率预警任务
  9. 错误邮件发送任务
    10.集群性能预警任务

备注:
每个公司都有特定的平台统一监控的需求及改进方案,所以开源的监控平台只是一种参考,并不适用于不同行业不同的项目。
希望此开源项目能带来更多思路,成为同类优秀项目的起点。另外项目文档及安装资料目前未整理全面,后续完善。

(项目允许用于第三方公司进行二次开发且在公司内部使用,但禁止以盈利为目的进行商业行为)

未来构想:

  1. 底层采用nosql等其他存储进行大容量数据采集及分析。

备注:

  1. 监控平台安装说明里面的文件是内部打包的文件,里面的xxf和开源的xxf是不一样的。若遇到xxf命名空间问题,请在编译的时候使用"引用"文件夹下面的xxf,那个xxf是为监控平台定制的阉割分离后的xxf。
  2. 监控平台登录集成了内部的crm权限系统,所以第三方使用者需修改web站点的登录代码。

开源相关群: .net 开源基础服务 238543768

有图有真相:

image
image
image
image
image
image

文章转载自 开源中国社区[https://www.oschina.net]

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
20天前
|
存储 算法 安全
.NET 平台 SM2 国密算法 License 证书生成深度解析
授权证书文件的后缀通常取决于其编码格式和具体用途。本文档通过一个示例程序展示了如何在 .NET 平台上使用国密 SM2 算法生成和验证许可证(License)文件。该示例不仅详细演示了 SM2 国密算法的实际应用场景,还提供了关于如何高效处理大规模许可证文件生成任务的技术参考。通过对不同并发策略的性能测试,开发者可以更好地理解如何优化许可证生成流程,以满足高并发和大数据量的需求。 希望这段描述更清晰地传达了程序的功能和技术亮点。
92 13
.NET 平台 SM2 国密算法 License 证书生成深度解析
|
1月前
|
SQL 消息中间件 Kafka
Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
本文介绍了阿里云实时数仓Hologres负责人姜伟华在Flink Forward Asia 2024上的分享,涵盖实时数仓的发展历程、从实时数仓到实时湖仓的演进,以及总结。文章通过三代实时数仓架构的演变,详细解析了Lambda架构、Kafka实时数仓分层+OLAP、Hologres实时数仓分层复用等方案,并探讨了未来从实时数仓到实时湖仓的演进方向。最后,结合实际案例和Demo展示了Hologres + Flink + Paimon在实时湖仓中的应用,帮助用户根据业务需求选择合适的方案。
537 20
Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
|
12天前
|
SQL 消息中间件 Serverless
​Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
​Flink+Paimon+Hologres,面向未来的一体化实时湖仓平台架构设计
|
24天前
|
Java 调度 Maven
新一代 Cron-Job 分布式任务调度平台 正式发布!
简单易用、超低延迟,支持用户权限管理、多语言客户端和多租户接入的分布式任务调度平台。 支持任何Cron表达式的任务调度,支持常用的分片和随机策略;支持失败丢弃、失败重试的失败策略;支持动态任务参数。
112 12
|
23天前
|
Java 关系型数据库 MySQL
新一代 Cron-Job分布式任务调度平台 部署指南
简单易用、超低延迟,支持用户权限管理、多语言客户端和多租户接入的分布式任务调度平台。 支持任何Cron表达式的任务调度,支持常用的分片和随机策略;支持失败丢弃、失败重试的失败策略;支持动态任务参数。
73 11
|
14天前
|
人工智能 自然语言处理 数据中心
D1net阅闻|DeepSeek开源放大招:FlashMLA让H800算力狂飙!曝光低成本秘笈
D1net阅闻|DeepSeek开源放大招:FlashMLA让H800算力狂飙!曝光低成本秘笈
|
2天前
|
人工智能 运维 监控
领先AI企业经验谈:探究AI分布式推理网络架构实践
当前,AI行业正处于快速发展的关键时期。继DeepSeek大放异彩之后,又一款备受瞩目的AI智能体产品Manus横空出世。Manus具备独立思考、规划和执行复杂任务的能力,其多智能体架构能够自主调用工具。在GAIA基准测试中,Manus的性能超越了OpenAI同层次的大模型,展现出卓越的技术实力。
|
1月前
|
存储 SQL 监控
转转平台IM系统架构设计与实践(二):详细设计与实现
以转转IM架构为起点,介绍IM相关组件以及组件间的关系;以IM登陆和发消息的数据流转为跑道,介绍IM静态数据结构、登陆和发消息时的动态数据变化;以IM常见问题为风景,介绍保证IM实时性、可靠性、一致性的一般方案;以高可用、高并发为终点,介绍保证IM系统稳定及性能的小技巧。
34 6
|
11天前
|
测试技术 调度
新一代 Cron-Job分布式调度平台,v1.0.5版本发布!
增加标签路由能力和多项功能优化!其中Tag标签路由的功能,测试环境多迭代场景下,可通过给任务配置Tag标签,实现任务路由到不同的执行器上。
18 0
|
3月前
|
弹性计算 API 持续交付
后端服务架构的微服务化转型
本文旨在探讨后端服务从单体架构向微服务架构转型的过程,分析微服务架构的优势和面临的挑战。文章首先介绍单体架构的局限性,然后详细阐述微服务架构的核心概念及其在现代软件开发中的应用。通过对比两种架构,指出微服务化转型的必要性和实施策略。最后,讨论了微服务架构实施过程中可能遇到的问题及解决方案。

热门文章

最新文章