重磅|阿里云支持上交所新交易监管系统上线运行

本文涉及的产品
RDSClaw,2核4GB
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
PolarClaw,2核4GB
简介: 阿里云提供技术支持的上海证券交易所新交易监管系统已正式上线运行

近期,阿里云提供技术支持的上海证券交易所(下称“上交所”)新交易监管系统已正式上线运行。新系统部署在上交所私有云上,其交易数据实时处理能力扩展达50万笔/秒以上,总体消息处理能力可达每秒千万级,计算时延大幅降低,能够应对未来业务持续增长的交易量和复杂性需求。

image.png

新系统基于阿里云全实时计算分析引擎组合Flink+Hologres和云原生数据仓库AnalyticDB的核心技术私有化部署,自主研发设计,完成实时数据处理、计算和存储架构的重构升级,全面提升了系统的处理性能和综合分析能力,并重点考虑了数据处理时效性和数据分析敏捷性的要求。


01 实时数据的全面分析能力


系统消息队列中的大规模数据接入实时计算Flink后,关联实时存储Hologres中的数据快速处理,结果实时输出至Kafka或直接入库Hologres,并经入库程序统一将实时数据汇聚写入AnalyticDB,支撑实时分析查询应用。满足了在稳定和性能双保障基础上的多样化数据分析需求。


02 实时预警的敏捷处理能力


作为预警规则的一种实现方式,Flink可以满足实时和秒级监管需求。对于复杂实时预警规则,Flink实时关联维度指标提升预警规则计算实时性。


从新架构落地来看,上交所新交易监管系统交易数据实时处理能力扩展达50万笔/秒以上(上线首日交易数据处理峰值达15.4万笔/秒),总体消息处理能力可达每秒千万级,计算时延大幅降低;功能上,紧密结合监管最新实践,更加敏捷和丰富的支持完善监管模型,科技赋能推动监管能力得到进一步提升。


阿里云实时计算是基于Apache Flink构建的一站式、高性能实时大数据处理引擎平台,广泛适用于流式数据处理、离线数据处理等多种场景。相对开源Flink,阿里云实时计算Flink商业化产品的多项创新技术与性能和功能稳定性优化很好的满足了上交所新交易监管系统的需求。具体优势如下:


  • 阿里云实时计算Flink的关键性能指标比开源Flink优化提升了3到4倍。数据计算延迟优化到秒级甚至毫秒级。
  • 阿里云实时计算Flink天然集成数据存储、数据开发、数据运维、监控报警等功能,方便客户以较小成本试用,管理和迁移流式计算。同时,实时计算提供完全租户隔离的托管运行服务。从最上层工作空间,到最底层执行机器,提供高度有效的隔离和全面防护,更加符合证券行业场景特点。
  • Hologres实时数仓专注实时分析场景,与Flink原生集成,支持数据高性能实时写入、实时更新,写入即可见,一套系统和一套数据模型,同时支撑了预警规则所需的高性能点查和业务洞察需要的OLAP分析。


阿里云自研云原生数据仓库AnalyticDB提供了高性能、高可靠、高稳定性的PB级数据仓库解决方案。上交所新交易监管系统采用AnalyticDB作为数据底座并完成新老系统平滑迁移。AnalyticDB接收实时数据流,利用其高性能写入和深入分析查询能力,满足了业务应用数据实时存储及查询分析等需求。


AnalyticDB在多项功能和性能上的提升,满足了上交所新交易监管系统的需求:


  • MPP全并行架构实现处理性能可扩展。通过水平扩展多Master节点(协调节点)、扩展Segment节点(计算节点)的并行计算能力,系统整体能力尤其是数据安全性、时效性以及读写性能得到进一步提升,更好地满足系统对高并发数据写入的需求,业务数据入库和混合业务处理性能提升数倍以上。
  • 支持分布式事务,数据ACID一致性支持。所有节点跨机器冗余部署,数据多副本存储,任意硬件故障,自动化监控切换,保持服务在线,保证数据一致性、完整性和准确性。
  • 广泛兼容PostgreSQL/Oracle的语法生态,支持PL/SQL存储过程,提供多种SQL优化器和详尽的执行计划,降低调优复杂度,提升迁移效率,降低迁移复杂度。
  • 提供稳定、高性能、高可靠的PB级数据存储分析,支持大批量实时成交数据高性能导入云原生数据仓库AnalyticDB,加速不同级别业务数据集中存储分析,实现业务数据共享,业务数据价值最大化。


阿里云将利用在大数据、数据库和云原生方面的技术持续加强数据治理和数据应用的能力,促进科技与金融业务深度融合,服务金融市场平稳健康发展。


相关实践学习
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
Kubernetes Java Nacos
nacos常见问题之通过helm方式部署设置开启授权认证功能如何解决
Nacos是阿里云开源的服务发现和配置管理平台,用于构建动态微服务应用架构;本汇总针对Nacos在实际应用中用户常遇到的问题进行了归纳和解答,旨在帮助开发者和运维人员高效解决使用Nacos时的各类疑难杂症。
1250 0
|
7月前
|
存储 机器学习/深度学习 算法
​​LLM推理效率的范式转移:FlashAttention与PagedAttention正在重塑AI部署的未来​
本文深度解析FlashAttention与PagedAttention两大LLM推理优化技术:前者通过分块计算提升注意力效率,后者借助分页管理降低KV Cache内存开销。二者分别从计算与内存维度突破性能瓶颈,显著提升大模型推理速度与吞吐量,是当前高效LLM系统的核心基石。建议收藏细读。
1466 125
|
Kubernetes 物联网 数据中心
大规模 IoT 边缘容器集群管理的几种架构 -2-HashiCorp 解决方案 Nomad
大规模 IoT 边缘容器集群管理的几种架构 -2-HashiCorp 解决方案 Nomad
|
消息中间件 存储 监控
ActiveMQ、RocketMQ、RabbitMQ、Kafka 的区别
【10月更文挑战第24天】ActiveMQ、RocketMQ、RabbitMQ 和 Kafka 都有各自的特点和优势,在不同的应用场景中发挥着重要作用。在选择消息队列时,需要根据具体的需求、性能要求、扩展性要求等因素进行综合考虑,选择最适合的消息队列技术。同时,随着技术的不断发展和演进,这些消息队列也在不断地更新和完善,以适应不断变化的应用需求。
1080 1
|
机器学习/深度学习 分布式计算 供应链
Hadoop在特定行业中的应用实例
【8月更文第28天】Hadoop是一个强大的分布式计算框架,能够处理大规模数据集。由于其高可扩展性和成本效益,Hadoop被广泛应用于多个行业中,如金融、医疗保健和零售等。本文将探讨Hadoop在这些行业的具体应用场景和一些成功案例。
695 0
|
网络协议 测试技术 网络安全
Python进行Socket接口测试的实现
在现代软件开发中,网络通信是不可或缺的一部分。无论是传输数据、获取信息还是实现实时通讯,都离不开可靠的网络连接和有效的数据交换机制。而在网络编程的基础中,Socket(套接字)技术扮演了重要角色。 Socket 允许计算机上的程序通过网络进行通信,它是网络通信的基础。Python 提供了强大且易于使用的 socket 模块,使开发者能够轻松地创建客户端和服务器应用,实现数据传输和交互。 本文将深入探讨如何利用 Python 编程语言来进行 Socket 接口测试。我们将从基础概念开始介绍,逐步引导大家掌握创建、测试和优化 socket 接口的关键技能。希望本文可以给大家的工作带来一些帮助~
|
数据可视化
Visio绘制时间轴、日程安排图、时间进度图的方法
Visio绘制时间轴、日程安排图、时间进度图的方法
986 1
|
监控 Linux 网络安全
Linux服务器如何查询连接服务器的IP
【4月更文挑战第15天】Linux服务器如何查询连接服务器的IP
2160 1
|
存储 SQL 弹性计算
Hologres V2.1版本发布,新增计算组实例构建高可用实时数仓
新增弹性计算组实例,解决实时数仓场景下分析性能、资源隔离、高可用、弹性扩缩容等核心问题,同时新增多种用户分析函数与实时湖仓Paimon格式支持,COUNT DISTINCT优化显著提升查询效率。
|
异构计算 Windows
使用MATLAB连接USRP
使用MATLAB连接USRP
848 2