《云上大型赛事保障白皮书》——第三章 压测调优与技术演练——3.2 云上大型赛事技术演练——3.2.2 容灾演练及冬奥实践(下)

本文涉及的产品
性能测试 PTS,5000VUM额度
简介: 《云上大型赛事保障白皮书》——第三章 压测调优与技术演练——3.2 云上大型赛事技术演练——3.2.2 容灾演练及冬奥实践(下)

《云上大型赛事保障白皮书》——第三章 压测调优与技术演练——3.2 云上大型赛事技术演练——3.2.2 容灾演练及冬奥实践(上): https://developer.aliyun.com/article/1226503?groupCode=supportservice



规划演练方案:

为保证本次演练顺利进行,我们从多个维度进行充分准备工作。

组织维度:我们确定了阿里云支持侧/产研侧核心人员名单,演练期间全程会议。

业务维度:明确参与演练的核心信息系统架构,向相关开发商作演练说明,向开发商提前准备好临时权限,避免因无权限发生的演练延误。

演练方案流程如下表所述。

1684916142188.png


实施演练过程:

演练从19:00开始,至21:50结束,得益于前期的充分准备和演练过程中各位同学的及时支持,各产品切换和回切均比较顺利,各系统切换和验证工作基本符合预期。整体演练比原定演练计划提前3小时结束。

解决演练问题:

演练过程中发现政务云上有部分产品管控异常(不影响演练本身),均已明确原因并排期修复。针对客户侧问题也总结整理并提供建议,请客户侧做了优化。

客户侧问题如下:

HMS SLB只挂载了单个PDC区域的ECS,没有挂在SDC的ECS。

HMS,FBS,TMS,Info1AV没有设置开机服务自启动,导致服务无法自动启动。

FBS系统没有设置自动mount /dev/vdb1 /Data,导致服务无法自动启动。

发现HMS的三个SLB的健康检查状态异常,原因是由于异常的ECS内部还没有部署业务的服务。

阿里侧问题如下:

RDS的备份Button不可用,后联系RDS产研修复。

部分ECS的可用区的控制台显示异常,不能区分具体可用区,后联系ECS产研修复。

最终,通过两次的容灾演练,我们验证了阿里云组件切换功能正常,保证了系统的整体稳定性。

相关实践学习
通过性能测试PTS对云服务器ECS进行规格选择与性能压测
本文为您介绍如何利用性能测试PTS对云服务器ECS进行规格选择与性能压测。
相关文章
|
4月前
|
SQL 搜索推荐 测试技术
【Havenask实践篇】完整的性能测试
Havenask是阿里巴巴智能引擎事业部自研的开源高性能搜索引擎,深度支持了包括淘宝、天猫、菜鸟、高德、饿了么在内几乎整个阿里的搜索业务。性能测试的目的在于评估搜索引擎在各种负载和条件下的响应速度、稳定性。通过模拟不同的用户行为和查询模式,我们可以揭示潜在的瓶颈、优化索引策略、调整系统配置,并确保Havenask在用户数量激增或数据量剧增时仍能保持稳定运行。本文举例对Havenask进行召回性能测试的一个简单场景,在搭建好Havenask服务并写入数据后,使用wrk对Havenask进行压测,查看QPS和查询耗时等性能指标。
65805 6
|
4月前
|
JavaScript 前端开发 算法
性能测试与调优
性能测试与调优
76 0
|
负载均衡 测试技术 应用服务中间件
性能测试常见瓶颈分析及调优方法总结
性能测试常见瓶颈分析及调优方法总结
324 0
|
14天前
|
缓存 Java 测试技术
谷粒商城笔记+踩坑(11)——性能压测和调优,JMeter压力测试+jvisualvm监控性能+资源动静分离+修改堆内存
使用JMeter对项目各个接口进行压力测试,并对前端进行动静分离优化,优化三级分类查询接口的性能
谷粒商城笔记+踩坑(11)——性能压测和调优,JMeter压力测试+jvisualvm监控性能+资源动静分离+修改堆内存
|
4月前
|
消息中间件 Java 测试技术
性能工具之Jmeter扩展函数及压测ActiveMQ实践
【5月更文挑战第18天】性能工具之Jmeter扩展函数及压测ActiveMQ实践
89 5
|
1月前
|
监控 Java 测试技术
实战派必看!Python性能测试中,JMeter与Locust如何助力性能调优
【8月更文挑战第6天】性能优化是软件开发的关键。本文介绍JMeter与Locust两款流行性能测试工具,演示如何用于Python应用的性能调优。JMeter可模拟大量用户并发访问,支持多种协议;Locust用Python编写,易于定制用户行为并模拟高并发。根据场景选择合适工具,确保应用在高负载下的稳定运行。
89 4
|
3月前
|
监控 Java 测试技术
Java性能测试与调优工具使用指南
Java性能测试与调优工具使用指南
|
3月前
|
存储 测试技术
【工作实践(多线程)】十个线程任务生成720w测试数据对系统进行性能测试
【工作实践(多线程)】十个线程任务生成720w测试数据对系统进行性能测试
45 0
【工作实践(多线程)】十个线程任务生成720w测试数据对系统进行性能测试
|
3月前
|
缓存 Java 测试技术
Spring Boot中的性能测试与调优
Spring Boot中的性能测试与调优
|
存储 监控 安全
深聊性能测试,从入门到放弃之:如何对IO进行性能调优
深聊性能测试,从入门到放弃之:如何对IO进行性能调优
242 0