IBM HA双机光交链路问题导致的oracle数据库exp备份问题

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:     12月份,上地机房进行电源割接,不少光线交换机重启,业务系统、数据库主机也进行了重启,但是由于设备重启顺序不同导致一内容拨测系统数据库出现了异常。     出问题的数据库所在主机是IBM的AIX 6100,数据库版本是11.2.0.4,采用的是HA双机软件管理的热备双机,数据库安排的有exp定时计划任务。
    12月份,上地机房进行电源割接,不少光线交换机重启,业务系统、数据库主机也进行了重启,但是由于设备重启顺序不同导致一内容拨测系统数据库出现了异常。
    出问题的数据库所在主机是IBM的AIX 6100,数据库版本是11.2.0.4,采用的是HA双机软件管理的热备双机,数据库安排的有exp定时计划任务。
    出现的问题是:数据库exp定时备份计划任务出现告警,
    处理过程:
使用ps -ef|grep exp发现后台有3个exp相关的.sh备份进程挂起;
查看备份目录发现有3天前的备份文件和备份日志,但是备份文件是4096字节,而备份日志是0字节;
首先杀死3个相关的exp备份进程,删除失败的备份日志和备份文件,重新发起exp备份,发现备份卡在登录sqlplus 2个小时候自动断开,而备份文件还是4096字节,备份日志是0字节;
从服务器端登录sqlplus,select username from dba_users;能查询到数据库相关用户,select file_name,tablespace_name from dba_data_files;却一直卡主没有输出结果;
退出sqlplus切换到root用户lsvg能输出相关vg信息,lsvg -p rootvg显示rootvg相关的2个pv卷信息,但是lsvg -p vg_oravg却是卡主没有输出;
经AIX主机工程师查看并与系统管理员沟通判断是电源切割引起光交链路发生改变,而AIX主机不识别链路导致的;
尝试使用root 通过smit hacmp将服务切换到备机解决链路不识别问题,发现HA切换失败;
接下来重启HA相关的2个主机,重启完成后lsvg -p vg_oravg有正常输出,登录数据库查询数据文件正常,重新发起exp备份4分钟完成;
到此故障解决。
        
相关实践学习
日志服务之数据清洗与入湖
本教程介绍如何使用日志服务接入NGINX模拟数据,通过数据加工对数据进行清洗并归档至OSS中进行存储。
目录
相关文章
|
16天前
|
存储 SQL 关系型数据库
|
2月前
|
SQL 存储 监控
关系型数据库做好备份
【5月更文挑战第4天】关系型数据库做好备份
49 6
关系型数据库做好备份
|
2月前
|
存储 SQL 数据库
关系型数据库物理备份
【5月更文挑战第1天】物理备份是一种快速、直接的数据库备份方式,适用于需要快速恢复的场景。但是,在选择备份方法时,应该根据具体的需求和场景来权衡物理备份和逻辑备份的优缺点。
50 4
关系型数据库物理备份
|
2月前
|
存储 NoSQL 关系型数据库
Percona XtraBackup是否支持MongoDB数据库备份?
【5月更文挑战第13天】Percona XtraBackup是否支持MongoDB数据库备份?
135 1
|
13天前
|
存储 SQL 监控
关系型数据库备份与恢复基础
【7月更文挑战第1天】
19 2
|
18天前
|
关系型数据库 MySQL 数据库
MySQL mysqldump教程:轻松备份与迁移数据库
MySQL mysqldump教程:轻松备份与迁移数据库
|
9天前
|
SQL 关系型数据库 MySQL
Navicate,数据库,Mysql,改表,4月29日Finished - Unsuccessfully,导出数据不妨,右键,备份一下Mysql数据库的内容,你想导入和导出数据不如,用查询的方式去做
Navicate,数据库,Mysql,改表,4月29日Finished - Unsuccessfully,导出数据不妨,右键,备份一下Mysql数据库的内容,你想导入和导出数据不如,用查询的方式去做
|
1月前
|
存储 运维 关系型数据库
|
1月前
|
存储 安全 Linux
使用 `db_dump` 命令备份 Berkeley DB 数据库
`db_dump` 是 Linux 中用于备份 Berkeley DB 数据库的工具,它将数据库内容转储到输出或文件。
|
16天前
|
数据库
宝塔如何备份数据库
宝塔如何备份数据库

推荐镜像

更多