如何将阿里云WiredTiger引擎的MongoDB物理备份文件恢复至自建数据库

本文涉及的产品
云原生多模数据库 Lindorm,多引擎 多规格 0-4节点
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
云数据库 MongoDB,通用型 2核4GB
简介: 数据库操作一直是一个比较敏感的话题,动不动“删库跑路”,可见数据库操作对于一个项目而言是非常重要的,我们有时候会因为一个游戏的严重bug或者运营故障要回档数据库,而你们刚好使用的是阿里云的Mongodb,那么这篇文章将给你提供一个思路(或许你按照阿里云官网的文档一顿操作下来,并不是那么顺利,有一些报错,无法登录...)


       数据库操作一直是一个比较敏感的话题,动不动“删库跑路”,可见数据库操作对于一个项目而言是非常重要的,我们有时候会因为一个游戏的严重bug或者运营故障要回档数据库,而你们刚好使用的是阿里云的Mongodb,那么这篇文章将给你提供一个思路(或许你按照阿里云官网的文档一顿操作下来,并不是那么顺利,有一些报错,无法登录...)

        在恢复数据之前,你要先知道你产线环境使用mongodb服务器的版本是多少,然后本地部署安装对应版本的数据库,以避免版本兼容问题引发的一些异常:

1.数据库版本要求

云数据库MongoDB版实例的版本必须对应自建MongoDB数据库的版本。二者之间的对应关系如下:

MongoDB实例 自建MongoDB数据库
3.2版本 3.2或3.4版本
3.4版本 3.4版本
4.0版本 4.0版本
4.2版本 4.2版本

注意,我建议你使用linux系统来部署对应的mongo版本,这里我以v4.2.23为例

[root@localhost data]# mongod --version
db version v4.2.23
git version: f4e6602d3a4c5b22e9d8bcf0722d0afd0ec01ea2
OpenSSL version: OpenSSL 1.0.1e-fips 11 Feb 2013
allocator: tcmalloc
modules: none
build environment:
    distmod: rhel70
    distarch: x86_64
    target_arch: x86_64

image.gif

2.下载解压物理备份并赋权限  

你的备份文件可以通过阿里云后台来直接下载:

image.gif编辑

点击下载可下载到本地,或者你通过wget+下载链接下载到本地。

然后创建一个mongodb恢复的目录,mkdir /data/mongo

image.gif编辑

将下载的系统备份文件压缩包放到/data/mongo目录下

比如我的压缩包名是hins25976838_data_20230811084111.tar

tar xzvf hins25976838_data_20230811084111.tar

image.gif

image.gif编辑

注意,一般mongo服务器是需要mongod的用户组和用户权限的,所以,如果你是这种情况,建议你使用

chown mongod /data/mongo -R  && chgrp mongod /data/mongo -R && chmod 755 /data/mongo

image.gif

3.以单节点模式恢复MongoDB物理备份的数据

    1. 备份下原来的mongod.conf,重新修改配置文件mongod.conf。
    cp /etc/mongod.conf /etc/mongod.conf.bak
    1. image.gif
    2. vim /etc/mongod.conf打开mongod.conf文件。 根据云数据库MongoDB版的存储引擎选择启动的配置模板,您可以将其复制到mongod.conf文件中。
      说明 配置文件设置了启动模式为单节点模式并开启认证功能
    systemLog:
      destination: file
      logAppend: true
      path: /var/log/mongodb/mongod.log
    # Where and how to store data.
    storage:
      dbPath: /data/mongo
      directoryPerDB: true
    #  engine:
    #  wiredTiger:
    # how the process runs
    processManagement:
      fork: true  # fork and run in background
      pidFilePath: /var/run/mongodb/mongod.pid  # location of pidfile
      timeZoneInfo: /usr/share/zoneinfo
    # network interfaces
    net:
      port: 27017
      #bindIp: 0.0.0.0 #127.0.0.1  # Enter 0.0.0.0,:: to bind to all IPv4 and IPv6 addresses or, alternatively, use the net.bindIpAll setting.
      unixDomainSocket:
            enabled: false
    security:
        authorization: disabled
    1. image.gif说明 云数据库MongoDB默认使用的是WiredTiger存储引擎,并且开启了directoryPerDB选项,因此配置中指定了这个选项,

    security:
               authorization: disabled
    1. image.gif为了方便起见,我这里不需要加入用户名和密码验证,可直接登录。

    4.单节点模式启动并登录

      1. 指定新建的配置文件mongod.conf来启动MongoDB。
      mongod -f /etc/mongod.conf
      1. image.gif
      2. 你启动过程中可能会遇到如下报错信息:image.gif编辑这种应该是之前没有正常关闭mongodb引起的,比如直接 kill -9 <pid>导致, 解决方法:

      找到mongod.lock文件,并删除mongod.lock。

      如果启动仍然报错,建议再使用修复方式来启动


      mongod -f /etc/mongod.conf --repair
      image.gif

      千万不能使用kill -9 <pid>,因为MongoDB使用mmap方式进行数据文件管理,也就是说写操作基本是在内存中进行,写操作会被每隔60秒(syncdelay设定)的flush到磁盘里。如果在这60秒内flush处于停止事情我们进行kill -9那么从上次flush之后的写入数据将会全部丢失。 如果在flush操作进行时执行kill -9则会造成文件混乱,可能导致数据全丢了,启动时加了repair也无法恢复。

      1. 等待启动完成后,执行如下命令登录MongoDB数据库,进入Mongo Shell。
      mongo --host 127.0.0.1:27017
      1. image.gif在Mongo Shell中,执行show dbs查询当前本地MongoDB中所有的数据库,以验证是否恢复成功,可以看到我想要恢复的数据库merge,然后这样,我就可以恢复某一个玩家的数据。 image.gif编辑
      2. 至此恢复工作已成功完成,您可以在Mongo Shell中执行exit命令退出Mongo Shell。
      相关实践学习
      MongoDB数据库入门
      MongoDB数据库入门实验。
      快速掌握 MongoDB 数据库
      本课程主要讲解MongoDB数据库的基本知识,包括MongoDB数据库的安装、配置、服务的启动、数据的CRUD操作函数使用、MongoDB索引的使用(唯一索引、地理索引、过期索引、全文索引等)、MapReduce操作实现、用户管理、Java对MongoDB的操作支持(基于2.x驱动与3.x驱动的完全讲解)。 通过学习此课程,读者将具备MongoDB数据库的开发能力,并且能够使用MongoDB进行项目开发。 &nbsp; 相关的阿里云产品:云数据库 MongoDB版 云数据库MongoDB版支持ReplicaSet和Sharding两种部署架构,具备安全审计,时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。 云数据库MongoDB版(ApsaraDB for MongoDB)完全兼容MongoDB协议,基于飞天分布式系统和高可靠存储引擎,提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。 产品详情: https://www.aliyun.com/product/mongodb
      相关文章
      |
      5天前
      |
      关系型数据库 分布式数据库 数据库
      阿里云PolarDB登顶2024中国数据库流行榜:技术实力与开发者影响力
      近日,阿里云旗下的自研云原生数据库PolarDB在2024年中国数据库流行度排行榜中夺冠,并刷新了榜单总分纪录,这一成就引起了技术圈的广泛关注。这一成就源于PolarDB在数据库技术上的突破与创新,以及对开发者和用户的实际需求的深入了解体会。那么本文就来分享一下关于数据库流行度排行榜的影响力以及对数据库选型的影响,讨论PolarDB登顶的关键因素,以及PolarDB“三层分离”新版本对开发者使用数据库的影响。
      22 3
      阿里云PolarDB登顶2024中国数据库流行榜:技术实力与开发者影响力
      |
      4天前
      |
      弹性计算 关系型数据库 MySQL
      史上最大力度!阿里云瑶池数据库最高直降40%
      2月29日,阿里云全线下调云产品官网售价,这是阿里云史上最大力度的一次降价! 本次降价采用官网直降的形式,对在官网采购的新老客户均适用。 其中,云数据库RDS最高降40%、云服务器ECS最高降36%、对象存储OSS最高降55%。 无论是大客户还是中小客户,新客户还是老客户,都可以在阿里云官网上直接按照新的价格在线下单。 如此大幅度的优惠,你还等什么!快来官网下单吧!
      |
      3天前
      |
      存储 弹性计算 NoSQL
      阿里云突发!上百种云产品大规模降价,云服务器、云数据库、存储价格下调
      阿里云突发!上百种云产品大规模降价,云服务器、云数据库、存储价格下调
      |
      3天前
      |
      存储 弹性计算 NoSQL
      阿里云降价背后的“焦虑”,云服务器、数据库、存储百种云产品大降价!
      阿里云降价背后的“焦虑”,云服务器、数据库、存储百种云产品大降价!
      |
      3天前
      |
      存储 弹性计算 NoSQL
      2024阿里云服务器、数据库、存储等全线产品平均降价 20%
      2024年最新阿里云降价,立即生效!百款产品直降,平均降幅20%,阿里云希望通过此次大规模降价,让更多企业和开发者用上先进的公共云服务,加速云计算在中国各行各业的普及和发展。这次降价包括云服务器ECS、对象存储OSS、云数据库都降价了,真降价,直降价:百款产品直降,平均降幅20%,阿里云百科分享阿里云2024年降价信息汇总表
      |
      3天前
      |
      Cloud Native 自动驾驶 NoSQL
      亚太唯一,阿里云连续4年入选Gartner®云数据库管理系统魔力象限领导者象限
      国际市场研究机构Gartner®日前公布2023年度全球《云数据库管理系统魔力象限》报告,阿里云成为亚太区唯一入选该报告“领导者(LEADERS)”象限的科技公司,同时也是唯一一家连续4年入选“领导者”象限的中国企业。
      亚太唯一,阿里云连续4年入选Gartner®云数据库管理系统魔力象限领导者象限
      |
      3天前
      |
      Cloud Native 关系型数据库 分布式数据库
      热烈祝贺阿里云PolarDB登顶2024最新一期中国数据库流行榜
      【2月更文挑战第3天】热烈祝贺阿里云PolarDB登顶2024最新一期中国数据库流行榜
      |
      4天前
      |
      存储 关系型数据库 数据库
      |
      4天前
      |
      SQL NoSQL Java
      文档型数据库MongoDB
      文档型数据库MongoDB
      |
      5天前
      |
      JSON NoSQL MongoDB
      MongoDB详解(五)——MongoDB数据库简单使用
      MongoDB详解(五)——MongoDB数据库简单使用
      40 1

      相关产品

    1. 云数据库 MongoDB 版