oushudb-数据库的备份和恢复

简介: oushudb-数据库的备份和恢复

这一节,我们一起来学习如何数据库的备份和恢复,即导入和导出OushuDB数据。 再导入导出之前,为了保证你有足够的磁盘空间来存储备份文件,我们可以通过如下命令得到数据库大

小:

mydb=# SELECT sodddatsize FROM hawq_toolkit.hawq_size_of_database WHERE sodddatname=’mydb’;

如果待备份表是压缩的,这个查询给出的大小是压缩后的大小,如果你的备份是没有压缩的,需要乘上

一个压缩比来计算所需空间。具体的空间占用情况,需要根据大家的实际情况来分析判断。

数据库的备份和恢复

通过gpfdist外部表导入数据 启动gpfdist文件服务器 把需要加载的数据文件放到gpfdist数据目录 定义外部表

加载数据 通过gpfdist外部表导出数据

启动gpfdist文件服务器 准备导出的表 定义外部表

导出数据

hdfs外部表导入数据 把需要加载的数据文件放到hdfs数据目录 定义外部表

加载数据

hdfs外部表导出数据 准备导出的表

定义外部表

导出数据 使用COPY命令导入导出数据

导出表至控制台
将表导入文件
导出查询结果至文件

使用pg_dump和pg_restore

我们通常使用的导入导出包括:通过外部表(External Tables)进行的高性能并行数据导入和导出,例 如gpfdist外部表或者hdfs外部表。外部表允许用户直接查询OushuDB外部数据,所以他也提供了一种 简单的通过CREATE Table table_name AS SELECT * FROM ext_table并行导入数据到OushuDB内部表 的方法。最常用的并行加载数据到OushuDB的方法是通过基于gpfdist的外部表。gpfdist是一个HTTP服 务器,用户可以在同一机器上,或者不同的机器上启动多个gpfdist实例,从而可以充分利用多台机器, 多个网卡实现大规模并行加载。同时,基于gpfdist的外部表也可以支持数据的导出。

另一种是针对小规模数据可以通过Copy命令或者pg_dump和pg_restore来进行串行导入和导出。COPY 命令可以把单个文件加载到OushuDB,也可以从OushuDB中导出数据到单个文件。

下面我们来分别讲解一下如何通过这些方法来进行数据的导入导出。

通过gpfdist外部表导入数据

下面,我们来通过一个简单的例子来演示如何通过gpfdist导入数据。 使用gpfdist进行数据加载通常有四个步骤,分别是:

启动gpfdist文件服务器 把需要加载的数据文件放到gpfdist数据目录 定义外部表

加载数据

目录
相关文章
|
存储 关系型数据库 MySQL
mysql数据库备份与恢复
MySQL数据库的备份与恢复是确保数据安全性和业务连续性的关键操作。
548 4
|
8月前
|
存储 关系型数据库 分布式数据库
PolarDB开源数据库进阶课5 在线备份
本文介绍了如何在PolarDB RAC一写多读集群中进行在线备份,特别针对共享存储模式。通过使用`polar_basebackup`工具,可以将实例的本地数据和共享数据备份到本地盘中。实验环境依赖于Docker容器中用loop设备模拟的共享存储。
206 1
|
6月前
|
存储 关系型数据库 MySQL
利用Cron表达式实现MySQL数据库的定时备份
以上就是如何使用Cron表达式和mysqldump命令实现MySQL数据库的定时备份。这种方法的优点是简单易用,而且可以根据需要定制备份的时间和频率。但是,它也有一些限制,例如,它不能备份MySQL服务器的配置文件和用户账户信息,也不能实现增量备份。如果需要更复杂的备份策略,可能需要使用专门的备份工具或服务。
145 15
|
SQL 关系型数据库 MySQL
如何快速在表级别做同构或者异构数据库之间的数据迁移/备份
【8月更文挑战第17天】本文介绍在同构与异构数据库间快速迁移/备份表级数据的方法。同构迁移可利用数据库自带工具(如MySQL的`mysqldump`)或管理软件(如phpMyAdmin);异构迁移则推荐使用ETL工具(如Pentaho Data Integration)或数据库复制工具(如SymmetricDS),亦可通过编程方式实现。实施前需测试以确保数据完整准确,并注意处理兼容性问题。
556 4
|
7月前
|
关系型数据库 Shell 网络安全
定期备份数据库:基于 Shell 脚本的自动化方案
本篇文章分享一个简单的 Shell 脚本,用于定期备份 MySQL 数据库,并自动将备份传输到远程服务器,帮助防止数据丢失。
|
11月前
|
关系型数据库 MySQL Linux
Linux环境下MySQL数据库自动定时备份实践
数据库备份是确保数据安全的重要措施。在Linux环境下,实现MySQL数据库的自动定时备份可以通过多种方式完成。本文将介绍如何使用`cron`定时任务和`mysqldump`工具来实现MySQL数据库的每日自动备份。
646 3
|
11月前
|
监控 关系型数据库 MySQL
Linux环境下MySQL数据库自动定时备份策略
在Linux环境下,MySQL数据库的自动定时备份是确保数据安全和可靠性的重要措施。通过设置定时任务,我们可以每天自动执行数据库备份,从而减少人为错误和提高数据恢复的效率。本文将详细介绍如何在Linux下实现MySQL数据库的自动定时备份。
322 3
|
12月前
|
存储 定位技术 数据库
介绍一下数据库的备份和恢复策略
【10月更文挑战第21】介绍一下数据库的备份和恢复策略
|
关系型数据库 MySQL 数据库
Navicat备份数据库
涵盖`Navicat`数据库备份、数据安全及备份策略等主题。文库采用精美主题,提升阅读体验。
270 1
Navicat备份数据库
|
11月前
|
数据库
【赵渝强老师】数据库的备份方式
备份数据库是指将数据库中的数据及相关信息保存起来,以便在系统故障时恢复。备份对象不仅限于数据本身,还包括数据库对象、用户权限等。根据备份策略、类型和模式的不同,可分为整体/部分备份、完全/增量备份、一致/非一致备份。文中还附有相关视频讲解。
165 0

热门文章

最新文章