oushudb-数据库的备份和恢复

简介: oushudb-数据库的备份和恢复

这一节,我们一起来学习如何数据库的备份和恢复,即导入和导出OushuDB数据。 再导入导出之前,为了保证你有足够的磁盘空间来存储备份文件,我们可以通过如下命令得到数据库大

小:

mydb=# SELECT sodddatsize FROM hawq_toolkit.hawq_size_of_database WHERE sodddatname=’mydb’;

如果待备份表是压缩的,这个查询给出的大小是压缩后的大小,如果你的备份是没有压缩的,需要乘上

一个压缩比来计算所需空间。具体的空间占用情况,需要根据大家的实际情况来分析判断。

数据库的备份和恢复

通过gpfdist外部表导入数据 启动gpfdist文件服务器 把需要加载的数据文件放到gpfdist数据目录 定义外部表

加载数据 通过gpfdist外部表导出数据

启动gpfdist文件服务器 准备导出的表 定义外部表

导出数据

hdfs外部表导入数据 把需要加载的数据文件放到hdfs数据目录 定义外部表

加载数据

hdfs外部表导出数据 准备导出的表

定义外部表

导出数据 使用COPY命令导入导出数据

导出表至控制台
将表导入文件
导出查询结果至文件

使用pg_dump和pg_restore

我们通常使用的导入导出包括:通过外部表(External Tables)进行的高性能并行数据导入和导出,例 如gpfdist外部表或者hdfs外部表。外部表允许用户直接查询OushuDB外部数据,所以他也提供了一种 简单的通过CREATE Table table_name AS SELECT * FROM ext_table并行导入数据到OushuDB内部表 的方法。最常用的并行加载数据到OushuDB的方法是通过基于gpfdist的外部表。gpfdist是一个HTTP服 务器,用户可以在同一机器上,或者不同的机器上启动多个gpfdist实例,从而可以充分利用多台机器, 多个网卡实现大规模并行加载。同时,基于gpfdist的外部表也可以支持数据的导出。

另一种是针对小规模数据可以通过Copy命令或者pg_dump和pg_restore来进行串行导入和导出。COPY 命令可以把单个文件加载到OushuDB,也可以从OushuDB中导出数据到单个文件。

下面我们来分别讲解一下如何通过这些方法来进行数据的导入导出。

通过gpfdist外部表导入数据

下面,我们来通过一个简单的例子来演示如何通过gpfdist导入数据。 使用gpfdist进行数据加载通常有四个步骤,分别是:

启动gpfdist文件服务器 把需要加载的数据文件放到gpfdist数据目录 定义外部表

加载数据

目录
相关文章
|
3月前
|
存储 关系型数据库 MySQL
mysql数据库备份与恢复
MySQL数据库的备份与恢复是确保数据安全性和业务连续性的关键操作。
136 4
|
4月前
|
SQL 关系型数据库 MySQL
如何快速在表级别做同构或者异构数据库之间的数据迁移/备份
【8月更文挑战第17天】本文介绍在同构与异构数据库间快速迁移/备份表级数据的方法。同构迁移可利用数据库自带工具(如MySQL的`mysqldump`)或管理软件(如phpMyAdmin);异构迁移则推荐使用ETL工具(如Pentaho Data Integration)或数据库复制工具(如SymmetricDS),亦可通过编程方式实现。实施前需测试以确保数据完整准确,并注意处理兼容性问题。
186 4
|
1月前
|
关系型数据库 MySQL Linux
Linux环境下MySQL数据库自动定时备份实践
数据库备份是确保数据安全的重要措施。在Linux环境下,实现MySQL数据库的自动定时备份可以通过多种方式完成。本文将介绍如何使用`cron`定时任务和`mysqldump`工具来实现MySQL数据库的每日自动备份。
112 3
|
1月前
|
监控 关系型数据库 MySQL
Linux环境下MySQL数据库自动定时备份策略
在Linux环境下,MySQL数据库的自动定时备份是确保数据安全和可靠性的重要措施。通过设置定时任务,我们可以每天自动执行数据库备份,从而减少人为错误和提高数据恢复的效率。本文将详细介绍如何在Linux下实现MySQL数据库的自动定时备份。
51 3
|
2月前
|
存储 定位技术 数据库
介绍一下数据库的备份和恢复策略
【10月更文挑战第21】介绍一下数据库的备份和恢复策略
|
1月前
|
数据库
【赵渝强老师】数据库的备份方式
备份数据库是指将数据库中的数据及相关信息保存起来,以便在系统故障时恢复。备份对象不仅限于数据本身,还包括数据库对象、用户权限等。根据备份策略、类型和模式的不同,可分为整体/部分备份、完全/增量备份、一致/非一致备份。文中还附有相关视频讲解。
|
3月前
|
关系型数据库 MySQL 数据库
Navicat备份数据库
涵盖`Navicat`数据库备份、数据安全及备份策略等主题。文库采用精美主题,提升阅读体验。
50 1
Navicat备份数据库
|
3月前
|
SQL 数据库 数据安全/隐私保护
如何手动备份数据库?
如何手动备份数据库?
140 1
|
4月前
|
SQL 数据库
Microsoft SQL Server 2014如何来备份数据库
Microsoft SQL Server 2014如何来备份数据库
490 3
|
4月前
|
SQL 关系型数据库 MySQL
在Linux中,如何备份和恢复MySQL数据库?
在Linux中,如何备份和恢复MySQL数据库?