• 用户指南—数据导入和导出—使用DTS导入和导出数据

    从PolarDB-X导出数据到RDS MySQL。请参见同步PolarDB-X数据到RDS。从PolarDB-X导出数据到AnalyticDB MySQL。请参见同步PolarDB-X数据到AnalyticDB MySQL版。PolarDB-X增量数据订阅PolarDB-X提供完全兼容MySQL Binlog...
    文章 2021-10-28 98浏览量
  • RDS for mysql5.7 基础版本使用mysqldump 全量加增量...

    rds mysql 5.7基础版本无法下载物理备份,在业务不允许中断,并且本地数据库没有公网的情况下,如果要迁移数据到本地可以利用mysqldump 导出的dump 文件然后结合binlog 增量把rds数据迁移到本地。本地环境数据库需要...
    文章 2019-08-31 1819浏览量
  • 在ECS上轻松搭建RDS的从实例

    由于mysql-binlogRDS上正常情况下只保存18个小时,此时必须要对从库及主库状态进行控制,防止从库没有应用日志,RDS主库上的日志就已经删除,这节内容会在下一篇文章中描述。下面会配合lepus监控软件实现邮件告警...
    文章 2018-06-26 3454浏览量
  • Greenplum的方案之一-rds_dbsync

    PostgreSQL,Greenplum,rds_dbsync,binlog 背景 rds_dbsync是阿里云数据库内核组开源的一个数据实时同步工具。可以解析MySQL的binlog,或者PostgreSQL的WAL日志,实现增量的实时同步。同时支持全量不落地迁移功能。...
    文章 2017-10-28 10091浏览量
  • 数据迁移

    导出存储过程、触发器和函数时,需要将 definer 去掉,以兼容 RDS。mysqldump-h localIp-u userName-p-opt default-character-set=utf8-hex-blob dbName-R|sed-e 's/DEFINER[]*= [^]*\*/\*/'>tmp/...
    文章 2016-08-15 6112浏览量
  • RDS数据库和ECS自建数据库主从复制,数据同步

    binlog_format=ROWlog-bin=mysql-bin#开启二进制日志功能,binlog数据位置 log-bin-index=mysql-bin.indexrelay-log=relay-log#relay-log日志记录的是从服务器I/O线程将主服务器的二进制日志读取过来记录到从服务器...
    文章 2018-09-13 16899浏览量
  • RDS数据库与自建库的gtid主从同步

    六、将RDS导出的数据库,导入到从库mysql-uroot-p root_password<tmp/db1.sqlmysql-uroot-p root_password<tmp/db2.sqlmysql-uroot-p root_password<tmp/db3.sql 七、进入从库,设置同步信息mysql>reset...
    文章 2019-10-15 1880浏览量
  • 怎么跳出MySQL的10个大坑

    很快Mariadb就提出了一个Binlog Group Commit方案,即在准备写入Binlog时,维持一个队列,最早进入队列的是leader,后来的是follower,leader为搜集到的队列中的线程依次写Binlog文件,并commit事务。Percona 的Group...
    文章 2016-01-25 1145浏览量
  • 阿里云数据库RDS MySQL的数据安全预防与恢复

    OSS BinlogRDS会定时将Binlog备份到OSS上)。本地热Binlog(数据库服务器上Binlog)。操作示例如下图所示: 更多内容请参见帮助文档。示例—少量数据追踪操作示例如下图所示:更多内容请参见帮助文档。从回收站...
    文章 2020-11-10 2627浏览量
  • 同步RDS数据库到自建mysql数据库

    可以登陆RDS服务器使用show命令进行查询,查询到的数值单位是字节,不会换算自己百度用工具换算一下就行,上文中关于my.cnf阿里云优化的部分,全部使用了RDS控制台里面的参数(导出复制进去就行,记得注释掉有rds的...
    文章 2018-01-29 4292浏览量
  • 干货|阿里云数据库RDS MySQL数据安全预防与恢复

    在线搜索日志内容,无需手工下载Binlog支持数据的插入/更新/删除日志搜索,无需手工解析Binlog支持逐条数据恢复,无需手工生成回滚语句OSS BinlogRDS会定时将Binlog备份到OSS上)本地热Binlog(数据库服务器上...
    文章 2020-04-14 748浏览量
  • 使用 Xtrabackup 在线对MySQL做主从复制

    mysql 5.7开始加入了多源复制,这个特性对同时有很多个mysql实例是很有用的,阿里云RDS(迁移)实现了类似的方式。从MySQL 5.6.2开始,mysql binlog支持checksum校验,并且5.6.6默认启用(CRC32),这对自己模拟实现...
    文章 2016-05-18 2587浏览量
  • 在ECS上自建MySQL手工容灾环境

    阿里云RDS已经提供了完全的数据库运维服务,包括监控、优化、主备高可用等。而对小白用户来说,为了自己业务连续性和学习的需要,也是很有必要了解如何自建MySQL主备以及主备切换流程的。在主从复制实施前,单机单...
    文章 2016-12-13 5809浏览量
  • 使用 Xtrabackup 在线对MySQL做主从复制

    mysql 5.7开始加入了多源复制,这个特性对同时有很多个mysql实例是很有用的,阿里云RDS(迁移)实现了类似的方式。从MySQL 5.6.2开始,mysql binlog支持checksum校验,并且5.6.6默认启用(CRC32),这对自己模拟实现...
    文章 2017-11-13 680浏览量
  • RDS中的MYSQL备份恢复

    (4)xtrabackup_binlog_info —— mysql服务器当前正在使用的二进制日志文件及至备份这一刻为止二进制日志事件的位置;(5)xtrabackup_checkpoints —— 备份类型(如完全或增量)、备份状态(如是否已经为prepared...
    文章 2014-05-29 4677浏览量
  • 在线建立或重做mysql主从复制架构方法(传统模式和...

    先说明,案例分两种方案,实现的意义是一样的,一种是mysqldump方式,一种是xtrabackup方式,视乎实际情况,因为有些业务不一定能用xtrabackup,例如阿里云RDS,腾讯CDB. 配置和授权(通用前置步骤) 如果没有开GTID模式,主...
    文章 2017-11-17 1089浏览量
  • DTS数据迁移|《DTS控制台入门一本通》第三章(上篇)

    图 3-1 标记②的“文件导入”功能,是使用 DTS 提供的一个客户端工具,将工具部署在本地,使用该工具将本地数据库导出的文件,然后上传,实现导入功能,相当于我们自己导出文件然后导入一样,如图 3-2,该功能已经...
    文章 2020-08-10 1278浏览量
  • 阿里云数据库9月刊:一文看懂2018杭州云栖大会阿里云...

    在审计方面,提供实例级别的保留时长的配置,以及更好用的导出和转储功能。3、云数据库MySQL发布全球云厂商独家实时binlog日志备份,可确保在主备均宕机的极端条件下RPO<10秒,远超友商同类产品数据可靠性是数据...
    文章 2018-10-11 2962浏览量
  • 让mysqldump变成并发导出导入的魔法

    对忽略导出gtid信息、触发器等其它支持阿里云rds 5.6 导出必须要设置 set-gtid-purged=OFF 另外有人还可能提到 mysqlpump —— 它才是我认为mysqldump应该具有的模样,语法兼容,基于表的并发导出。但是只有 mysql...
    文章 2016-11-21 3233浏览量
  • RDSPostgreSQL FAQ

    binlog_minner binlog_loader&xff09;实现基于 MySQL binlog 解析的增量数据同步&xff0c;其github地址为https://github.com/aliyun/rds_dbsync/blob/master/README.md如何从MySQL 迁移数据 到PostgreSQL&xff1f;1.导出...
    文章 2021-12-08 81浏览量
  • 双管齐下,MaxCompute数据上云与生态

    对于这种情况,我们尝试解析MySQL的binlog,将其binlog以一种流式的方式源源不断地、实时地传递到DatHub上,然后该数据再通过DatHub再写入MaxCompute,在MaxCompute上再进行数据的合并等操作,还原出前一天的增量...
    文章 2017-03-15 7140浏览量
  • MySQL非主从环境下数据一致性校验及修复程序

    总会有这样特殊的需求,比如从阿里云RDS实例迁移到自建mysql实例,它的数据传输服务实现方式是基于表的批量数据提取,加上binlog订阅,但强制row模式会导致pt-table-checksum没有权限把会话临时改成statement。...
    文章 2016-11-21 4046浏览量
  • MySQL日常维护(超级大杂烩)

    1|repl|mysqlstandby:21442|NULL|Binlog Dump GTID|6091|Master has sent all binlog to slave;waiting for binlog to be updated|NULL| 2|repl|mysql3:5330|NULL|Binlog Dump GTID|5981|Master has sent all binlog...
    文章 2018-07-21 2439浏览量
  • pt-archiver归档工具的使用详解

    local 不把optimize或analyze操作写入到binlog里面(防止造成主从延迟巨大) retries 超时或者出现死锁的话,pt-archiver进行重试的间隔(默认1s) no-version-check 目前为止,发现部分pt工具对阿里云RDS操作...
    文章 2017-11-16 1530浏览量
  • DMS前后端技术揭秘及最佳实践

    一个专业的DBA的人力成本也非常高,同时由于Binlog文件较大且同时包含了一个实例上多个库、多个表、所有数据的日志,在人工定位上速度非常缓慢,DMS在这方面做了很多提速的处理,可以快速精准定位到库、表的日志甚至...
    文章 2017-09-05 5563浏览量
  • mysql多源复制详解

    就算不是做多源复制,普通的主从复制环境都需要把数据导出和导入数据,毕竟binlog不是一直都有记录的(保留策略问题),数据量多起来的话,让他从新跑也是不现实的。而由于我们多源复制的原意是只复制有需求的数据库...
    文章 2017-11-04 1856浏览量
  • 【沉淀】访阿里资深专家丁奇:他是如何一步步成为...

    我们有内置的支持秒杀场景的方案、有限制导出数据时单线程性能消耗的语法、高效清空线程占用资源减少内存消耗等功能。这些都是在长期服务内外部客户时,从需求中抽象和实现的功能。团队管理遵循的原则:对他们好、...
    文章 2016-06-27 23052浏览量
  • MySQL·引擎特性·InnoDB崩溃恢复

    我们在阿里云RDS MySQL的运维中,常常发现数据库hang在了崩溃恢复阶段,在错误日志中有类似“Reading tablespace information from the.ibd files…”字样,这就表示数据库正在打开所有的表,然后一看表的数量,发现...
    文章 2017-12-12 1163浏览量
  • MySQL·引擎特性·InnoDB崩溃恢复

    我们在阿里云RDS MySQL的运维中,常常发现数据库hang在了崩溃恢复阶段,在错误日志中有类似“Reading tablespace information from the.ibd files…”字样,这就表示数据库正在打开所有的表,然后一看表的数量,发现...
    文章 2017-07-21 1379浏览量
  • mysql日常问题

    2)关闭数据库,并删除除系统数据库文件【mysql、performance_schema、test、错误日志文件、binlog 文件】以外的文件 3)将应用完日志后的备份文件 cp 到数据库数据目录中,并修改这些文件的所有者为 mysql 4)启动数据...
    文章 2017-11-12 1236浏览量
1 2 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化