阿里云 SelectDB 携手 DTS ,一键实现 TP 数据实时入仓

简介: DTS 作为阿里云核心的数据交互引擎,以其高效的实时数据流处理能力和广泛的数据源兼容性,为用户构建了一个安全可靠、可扩展、高可用的数据架构桥梁。阿里云数据库 SelectDB 通过与 DTS 联合,为用户提供了简单、实时、极速且低成本的事务数据分析方案。用户可以通过 DTS 数据传输服务,一键将自建 MySQL / RDS MySQL / PolarDB for MySQL 数据库,迁移或同步至阿里云数据库 SelectDB 的实例中,帮助企业在短时间内完成数据迁移或同步,并即时获得深度洞察。

导读:大数据时代背景下,高效的数据流转与实时分析能力对于企业的竞争力至关重要。近日,飞轮科技与阿里云联合共建的新一代云原生实时数据仓库:阿里云数据库 SelectDB ,进一步强化了与阿里云数据传输服务(DTS)的深度融合,在提供亚秒级响应和海量数据查询能力的同时,实现一键从多种源数据库迁移或同步至阿里云 SelectDB 全托管服务,让企业在数据同步迁移过程中享受到更便捷和更稳定的体验。

关于数据传输服务 DTS

数据传输服务DTS(Data Transmission Service)是阿里云提供的实时数据流服务,支持关系型数据库(RDBMS)、非关系型的数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,助您构建安全、可扩展、高可用的数据架构。

关于阿里云数据库 SelectDB

阿里云数据库 SelectDB 是现代化实时数据仓库 SelectDB 在阿里云上的全托管服务,内核基于业界领先的开源分析型数据库 Apache Doris 研发,由阿里云和飞轮科技联合打造。阿里云数据库 SelectDB 聚焦于满足企业级大数据分析需求,广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景,致力于为客户提供极致性能、简单易用的数据分析服务。

DTS 作为阿里云核心的数据交互引擎,以其高效的实时数据流处理能力和广泛的数据源兼容性,为用户构建了一个安全可靠、可扩展、高可用的数据架构桥梁。阿里云数据库 SelectDB 通过与 DTS 联合,为用户提供了简单、实时、极速且低成本的事务数据分析方案。用户可以通过 DTS 数据传输服务,一键将自建 MySQL / RDS MySQL / PolarDB for MySQL 数据库,迁移或同步至阿里云数据库 SelectDB 的实例中,帮助企业在短时间内完成数据迁移或同步,并即时获得深度洞察。

借助阿里云数据库 SelectDB 的强大计算与存储能力,轻松应对高并发、大规模的数据查询需求,实现实时业务分析与决策,进而实现数据库技术栈的转型升级。

适用场景

如果此前您使用自建 MySQL / RDS MySQL / PolarDB for MySQL 等 OLTP 数据库支撑数据分析或在线报表等业务,可能面临性能瓶颈和线上事务处理受干扰等问题。作为专注于海量数据实时分析的现代化数据仓库,阿里云数据库 SelectDB 提供实时数据写入、亚秒级查询响应等能力,企业可以获得实时、快速、稳定、高可用的服务。使用 DTS 迁移完成后,企业可以实现快速切换数据分析业务负载流量到目标库,释放源库资源,实现数据架构的优化升级。

另外一方面,如果企业需要继续保持源数据库支撑事务处理业务,并且希望将数据汇聚起来分析。阿里云数据库 SelectDB 也提供了数据同步的解决方案,企业可以通过数据传输服务 DTS 实现全量与增量数据的实时同步,在保证原有数据库支持在线业务的同时,通过引入阿里云数据库 SelectDB 强大分析能力进一步挖掘数据价值,以实现实时业务分析与决策。

实操步骤

接下来本文以 RDS MySQL 实例为例,为您介绍通过数据传输服务 DTS 将 RDS MySQL 数据库同步至阿里云数据库 SelectDB 相关操作步骤。在此我们选择的示例为 RDS MySQL ,与此同时已支持自建 MySQL 以及 PolarDB for MySQL。

具体操作步骤如下:

1、登录阿里云账号,从阿里云数据库 SelectDB 控制台实例列表页,选择要同步的实例,进入到实例详情页面,如下图。

operate-1.png

2、 选择数据迁移及同步,点击创建同步任务。本文以数据同步为例,如果是数据迁移,需要在“创建同步任务”按钮的上面选择“数据迁移”的标签。(数据同步通常包含存量数据的迁移和增量数据的实时同步;数据迁移通常用于存量历史数据的迁移)

operate-2.png

3、 创建同步任务,分别配置源库和目标库信息,包括实例 ID、账号、密码以及连接方式等。

operate-3.png

4、配置完成后,测试连接源库和目标库的有效联通性,DTS 会自动处理阿里云数据库实例的安全访问设置,对于自建的数据库需要手动添加 DTS 的 IP 地址至白名单或安全规则。
5、 在任务对象配置中,同步类型:固定选择增量同步,并同时勾选库表结构同步和全量数据选项,来保证数据的一致性。对于目标库中同名表的处理策略和目标库对象名称大小写策略,可以按照实际需求设置。
6、 高级配置,源库、目标库无法连接后的重试时间,建议设置 30 分钟以上。出现其他问题后的重试时间,建议设置 10 分钟以上。为了避免影响源库和目标库的性能,可以根据业务需求限制全量迁移速率,也可以对增量同步任务进行限速配置。
7、可选步骤:如果同步类型包含库表结构的同步,还需要进一步配置目标表中的主键列,分布键和引擎选择信息。
8、 完成上述的配置以后进行下一步预检查,用户在预检查通过率为 100% 的情况下,进入 DTS 购买页面选择计费方式、链路规格等信息,点击购买,就可以开始执行数据同步任务了。

以上就是通过 DTS 将 RDS MySQL 同步至阿里云数据库 SelectDB 的操作步骤简述,更多操作说明请移步至官方操作指南。通过使用阿里云数据传输服务 DTS ,企业不仅能够迅速将原有 MySQL 数据库同步到更高性能的阿里云数据库 SelectDB,更能在保持业务连续性的基础上,充分利用阿里云数据库 SelectDB 强大的分析能力和弹性扩展优势,加速决策进程,提升业务效率,从而在激烈的市场竞争保持领先,实现业务持续增长。

想了解更多关于 SelectDB 或阿里云数据库 SelectDB,可以通过登录 SelectDB 官方网站 联系我们。

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
SQL 分布式计算 监控
在数据传输服务(DTS)中,要查看每个小时源端产生了多少条数据
【2月更文挑战第32天】在数据传输服务(DTS)中,要查看每个小时源端产生了多少条数据
17 6
|
1月前
|
缓存 安全 Java
阿里云数据库 SelectDB 内核 Apache Doris 2.0.6 版本正式发布
阿里云数据库 SelectDB 内核 Apache Doris 2.0.6 版本正式发布
|
1月前
|
SQL 数据采集 分布式计算
DataWorks常见问题之添加阿里云selectdb失败如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
1月前
|
SQL 存储 JSON
阿里云数据库 SelectDB 内核 Apache Doris 2.1.0 版本发布:开箱盲测性能大幅优化,复杂查询性能提升 100%
亲爱的社区小伙伴们,Apache Doris 2.1.0 版本已于 2024 年 3 月 8 日正式发布,新版本开箱盲测性能大幅优化,在复杂查询性能方面提升100%,新增Arrow Flight接口加速数据读取千倍,支持半结构化数据类型与分析函数。异步多表物化视图优化查询并助力仓库分层建模。引入自增列、自动分区等存储优化,提升实时写入效率。Workload Group 资源隔离强化及运行时监控功能升级,保障多负载场景下的稳定性。新版本已经上线,欢迎大家下载使用!
阿里云数据库 SelectDB 内核 Apache Doris 2.1.0 版本发布:开箱盲测性能大幅优化,复杂查询性能提升 100%
|
1月前
|
SQL 人工智能 数据挖掘
阿里云DMS,身边的智能化数据分析助手
生成式AI颠覆了人机交互的传统范式,赋予每个人利用AI进行低门槛数据分析的能力。Data Fabric与生成式AI的强强联合,不仅能够实现敏捷数据交付,还有效降低了数据分析门槛,让人人都能数据分析成为可能!阿里云DMS作为阿里云统一的用数平台,在2021年初就开始探索使用Data Fabric理念构建逻辑数仓来加速企业数据价值的交付,2023年推出基于大模型构建的Data Copilot,降低用数门槛,近期我们将Notebook(分析窗口)、逻辑数仓(Data Fabric)、Data Copilot(生成式AI)进行有机组合,端到端的解决用数难题,给用户带来全新的分析体验。
110144 118
阿里云DMS,身边的智能化数据分析助手
|
19天前
|
云安全 人工智能 定位技术
交通运输部公路科学研究院携手阿里云共建交通行业大模型
交通运输部公路科学研究院携手阿里云共建交通行业大模型
22 0
|
25天前
|
消息中间件 Cloud Native Serverless
飞天发布时刻丨阿里云 ApsaraMQ 全面升级,携手 Confluent 发布全新产品
阿里云在3月29日的飞天发布时刻宣布ApsaraMQ全面升级,实现全系产品Serverless化,与Confluent合作推出新产品,强化云原生消息队列服务。
|
1月前
|
存储 SQL 数据管理
阿里云数据库 SelectDB 内核 Apache Doris 如何基于自增列满足高效字典编码等典型场景需求|Deep Dive 系列
自增列的实现,使得 Apache Doris 可以在处理大规模时展示出更高的稳定性和可靠性。通过自增列,用户能够高效进行字典编码,显著提升了字符串精确去重以及查询的性能。使用自增列作为主键来存储明细数据,可以完美的解决明细数据更新的问题。同时,基于自增列,用户可以实现高效的分页机制,轻松应对深分页场景,有效过滤掉大量非必需数据,从而减轻数据库的负载压力,为用户带来了更加流畅和高效的数据处理体验。
|
1月前
|
NoSQL 关系型数据库 数据库
数据传输服务DTS(Data Transmission Service)是阿里云提供的实时数据流服务
【2月更文挑战第29天】数据传输服务DTS(Data Transmission Service)是阿里云提供的实时数据流服务
20 5
|
1月前
|
关系型数据库 MySQL 数据库
使用阿里云的数据传输服务DTS(Data Transmission Service)进行MySQL 5.6到MySQL 8.0的迁移
【2月更文挑战第29天】使用阿里云的数据传输服务DTS(Data Transmission Service)进行MySQL 5.6到MySQL 8.0的迁移
225 2

热门文章

最新文章