带你读《全链路数据治理-全域数据集成》之19:5. 场景(上)

本文涉及的产品
大数据开发治理平台 DataWorks,不限时长
简介: 带你读《全链路数据治理-全域数据集成》之19:5. 场景(上)

5. 场景

场景一:通过公网访问数据库


1) 网络连通方案

直接连接。

image.png


2) 网络连通配置操作指导

以使用阿里云 RDS 数据库为例,网络连通配置如下。

image.png

l 其中,独享数据集成资源组的详情请参见新增和使用独享数据集成资源组

l 获取 RDS 的专有网络信息,详情请参见切换专有网络 VPC 和虚拟交换机


注意请注意公网的收费限制,详情请参见数据集成公网流量计费


场景二:通过 VPC(内网)访问数据库,且数据库与 DataWorks 工作空间,同阿里云主账号、同地域


1) 网络连通方案

image.png

2) 网络连通方案架构图

image.png

3) 网络连通配置操作指导

独享数据集成资源组可绑定数据源所在 VPC。


说明


l 绑定 VPC 后,系统自动为您添加一条路由至整个 VPC 的路由,您绑定 VPC

的任意一个交换机,资源组与数据源的网络都可连通。


l 如果您是在数据源配置界面进行的网络绑定,独享数据集成资源组只能访

问数据库所在 VPC 和交换机,无法与整个 VPC 实现连通,此时您需手动添

加路由,详情可参见添加路由


以阿里云 RDS 数据库为例,配置操作如下所示:

image.png

其中,获取 RDS 的专有网络信息,详情请参见切换专有网络 VPC 和虚拟交换机


场景三:通过 VPC(内网)访问数据库,且数据库与 DataWorks 工作空间,同阿里云主账号、不同地域


1) 网络连通方案

image.png

2) 网络连通方案架构图

image.png

3) 网络连通配置操作指导


l 为独享数据集成资源组绑定一个 VPC。

Ø 在 DataWorks 所在地域新建一个 VPC。

Ø 为独享数据集成资源组绑定上述创建的 VPC。


l 配置数据源和资源组的网络连通。

Ø 使用云企业网或 VPN 连通两个 VPC。

Ø 在控制台添加路由,连接至目标 VPC,详情可参见添加路由


以阿里云 RDS 数据库为例,配置操作如下所示:

image.png

其中,获取 RDS 的专有网络信息,详情请参见切换专有网络 VPC 和虚拟交换机


《全链路数据治理-全域数据集成》——三、数据同步网络连通实践——5. 场景(下) https://developer.aliyun.com/article/1223035

相关文章
|
7月前
|
消息中间件 大数据 Kafka
多云与混合云场景下的数据同步方案-KAFKA
多云与混合云场景下的数据同步方案-KAFKA
|
7天前
|
SQL JSON DataWorks
DataWorks产品使用合集之DataWorks 数据集成任务中,将数据同步到 Elasticsearch(ES)中,并指定 NESTED 字段中的 properties 类型如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
29 0
|
7天前
|
移动开发 小程序 数据管理
9月开发者日回顾|小程序跳转接口等多个JSAPI更新,能力集成提供场景化排查工具
9月开发者日回顾|小程序跳转接口等多个JSAPI更新,能力集成提供场景化排查工具
30 0
|
7天前
|
机器学习/深度学习 人工智能 监控
SAP Sales Cloud,Service Cloud 和 SAP BTP 平台上的 AI 集成场景
SAP Sales Cloud,Service Cloud 和 SAP BTP 平台上的 AI 集成场景
73 0
|
7天前
|
SQL 关系型数据库 MySQL
Apache Flink 和 Paimon 在自如数据集成场景中的使用
Apache Flink 和 Paimon 在自如数据集成场景中的使用
328 0
|
7天前
|
SQL 存储 关系型数据库
Apache Flink 和 Paimon 在自如数据集成场景中的使用
自如目前线上有基于 Hive 的离线数仓和基于 Flink、Kafka 的实时数仓,随着业务发展,我们也在探索引入湖仓一体的架构更好的支持业务,我们对比了 Iceberg、Hudi、Paimon 后,最终选择 Paimon 作为我们湖仓一体的存储引擎,本文分享下自如在引入 Paimon 做数据集成的一些探索实践。
718 1
Apache Flink 和 Paimon 在自如数据集成场景中的使用
|
6月前
|
Java 专有云 数据库连接
专有云配置vertica数据源,测试连通性已连通,但是在配置数据集成时,连接报错,报vertica[vjdbc]100176错误,连接vertica数据库错误
专有云配置vertica数据源,测试连通性已连通,但是在配置数据集成时,连接报错,报vertica[vjdbc]100176错误,连接vertica数据库错误
57 1
|
6月前
|
分布式计算 DataWorks 关系型数据库
MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute
MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute
40 1
|
8月前
|
存储 对象存储 索引
针对OSS数据集成场景下的功能全面优化【Dataphin V3.12]
OSS(Object Storage Service)是对象存储服务,适用于存放各种文件类型,Dataphin已经支持连接到OSS进行文件数据的读取与写入。本期版本升级中,Dataphin对于OSS的数据同步场景做了全面的功能升级,包括数据源、输入组件与数据组件,一起来了解一下吧~
221 0
|
分布式计算 DataWorks Cloud Native
带你读《全链路数据治理-全域数据集成》之1:1. 数据集成简介
带你读《全链路数据治理-全域数据集成》之1:1. 数据集成简介
408 0

热门文章

最新文章