3.数据同步网络连通实践 | 学习笔记

简介: 快速学习3.数据同步网络连通实践

开发者学堂课程【全链路数据治理-全域数据集成3.数据同步网络连通实践学习笔记,与课程紧密连接,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/1082/detail/16061


数据同步网络连通实践


数据同步的网络联通性实践

在做数据同步的同时,网络打通是一大难题,通过本片,你可以了解数据库在不同网络环境中可选用的网络联通方案,可以将数据同步的源端、目标端与data wall数据集成资源组进行打通,更快的完成后续同步相关的工作。

网络联通性的原理介绍,data verse使用集成资源组来进行数据同步,数据同步前我们需要保证数据集成资源组与数据库具备网络的联通性,你可以根据数据库所在的网络环境,选择合适的网络解决方案来实现网络的联通,

接下来是独享数据集成资源组的介绍,因为刚才提到了我们需要将data verse的数据集成资源组跟数据库进行网络环境的打通,独享数据集成资源组是我们data verse上托管型的资源,购买这些资源之后,你可以独自享用这些的资源。使用场景一般是在实时或者离线同步的场境下,特别是实施这种相对比较消耗资源的场景以及我们提供的一些同步解决方案场景。另外,当您需要通过内网访问其他网络环境时,需要和其他网络环境下的数据库进行网络联通,您可以选择独享数据集成资源组。最后,在我们一些数据集成任务高并发的情况下,因为您如果使用一些公共的、按量的,我们可能没法进行错分运行,如果您购买了独享数据集成资源度,可以保障数据的快速稳定的传输。了解完这些背景信息之后,我们具体看一下网络联通的解决方案,网络联通的解决方案会有一些使用限制,就是在使用独享数据集成资源组时,可以与在公网、PPC内网网络环境中的数据源进行跨region、跨IDC跨云厂商之间的网络联通是无法与经典网络中的数据源进行联通的在方案选型里,大家可以看到,不管你的数据库是在阿里云自建的,还是阿里云自己的,以及数据库不在阿里云的情况下,你通过各种访问方式可以完成不同的网络打通方案的这个选型,那接下来,我们会针对几个典型场景跟大家做一些简单的介绍

场景一是通过公网访问数据库,这种网络是可以通过data verse的独享数据集成资源组进行直接访问的,那下面有一些操作的步骤大家可以参考,不管是独享数据集成资源组的使用,以及ids获取专有网络的这些信息需要提示的是,如果中间你涉及一些公网的费用,数据集成会按照阿里云通用的公网流量计费进行收费

场景二是通过我们VPC内网访问数据库,且数据库与这沃工作空间在同,阿里云主账号同地域,这个网络联通方案相对而言也比较容易,我们可以直接将两边的VPC进行一个绑定,然后网络联通性的操作指导,大家也可以参考我们的说明,然后如果您是在数据源界面配置的网络绑定,那独享数据集成资源组只能访问数据库所在VPC和交换机,无法与整个VPC实现联通,需要手动进行添加路由的操作。

第三个场景是我们通过VPC内网访问数据库数据库与data verse工作空间同阿里云主账号,但是并不在同一个地域,那这个时候我们网络的联通方案就需要运到额外的云企业网和VPN的网关,我们网络配置的操作指导可以参考我们的文档,比如说首先会为数据线独享资源组绑定一个VPC,然后我们接下来会配置数据源和资源组的网络联通使用云企业网或者VPN联通这两个VPC,然后就能够实现这个网络环境之间的打通

场景四,是针对VPC内网同步数据库数据,并且数据库与data verse工作空间使用不同的阿里云主账号在这个时候,我们也可以通过云企业网和VPN网关的形式来完成整个网络联通方案的打通,具体操作和刚才类似,大家参考具体的文档就可以

第五种方式是数据库不在阿里云,是在我们线下的IDC或者其他云厂商上,同样的我们也可以采用与企业网和VPN网关进行网络的打通具体的操作步骤,比如说与企业网以及VPN网关的使用,大家可以操参考帮助文档实现所有的网络联通之后,在后续步骤里,我们会进行网络联通的配置,大家可以选择合适的网络联通方案,然后参考联通方案对应的操作引导配置数据源与资源组的网络联通完成网络联通配置之后,可以根据数据库是否开启白名单设置,如果开启了白名单,需要保证资源组相应的IP地址段添加到数据库的白名单中,避免资源组无法正常读取数据库的数据,可以参考参添加白名单的这个操作文档

如果你是数据库是ecs自建的数据库,还需要配置一些安全组的策略,可以参考ecs自建数据库的一个安全组配置

以上就是所有的内容。

相关文章
|
2月前
|
Ubuntu 网络安全 图形学
Ubuntu学习笔记(二):ubuntu20.04解决右上角网络图标激活失败或者消失,无法连接有线问题。
在Ubuntu 20.04系统中解决网络图标消失和无法连接有线网络问题的方法,其中第三种方法通过检查并确保Windows防火墙中相关服务开启后成功恢复了网络连接。
727 0
Ubuntu学习笔记(二):ubuntu20.04解决右上角网络图标激活失败或者消失,无法连接有线问题。
|
11天前
|
机器学习/深度学习 人工智能 算法
深入解析图神经网络:Graph Transformer的算法基础与工程实践
Graph Transformer是一种结合了Transformer自注意力机制与图神经网络(GNNs)特点的神经网络模型,专为处理图结构数据而设计。它通过改进的数据表示方法、自注意力机制、拉普拉斯位置编码、消息传递与聚合机制等核心技术,实现了对图中节点间关系信息的高效处理及长程依赖关系的捕捉,显著提升了图相关任务的性能。本文详细解析了Graph Transformer的技术原理、实现细节及应用场景,并通过图书推荐系统的实例,展示了其在实际问题解决中的强大能力。
91 30
|
22天前
|
机器学习/深度学习 人工智能 自然语言处理
深度学习中的卷积神经网络(CNN): 从理论到实践
本文将深入浅出地介绍卷积神经网络(CNN)的工作原理,并带领读者通过一个简单的图像分类项目,实现从理论到代码的转变。我们将探索CNN如何识别和处理图像数据,并通过实例展示如何训练一个有效的CNN模型。无论你是深度学习领域的新手还是希望扩展你的技术栈,这篇文章都将为你提供宝贵的知识和技能。
71 7
|
20天前
|
数据采集 XML 存储
构建高效的Python网络爬虫:从入门到实践
本文旨在通过深入浅出的方式,引导读者从零开始构建一个高效的Python网络爬虫。我们将探索爬虫的基本原理、核心组件以及如何利用Python的强大库进行数据抓取和处理。文章不仅提供理论指导,还结合实战案例,让读者能够快速掌握爬虫技术,并应用于实际项目中。无论你是编程新手还是有一定基础的开发者,都能在这篇文章中找到有价值的内容。
|
22天前
|
云安全 监控 安全
云计算环境下的网络安全策略与实践
在数字化时代,云计算已成为企业和个人存储、处理数据的重要方式。然而,随着云服务的普及,网络安全问题也日益凸显。本文将探讨如何在云计算环境中实施有效的网络安全措施,包括加密技术、访问控制、安全监控和应急响应计划等方面。我们将通过具体案例分析,展示如何在实际场景中应用这些策略,以保护云中的数据不受威胁。
|
1月前
|
机器学习/深度学习 人工智能 自然语言处理
深度学习中的卷积神经网络:从理论到实践
【10月更文挑战第35天】在人工智能的浪潮中,深度学习技术以其强大的数据处理能力成为科技界的宠儿。其中,卷积神经网络(CNN)作为深度学习的一个重要分支,在图像识别和视频分析等领域展现出了惊人的潜力。本文将深入浅出地介绍CNN的工作原理,并结合实际代码示例,带领读者从零开始构建一个简单的CNN模型,探索其在图像分类任务中的应用。通过本文,读者不仅能够理解CNN背后的数学原理,还能学会如何利用现代深度学习框架实现自己的CNN模型。
|
1月前
|
数据采集 网络协议 算法
移动端弱网优化专题(十四):携程APP移动网络优化实践(弱网识别篇)
本文从方案设计、代码开发到技术落地,详尽的分享了携程在移动端弱网识别方面的实践经验,如果你也有类似需求,这篇文章会是一个不错的实操指南。
54 1
|
1月前
|
数据采集 存储 XML
Python实现网络爬虫自动化:从基础到实践
本文将介绍如何使用Python编写网络爬虫,从最基础的请求与解析,到自动化爬取并处理复杂数据。我们将通过实例展示如何抓取网页内容、解析数据、处理图片文件等常用爬虫任务。
205 1
|
2月前
|
弹性计算 人工智能 运维
Terraform从入门到实践:快速构建你的第一张业务网络(上)
本次分享主题为《Terraform从入门到实践:快速构建你的第一张业务网络》。首先介绍如何入门和实践Terraform,随后演示如何使用Terraform快速构建业务网络。内容涵盖云上运维挑战及IaC解决方案,并重磅发布Terraform Explorer产品,旨在降低使用门槛并提升用户体验。此外,还将分享Terraform在实际生产中的最佳实践,帮助解决云上运维难题。
145 1
Terraform从入门到实践:快速构建你的第一张业务网络(上)
|
28天前
|
监控 安全 网络安全
网络安全新前线:零信任架构的实践与挑战
网络安全新前线:零信任架构的实践与挑战
31 0

热门文章

最新文章