DataWorks百问百答51:如何用独享资源组跑ADB、DLA节点?-阿里云开发者社区

开发者社区> zaid胡振宇> 正文

DataWorks百问百答51:如何用独享资源组跑ADB、DLA节点?

简介: 用独享跑ADB、DLA节点
+关注继续查看

DataWorks通过ADB、DLA等节点类型访问对应数据源介绍     

   您可以在Dataworks中新建AnalyticDB for MySQL、AnalyticDB for PostgreSQ、Data Lake AnalyticsL等节点,构建在线ETL数据处理流程。
(1)AnalyticDB for MySQL节点用于接入阿里云产品分析型数据库MySQL版,详情请参见分析型数据库MySQL版
(2)AnalyticDB for PostgreSQL节点用于接入阿里云产品分析型数据库PostgreSQL版,详情请参见分析型数据库PostgreSQL版
(3)Data Lake Analytics节点用于接入阿里云产品Data Lake Analytics,详情请参见什么是Data Lake Analytics

以AnalyticDB for MySQL为例:

1、首先需要在数据源配置界面,用连接串形式配置好数据源,jdbc地址用内网地址添加的话,在测试连通性时,默认是用默认资源组在访问,所以会存在网络不通的问题,因此,在我们配置完数据源信息后,可直接保存,跳过测试连通性,直接去建立AnalyticDB for MySQL节点任务。
image.png


image.png
2、建立好节点之后,选择上方添加好的的数据源,编辑逻辑处理查询等语句,即可在线ETL数据处理。
image.png


3、编写语句完成之后,保存,然后点击高级运行,选择独享调度资源组运行即可。
image.png


4、出于安全的考虑,数据库会有白名单的限制,因为平台所提供的默认资源组机器IP不固定,时常会出现网络访问不通的情况,所以推荐大家使用独享调度资源组来跑任务(购买的独享调度资源和数据源需要在同VPC同可用区下)。
     用独享资源组跑任务时,需要将独享资源组的EIP、网段信息和独享资源绑定的专有网络的IP网段(或绑定专有网络时选择的交换机网段)加至对应数据源的访问许可内。没有添加的话,会出现以下网络不通的情况:
Caused by: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure
image.png

注意:

再次提醒:独享资源组必须要和数据源在同VPC同可用区下,也要添加相应的网段至数据库白名单中,这样网络方可访问成功。

DataWorks百问百答历史记录 请点击这里查看>>

更多DataWorks技术和产品信息,欢迎加入【DataWorks钉钉交流群】

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
阿里云服务器怎么设置密码?怎么停机?怎么重启服务器?
如果在创建实例时没有设置密码,或者密码丢失,您可以在控制台上重新设置实例的登录密码。本文仅描述如何在 ECS 管理控制台上修改实例登录密码。
4028 0
hadoop2.5.2 启动成功后,用jps查看节点:发现少了DataNode
使用less ~/hadoop-2.5.2/logs/hadoop-zkpk-datanode-pxe01.log 查看日志得知: datanode的clusterID 和 namenode的clusterID 不匹配。
769 0
Dataworks调度能力升级——分支节点
在学习一门新的编程语言时,经常能在基础语法中看到赋值、分支、循环等语法。那用DataWorks进行数据开发的过程中,如何完成分支、赋值等操作呢?
1644 0
使用阿里云资源编排部署SAP单节点HANA
本文使用[阿里云资源编排服务(ROS)](https://www.aliyun.com/product/ros/)(下面简称ROS),在控制台中快速部署和安装SAP单节点HANA。 相较于原SAP HANA部署流程([SAP HANA 部署指南](SAP HANA 部署指南)),使用ROS部署只需要三步即可完成。不仅可以轻松创建SAP HANA需要的云资源,并且支持自动化部署和配置,简化了交
2470 0
DataWorks使用Shell节点调用自定义资源组执行脚本
本文主要介绍DataWorks使用Shell节点调度自定义资源组执行Shell脚本,且使用该功能需要用户的DataWorks版本为企业版。文中主要内容包括配置自定义资源组,以及设置ECS的amdin用户权限,脚本模式使用MaxCompute客户端,并配置手动业务流程执行对应的Shell脚本在开发环境运行,检测其脚本执行的命令是否正确。该功能对于用户调度用户ECS上的的程序提供了便利,使其他的任务能和DataWorks的调度结合起来。
1296 0
阿里云服务器如何登录?阿里云服务器的三种登录方法
购买阿里云ECS云服务器后如何登录?场景不同,阿里云优惠总结大概有三种登录方式: 登录到ECS云服务器控制台 在ECS云服务器控制台用户可以更改密码、更换系.
5712 0
任务不再等待!玩转DataWorks资源组
DataWorks提供了三种资源组的能力:独享资源组、自定义资源组和默认资源组,很多开发者在使用资源组时经常会碰到各类情况,到时候任务运行失败或者延迟,例如: 1. 正在使用默认资源组,任务经常要等待 2. 购买错了资源组类型(独享数据集成资源组与独享调度资源组),使用不了 3. 购买错了地域(杭州开通DataWorks购买了北京的资源组) 3. 没买错资源组类型,也没买错地域,当天还是用不了
525 0
阿里云ECS云服务器初始化设置教程方法
阿里云ECS云服务器初始化是指将云服务器系统恢复到最初状态的过程,阿里云的服务器初始化是通过更换系统盘来实现的,是免费的,阿里云百科网分享服务器初始化教程: 服务器初始化教程方法 本文的服务器初始化是指将ECS云服务器系统恢复到最初状态,服务器中的数据也会被清空,所以初始化之前一定要先备份好。
10744 0
DataWorks百问百答38:有哪些阿里云vpc环境数据源与数据集成独享资源组网络打通案例?
阿里云vpc环境数据源与数据集成独享资源组网络打通案例指导
1761 0
阿里云ECS云服务器初始化设置教程方法
阿里云ECS云服务器初始化是指将云服务器系统恢复到最初状态的过程,阿里云的服务器初始化是通过更换系统盘来实现的,是免费的,阿里云百科网分享服务器初始化教程: 服务器初始化教程方法 本文的服务器初始化是指将ECS云服务器系统恢复到最初状态,服务器中的数据也会被清空,所以初始化之前一定要先备份好。
2902 0
66
文章
2
问答
来源圈子
更多
+ 订阅
文章排行榜
最热
最新
相关电子书
更多
文娱运维技术
立即下载
《SaaS模式云原生数据仓库应用场景实践》
立即下载
《看见新力量:二》电子书
立即下载