DataWorks如何建立连接数据源的协议?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
可以通过以下步骤建立数据源协议:
登录DataWorks控制台,选择左侧"资源管理 -> 数据源"。
点击右上角的"新建协议",选择数据源类型。
数据源类型主要包括:
RDBMS: 如MySQL、SQL Server 等主流关系型数据库
NoSQL: 如MongoDB、Redis 等非关系型数据库
文件:OSS文件、HDFS文件等
码云工程:与Gitlab链接
特殊:CLICKHOUSE等特殊数据源
根据选择的数据源类型,填写对应的连接信息:
主机地址
端口
用户名密码
参数配置(如 railroad、kerberos 等)
根据您的数据源类型,DataWorks会提供对应的配置项模板。
完成后点击确定,即可新建数据源协议。
DataWorks支持基于SSL和不加密的两种连接方式。
您也可以编辑、复制已有的数据源协议。
通过新建/编辑协议,您就与数据源建立了连接。
此后,您可以在DataWorks中使用此协议连接到对应的外部数据源。
进入数据源管理页面。登录DataWorks控制台。在左侧导航栏,单击工作空间列表。选择工作空间所在地域后,单击相应工作空间后的进入数据集成。在左侧导航栏,单击数据源 > 数据源列表,进入工作空间管理 > 数据源管理页面。在数据源管理页面,单击右上角的新增数据源。在新增数据源对话框中,选择数据源类型为Kafka。在新增Kafka数据源对话框中,配置各项参数。配置数据源的基本信息。Kafka数据源包括阿里云实例模式和连接串模式两种类型。以新增阿里云实例模式类型的数据源为例,配置数据源的基本信息。
参数 描述
数据源类型 当前选择的数据源类型为阿里云实例模式。
数据源名称 数据源名称必须以字母、数字、下划线()组合,且不能以数字和下划线()开头。
数据源描述 对数据源进行简单描述,不得超过80个字符。
适用环境
地区 选择需要同步的Kafka实例所在的地域。
实例ID 输入需要同步的Kafka实例ID。您可以登录Kafka管控台,进入实例列表页面,获取实例ID。以新增连接串模式类型的数据源为例,配置数据源的基本信息。
参数 描述
数据源类型 当前选择的数据源类型为连接串模式。
数据源名称 数据源名称必须以字母、数字、下划线()组合,且不能以数字和下划线()开头。
数据源描述 对数据源进行简单描述,不得超过80个字符。
适用环境
Kafka集群地址 Kafka集群Broker的IP地址和端口,即Kafka实例的接入点信息。您可以登录Kafka管控台,进入实例列表页面,单击实例名称,在实例详情页获取接入点信息。 多个Broker地址之间使用逗号(,)分隔,示例为10.0.0.1:9092,10.0.0.2:9092。配置数据源的认证信息。第三方认证机制用于用户和服务的强身份验证,通过该机制,可以有效的避免不受信任的程序或服务来获取数据访问权限,提高数据同步过程中访问数据资源的安全性。DataWorks在配置Kafka数据
https://help.aliyun.com/document_detail/210937.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。