DataWorks配置OSS数据源操作步骤是什么?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks配置OSS数据源的主要操作步骤如下:
在控制台左 sidebar 点击 "资源管理",选择 "对象存储" 选项。
点击"新建对象存储"按钮,选择"阿里云OSS"。
填写数据源名称,选择要连接的OSS实例。
输入OSS实例的访问密钥(AccessKey ID和AccessKey Secret)。
填写具体的OSS路径。可以绝对路径或者相对路径。
设置读写属性:
只读:只能从OSS读取数据
读写:能够同时从OSS读取和向OSS写入数据
可选配置:
设置并发数
启用存储压缩
设置文件系统设置
点击"保存",DataWorks即可与OSS实例建立连接。
进入资源组,可以使用OSS Reader/Writer节点读取或写入OSS数据。
在任务中也可通过OSS URL访问OSS存储桶中的文件。
登录DataWorks控制台,单击目标项目栏中的进入数据集成。在数据集成页面,单击左侧导航栏的数据源,然后单击新增数据源。在新增数据源页面,选择OSS。在新增OSS数据源页面,按照页面提示进行参数配置。//help-static-aliyun-doc.aliyuncs.com/assets/img/zh-CN/6138915851/p85484.jpg参数 说明
数据源名称 为数据源指定一个名字,便于后续管理。
数据源描述 添加数据源描述,该项为可选填项。
Endpoint OSS EndPoint(地域节点),格式为http://oss.aliyuncs.com。
Bucket OSS Bucket名字。
Access Id OSS Bucket创建者的Access Id。
Access Key AccessKeyID对应的Key。如何获取AK信息,请参见获取账号的AK信息。完成上述参数配置后,单击测试连通性进行连通性测试,测试通过后单击完成。
https://help.aliyun.com/document_detail/144720.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。