开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中如何新增自定义数据集成资源组背景信息?

DataWorks中如何新增自定义数据集成资源组背景信息?

展开
收起
cuicuicuic 2023-07-16 14:23:58 41 0
3 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在 DataWorks 中,新增自定义数据集成资源组需要提供以下背景信息:

    资源组名称:用于标识自定义数据集成资源组的名称,可以根据需要进行自定义。

    所属项目:用于将自定义数据集成资源组归类到指定的项目中,方便管理和查找。

    描述信息:用于对自定义数据集成资源组进行描述,可以提供一些详细说明和备注信息。

    资源类型:用于指定自定义数据集成资源组中的数据源类型,包括 MySQL、Oracle、PostgreSQL、FTP 等。

    连接信息:用于指定自定义数据集成资源组需要连接的数据源信息,包括主机名、端口号、用户名、密码等。

    高级选项:用于指定一些高级的配置选项,如数据同步模式、同步频率、数据清洗等。

    2023-07-21 16:18:59
    赞同 展开评论 打赏
  • 在DataWorks中,您可以通过以下步骤新增自定义数据集成资源组的背景信息:

    1. 登录到DataWorks控制台,并进入相应的项目。

    2. 在左侧导航栏中,选择 "开发者工具" > "数据集成"。

    3. 在数据集成页面中,选择 "资源管理"。

    4. 在资源管理页面中,您可以看到已经存在的资源组列表。找到您要新增背景信息的资源组。

    5. 点击该资源组的名称,进入资源组详情页面。

    6. 在资源组详情页面中,点击 "编辑" 按钮来编辑资源组的属性。

    7. 在编辑资源组属性页面中,可以看到 "背景信息" 标签页。点击该标签页。

    8. 在 "背景信息" 页面中,您可以新增或修改资源组的背景信息。您可以输入文本、插入图片、设置字体样式等来展示自定义的背景信息。

    9. 完成背景信息的编辑后,点击 "保存" 按钮以保存更改。

    注意事项:

    • 背景信息主要用于展示资源组的描述、说明、版本等信息,可以帮助团队成员更好地了解和使用该资源组。
    • 背景信息支持富文本编辑,您可以自由地调整字体、颜色、对齐方式等样式。
    • 请确保您有足够的权限来编辑资源组的背景信息。
    2023-07-17 13:58:56
    赞同 展开评论 打赏
  • 您可以新增自定义资源组运行数据同步任务,解决DataWorks公共资源组与您的数据源不通的问题,实现更高速的传输。项目管理员可以在数据集成 > 自定义资源组页面新增或修改自定义资源组。说明注册服务器时,仅华东2(上海)支持选择经典网络的方式注册(输入主机名),建议您优先使用专有网络VPC。其它区域只能选择专有网络方式注册(输入UUID)。自定义资源组上运行的部分文件需要Admin权限。例如,在Shell脚本任务中,调用您购买的ECS上的Shell文件、SQL文件等。调度资源组主要用于调度任务,资源有限,不适合用于计算任务,所以不推荐在调度资源组上安装数据处理模块。MaxCompute具有海量数据处理能力,推荐您通过MaxCompute进行大数据计算。自定义数据集成资源组的使用限制如下:自定义资源组所在的ECS服务器的时间与当前互联网时间差必须在2分钟之内,否则会导致部署的自定义资源组服务请求接口超时服务异常,无法执行任务。一台机器只能添加一个自定义资源组,每个自定义资源组只能选择一种网络类型。您在数据集成 > 自定义资源组页面添加的自定义资源组,只能给当前工作空间作为数据同步资源组使用,不会显示在资源组列表页面。详情请参见查看资源组列表。 在该页面添加的自定义资源组,不支持手动业务流程的数据同步节点。如果您发现alisatasknode日志中有超时报错信息response code is not 200,通常是因为某个时段访问服务接口不稳定的异常导致。只要不是持续10分钟异常,自定义资源组服务器就依然可以正常服务。您可以查看日志/home/admin/alisatasknode/logs/heartbeat.log进行确认。
    https://help.aliyun.com/document_detail/136934.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-16 14:32:50
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载