开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks如何配置查看数据同步任务创建同步解决方案任务?

DataWorks如何配置查看数据同步任务创建同步解决方案任务?

展开
收起
真的很搞笑 2023-10-29 19:00:30 53 0
4 条回答
写回答
取消 提交回答
  • 在DataWorks中,配置查看数据同步任务创建同步解决方案任务的步骤如下:

    1. 首先,您需要完成数据源、网络和资源的准备配置。具体来说,您应先配置好需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源名称来控制同步任务的读取和写入数据库。

    2. 完成上述准备工作后,您可以根据同步场景选择相应的同步解决方案。这些解决方案可能因同步方案的不同而存在差异,因此请以界面为准。

    3. 随后,您可以开始创建并执行同步任务,将源端数据成功同步至目标端。

    4. 除了基本的全量同步,DataWorks的数据集成还支持实时同步功能。例如,您可以创建实时同步节点,将数据同步至Hologres。此外,同步解决方案也支持整库内批量同步多张表,以及全量、增量数据一体化同步,即先同步全量数据,再实时同步增量数据。

    5. 在任务创建完成后,您还可以查看和管理同步任务。例如,可以查看已同步的数据量和记录数。

    2023-10-30 22:14:41
    赞同 展开评论 打赏
  • 在DataWorks中,配置查看数据同步任务创建同步解决方案任务的具体步骤如下:

    1. 登录到DataWorks控制台。

    2. 在左侧导航栏中,点击"数据集成"。

    3. 在数据集成页面中,找到并点击你需要查看的数据同步任务。

    4. 在弹出的页面中,你可以看到"创建同步解决方案任务"的选项。点击它,然后按照提示进行操作,就可以创建一个新的同步解决方案任务了。

    5. 在新打开的页面中,你可以配置同步解决方案任务的详细信息,包括源端数据源、目标端数据源、网络连通性等。配置完成后,点击"保存"按钮,就可以保存并执行这个任务了。

    6. 在执行过程中,你可以通过DataWorks的控制台监控任务的执行情况。如果发现任何问题,你可以随时停止任务,然后进行修改和优化。

    总的来说,配置查看数据同步任务创建同步解决方案任务的过程相对简单,只需要几步就可以完成。但是,具体的配置可能会根据你的具体需求和环境有所不同,因此在实际操作中,你可能需要根据实际情况进行调整。

    2023-10-30 14:43:44
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    要在 DataWorks 中配置查看数据同步任务创建同步解决方案任务,可以按照以下步骤操作:

    1. 登录 DataWorks 控制台。
    2. 在左侧导航栏中单击【数据集成】> 【数据同步】。
    3. 单击【同步解决方案】。
    4. 在解决方案任务列表页面中点击【新建同步任务】,选择要同步的解决方案。
    5. 配置任务参数,如目标表、源表、过滤条件等。
    6. 配置完毕后点击【保存】,然后就可以开始任务了。
    2023-10-30 11:38:47
    赞同 展开评论 打赏
  • 登录并进入数据集成页面,单击同步解决方案 > 任务列表,进入同步解决方案页面。操作详情可参见进入同步解决方案。在解决方案任务列表页面,单击右上方的新建任务。在新建同步解决方案对话框中,单击一键实时同步至Hologres。完成方案名称等基本信息配置。在基本配置区域,配置各项参数。image.png
    参数 描述
    方案名称 同步解决方案的名称,最多支持50个字符。
    描述 对当前方案进行简单描述,最多支持50个字符。
    目标任务存放位置 默认创建一个新的业务流程,所有任务均以clonedatabase源端数据源名称+to+目标数据源名称的命名方式存放至数据集成目录下。 您也可以取消自动建立工作流程,在选择位置下拉列表中指定存放目标任务的路径。选择来源数据源并配置同步规则。在数据来源区域,选择类型和数据源。说明 仅支持选择MySQL、Oracle和PolarDB类型的数据源。在选择同步的源表区域,选中需要同步的源表,单击image.png
    图标,将其移动至已选源表。该区域会为您展示所选数据源下所有的表,您可以选择整库全表或部分表进行同步。注意 如果选中的表没有主键,将无法进行实时同步。在设置表名的映射规则区域,单击添加规则,选择相应的规则进行添加。同步规则包括源表名和目标表名转换规则和目标表名规则:源表名和目标表名转换规则:转换表名为目标表名,进行字符串替换。目标表名规则:支持对转换后的表名添加前缀和后缀。单击下一步。选择目标数据源并配置目标表格式。在设置目标表页面,选择目标Hologres数据源和该数据源下的Schema,并设置是否开启表名大小写敏感。单击刷新源表和Hologres表映射,创建需要同步的源表和目标Hologres表的映射关系。查看任务的执行进度和表来源。https://help-static-aliy
    https://help.aliyun.com/document_detail/171766.html
    image.png
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-29 23:29:48
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多