开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

dataworks中数据源配置备库,并且数据集成使用独享资源组,为什么还会走主库?

dataworks中数据源配置备库,并且数据集成使用独享资源组,为什么还会走主库?

展开
收起
刮胡子的23号 2022-09-05 18:30:10 1408 0
4 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    既然是配置了备库,那么主库有没有异常呢?假如还没有到切换主库的级别,那肯定不会走的呀,所以还是要确认配置的。

    2022-11-30 22:27:07
    赞同 展开评论 打赏
  • 十年摸盘键,代码未曾试。 今日码示君,谁有上云事。

    DataWorks支持公共资源组、独享资源组和自定义资源组。各类资源组属性说明与选择指导详见下面链接:

    https://help.aliyun.com/document_detail/158096.html?share_token=c5bce2ca-b40a-422b-9219-5b3bf5a45ce7&tt_from=copy_link&utm_source=copy_link&utm_medium=toutiao_android&utm_campaign=client_share - DataWorks资源组概述-阿里云 - 今日头条

    目前DataWorks的独享资源组提供了2种:独享调度资源组和独享数据集成资源组。

    独享目前不能支持跨租户节点、机器学习任务;其余支持 购买独享资源组的时候,务必要注意购买与自己VPC在同一个可用区 切换任务资源组的时候: 注意每种任务类型都需要测试验证:网络是否已经打通。

    特别特别注意: 1、在运维中心任务修改资源组周期任务是需要第二天才会生效,及时生效可以通过测试或者补数据运行即可; 2、__一定要先单个测试在批量修改,__一定要先单个测试在批量修改,__一定要先单个测试在批量修改 3、如果有网络打通的,优先将网络打通,可以在测试的时候验证出来的;

    特别特别注意:可用区需要跟您的VPC在一个可用区:(就是你的任务是否需要访问VPC地址,比如访问ads、adb等,就需要跟次VPC在一个可用区)如果没有可用,提工单!

    特别特别注意:虚节点、工作流、机器学习等任务类型不要选择上,因为这些不支持资源组修改;具体详见下面链接:

    https://blog.csdn.net/yunqiinsight/article/details/104998980?share_token=66217ad5-10b9-4b54-8437-af5506d39f5d&tt_from=copy_link&utm_source=copy_link&utm_medium=toutiao_android&utm_campaign=client_share - 任务不再等待!玩转DataWorks资源组_阿里云云栖号的博... - 今日头条

    2022-11-26 16:28:45
    赞同 展开评论 打赏
  • 可以检查下如下操作,是否配置的备库。 独享数据集成资源组创建成功后,您需要在配置数据集成任务时修改任务运行资源。 1、在资源组列表 > 独享资源组页面,单击相应资源后的修改归属工作空间,绑定独享数据集成资源组归属的工作空间。 2、在数据集成任务的编辑页面,通过调度运行及界面测试,选择运行时执行数据集成离线同步任务的资源组: - 单击左上角的全部图标,选择全部产品 > 数据开发 > DataStudio(数据开发),并切换至修改的归属工作空间。 - 在数据开发面板,双击打开相应节点的编辑页面。 - 单击右侧的数据集成资源组配置。 - 在数据集成资源组配置对话框中,选择相应的方案和资源组。 image.png

    2022-11-25 00:59:47
    赞同 展开评论 打赏
  • 可以排查一下是不是数据集成部分的数据源没有切换过来

    2022-11-23 19:38:35
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关电子书

更多
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载