问题一:dataworks中如果主账号B下的任务需要依赖主账号A下的数据,请问可以怎么设置依赖关系?
dataworks中如果主账号B下的任务需要依赖主账号A下的数据,请问可以怎么设置依赖关系?
参考答案:
不支持跨账号挂调度依赖哈
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/588707?spm=a2c6h.12873639.article-detail.97.50004378VNVksZ
问题二:dataworks odps中创建的表,如何保证主键唯一?
dataworks odps中创建的表,如何保证主键唯一?
参考答案:
odps的表不支持主键,需要你再业务上面保证主键唯一,odps本身没有pk的概念 只能在业务上保证业务主键唯一 建议也可以给表配置上数据质量规则 校验业务主键字段唯一 https://help.aliyun.com/zh/dataworks/getting-started/configure-rules-to-monitor-data-quality?spm=a2c4g.11186623.0.0.56104cc18sQnlJ
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/588706?spm=a2c6h.12873639.article-detail.98.50004378VNVksZ
问题三:dataworks中有一个非分区表是订单表,请问一下,MR任务对源表的数量是否有限制?
dataworks中有一个非分区表是订单表,然后我建了一个MR任务从里面读取所有支付成功的订单数据,分按天查分金额到一个新的表,但是我发现拆分后的表里数据并不全,很多数据没有进来。请问一下,MR任务对源表的数量是否有限制,目标的表的记录数量是否有上限。会不会是因为是非分区表导致数量超过了要求上限所认才进不来?
参考答案:
这可能得先从脚本逻辑自查一下 少了哪部分数据 ,或者可以看下是不是from的数据本身还未产出 任务就开始执行了 导致读到的数据少了或者为0 最终当前表产出的数据也会为0
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/588705?spm=a2c6h.12873639.article-detail.99.50004378VNVksZ
问题四:麻烦看下这是dataworks什么问题?
麻烦看下这是dataworks什么问题?{"code":500120,"requestId":"0bc20d3a17046781588413930e9b99","url":"https://bff-ap-south-1.data.aliyun.com/resg/listResourceGroups"}
参考答案:
根据您提供的错误信息,DataWorks返回了一个500120错误码。这个错误码通常表示服务器内部错误,可能是由于服务器配置问题、资源不足或其他系统级问题导致的。
为了解决这个问题,您可以采取以下步骤:
- 检查您的网络连接是否正常,确保您可以访问到DataWorks服务。
- 查看DataWorks的日志文件,以获取更详细的错误信息。您可以在DataWorks控制台中找到日志文件的位置,并使用适当的工具(如curl或浏览器)下载和查看它们。
- 如果可能的话,尝试重启DataWorks服务,以排除临时性的服务器问题。
- 如果问题仍然存在,您可以考虑联系DataWorks的支持团队,向他们报告这个问题并提供相关的错误信息。他们可能会为您提供更具体的解决方案。
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/588704?spm=a2c6h.12873639.article-detail.100.50004378VNVksZ
问题五:dataworks这个定义的 today 在调试参数预览里可以赋值到今天日期,这个怎么配置?
dataworks这个定义的 today 在调试参数预览里可以赋值到今天日期,但在执行的时候就不能直接赋值了,这个怎么配置?
参考答案:
可以参考下【数据开发界面三种运行方式】
运行:第一次运行后,您需要手动为该变量赋值常量,第一次赋值会被记录。如果对代码进行修改,该变量依旧使用第一次运行时的赋值。
高级运行:高级运行时,您需要手动为当前代码中的变量进行赋值常量,如果修改了代码中的变量,请使用高级运行给变量重新赋值常量。
开发环境执行冒烟测试:通过手动选择业务日期模拟节点自动调度的场景,获取当前业务日期下调度参数的替换值。
如果要修改任务执行资源组,请使用“高级运行”。
【三种运行按钮关于变量赋值区别】
关于本问题的更多回答可点击进行查看:
https://developer.aliyun.com/ask/588703?spm=a2c6h.12873639.article-detail.101.50004378VNVksZ