问题一:DataWorks如何设置环境变量哈,便于spark 运行任务时动态获取?
DataWorks如何设置环境变量哈,便于spark 运行任务时动态获取?我本意是想把敏感信息 放到环境变量里,在任务运行时动态获取,
类似这种情况
参考回答:
调度参数需要获取开发环境和生产环境么?这篇是哪里看到的文档呀,目前工作空间参数看是否满足需求 https://help.aliyun.com/zh/dataworks/user-guide/use-workspace-parameters?spm=a2c4g.11186623.0.i19
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/629397
问题二:DataWorks中API有没有办法能获取得到循环内部节点的id?
DataWorks中API有没有办法能获取得到循环内部节点的id?
参考回答:
可以参考看下
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/629396
问题三:DataWorks生产空间A的调度账号怎么能访问生产空间B所有表呢?
DataWorks生产空间A的调度账号怎么能访问生产空间B所有表呢?
参考回答:
1.在目标项目(本demo的项目名称为your_projectname)中创建一个自定义角色
create role select_only_role;
2.为自定义角色select_onlyrole对项目内所有表(包括未来项目内新建的表)赋予Select权限
项目下的所有表_
GRANT SELECT ON table * TO Role select_only_role privilegeproperties("policy" = "true");
3.给用户赋予自定义角色权限(也可以在Dataworks的自定义角色web-ui界面里,添加某个成员到该自定义角色下)_
grant role select_only_role to RAM$account@company_name.com:ram_account01;
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/629395
问题四:DataWorks数据同步支持Elasticsearch Serverless版的吗?
DataWorks数据同步支持Elasticsearch Serverless版的吗?
参考回答:
可以参考看下支持的版本
关于本问题的更多回答可点击原文查看:
https://developer.aliyun.com/ask/629394
问题五:DataWorks这个统计的是标准存储的top n吗,低频存储和长期存储不统计是吗?
DataWorks这个统计的是标准存储的top n吗,低频存储和长期存储不统计是吗?数据地图里面的
参考回答:
可以参考看下存储量的说明
desc extended tbname; 返回上面的size是逻辑存储 下面的是物理存储 ,物理存储是包含所有长期、低频数据的 逻辑存储 您观察看下 ,从返回信息里也可以看到分层存储的相关信息
存储量topn是根据每张表的存储量排序 数据地图的存储量是使用的逻辑存储量
关于本问题的更多回答可点击原文查看: