dataworks 中stepType为"odps"时reader可以多表查询?

dataworks 中stepType为"odps"时reader可以多表查询?odps reader脚本开发

展开
收起
真的很搞笑 2023-05-13 09:06:50 113 分享 版权
1 条回答
写回答
取消 提交回答
  • 使用脚本模式开发的详情请参见通过脚本模式配置任务。脚本配置样例如下所示,具体参数填写请参见参数说明。{"type":"job","version":"2.0",//版本号。"steps":[{"stepType":"loghub",//插件名。"parameter":{"datasource":"",//数据源。"column":[//字段。"col0","col1","col2","col3","col4","C_Category","C_Source","C_Topic","C_MachineUUID", //日志主题。"C_HostName", //主机名。"C_Path", //路径。"C_LogTime" //事件时间。],"beginDateTime":"",//数据消费的开始时间位点。"batchSize":"",//一次从日志服务查询的数据条数。"endDateTime":"",//数据消费的结束时间位点。"fieldDelimiter":",",//列分隔符。"logstore":""//:目标日志库的名字。},"name":"Reader","category":"reader"},{"stepType":"stream","parameter":{},"name":"Writer","category":"writer"}],"setting":{"errorLimit":{"record":"0"//错误记录数。},"speed":{"throttle":true,//当throttle值为flase时,mbps参数不生效,表示不限流;当throttle值为true时,表示限流。"concurrent":1 //作业并发数。"mbps":"12",//限流}},"order":{"hops":[{"from":"Reader","to":"Writer"}]}}说明 如果元数据配置JSON中有tag前缀,需要删除tag前缀。例如, https://help.aliyun.com/document_detail/137732.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-05-13 09:21:01
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

还有其他疑问?
咨询AI助理