DataWorks中MaxCompute Writer参数说明?
参数说明:
tableName:读取MaxCompute表的表名,为必填字段。
partition:读取MaxCompute表的分区列,为非必填字段。
partitionSpec:分区列的具体分区,为非必填字段。
where:DataWorks任务SQL语句中的where条件,为非必填字段。
queryMode:读取方式,目前支持两种读取方式,分别是Query和Batch。Query模式是通过执行一条select语句的方式读取数据,Batch模式是通过执行一条load语句的方式读取数据。默认是Query模式。
querySql:执行SQL语句查询数据时,指定SQL语句。为Query模式时,该参数必填。
queryArgs:执行SQL语句查询数据时,指定SQL语句的参数。为Query模式时,该参数必填。
maxParallelism:读取并行度,默认值是1。
maxRetryTimes:读取失败重试次数,默认值是3。
maxRetryInterval:两次重试之间的间隔时间,单位为秒,默认值是10。
timeZone:指定MaxCompute表的数据时区,默认情况下,DataWorks会按照MaxCompute表的默认时区读取数据。
columnDelimiter:MaxCompute表中列的分隔符,默认值是,。
fieldDelimiter:MaxCompute表中记录的分隔符,默认值是\n。
encoding:MaxCompute表的编码,默认值是UTF-8。
maxRows:读取数据的最大行数,默认值是-1,表示不限制行数。
columnNames:读取的列列表,为非必填字段。
columnTypes:读取的列类型列表,为非必填字段。
columnProps:读取的列属性列表,为非必填字段。
partitionDelimiter:MaxCompute表的分区列的分隔符,默认值是,。
partitionProps:MaxCompute表的分区列的属性列表,为非必填字段。
dateFormat:MaxCompute表中日期列的日期格式,为非必填字段。
timestampFormat:MaxCompute表中时间戳列的时间戳格式,为非必填字段。
decimalFormat:MaxCompute表中小数列的小数格式,为非必填字段。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。