开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

DataWorks中MaxCompute Writer参数说明?

DataWorks中MaxCompute Writer参数说明?

展开
收起
cuicuicuic 2023-08-16 12:14:19 44 0
1 条回答
写回答
取消 提交回答
  • 参数说明:

    tableName:读取MaxCompute表的表名,为必填字段。
    partition:读取MaxCompute表的分区列,为非必填字段。
    partitionSpec:分区列的具体分区,为非必填字段。
    where:DataWorks任务SQL语句中的where条件,为非必填字段。
    queryMode:读取方式,目前支持两种读取方式,分别是Query和Batch。Query模式是通过执行一条select语句的方式读取数据,Batch模式是通过执行一条load语句的方式读取数据。默认是Query模式。
    querySql:执行SQL语句查询数据时,指定SQL语句。为Query模式时,该参数必填。
    queryArgs:执行SQL语句查询数据时,指定SQL语句的参数。为Query模式时,该参数必填。
    maxParallelism:读取并行度,默认值是1。
    maxRetryTimes:读取失败重试次数,默认值是3。
    maxRetryInterval:两次重试之间的间隔时间,单位为秒,默认值是10。
    timeZone:指定MaxCompute表的数据时区,默认情况下,DataWorks会按照MaxCompute表的默认时区读取数据。
    columnDelimiter:MaxCompute表中列的分隔符,默认值是,。
    fieldDelimiter:MaxCompute表中记录的分隔符,默认值是\n。
    encoding:MaxCompute表的编码,默认值是UTF-8。
    maxRows:读取数据的最大行数,默认值是-1,表示不限制行数。
    columnNames:读取的列列表,为非必填字段。
    columnTypes:读取的列类型列表,为非必填字段。
    columnProps:读取的列属性列表,为非必填字段。
    partitionDelimiter:MaxCompute表的分区列的分隔符,默认值是,。
    partitionProps:MaxCompute表的分区列的属性列表,为非必填字段。
    dateFormat:MaxCompute表中日期列的日期格式,为非必填字段。
    timestampFormat:MaxCompute表中时间戳列的时间戳格式,为非必填字段。
    decimalFormat:MaxCompute表中小数列的小数格式,为非必填字段。

    2023-09-22 10:54:04
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 热门讨论

    热门文章

    相关电子书

    更多
    开源大数据治理体系构建—助力游戏行业数据化运营 立即下载
    用友助力数据平台构建,驱动企业创新 立即下载
    MongoDB 应用数据平台助力快速构建您的应用 立即下载