开发者社区> 问答> 正文

ECS机器部署中任务配置的配置代码要注意那些内容?

ECS机器部署中任务配置的配置代码要注意那些内容?

展开
收起
游客fbdr25iajcjto 2021-12-12 22:17:31 1166 0
1 条回答
写回答
取消 提交回答
  • path:hive表hdfs文件路径(注意格式);

    defaultFS: hdfs文件系统namenode节点地址(注意格式);

    index:hdfs数据文本第几列,以0开始。

    Type:hdfs数据对应datax的类型,请看hdsf&datax类型对照表;

    fileType: hdfs数据文件类型;

    encoding: hdfs数据文件的编码;

    fieldDelimiter: hdfs数据文件字段分隔符。 Odpswriter

    project: MaxCompute目标表所属项目名称;

    table: MaxCompute目标表名称;

    partition:表分区值,此case直接用固定值;

    column:目标表列,注意顺序与reader的列顺序一一对应;

    accessId:写入目标表所用的云账号access id;

    accessKey:写入目标表所用的云长access key;

    truncate:写入前是否清空当前表/分区数据,需要清空就true,需要保留就false。

    2021-12-12 22:18:38
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
如何运维千台以上游戏云服务器 立即下载
网站/服务器取证 实践与挑战 立即下载
ECS快储存加密技术 立即下载