AI 助理
备案控制台
开发者社区 问答 正文

使用OSS外部表如何将多个小文件，输出为一个文件？

使用OSS外部表如何将多个小文件，输出为一个文件？

展开
收起
芯在这 2021-12-10 17:28:14 527 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 真的很搞笑

    查看Logview日志，看SQL的执行计划，看最后一个是Reducer还是Joiner,

    如果是Reducer则设置参数为set odps.stage.reducer.num=1,

    如果是Joiner，则设置为set odps.stage.joiner.num=1。

    2021-12-10 17:28:28
    赞同 展开评论
问答分类：
对象存储 对象存储
问答标签：
对象存储文件 对象存储外部表 对象存储小文件 对象存储外部表文件 对象存储输出
问答地址：
开发者社区 > 云计算 > 问答
相关问答
大数据计算MaxCompute中dataworks创建oss外部表时，此时的分区是怎么设置的？
106
1
0
MaxCompute完成STS授权后如何创建oss外部表
80
1
0
大数据计算MaxCompute 创建oss外部表的时候，报这个错是权限问题吗？
107
0
0
大数据计算MaxCompute使用odps 命令行创建oss外部表失败，如何解决？
89
1
0
在Hologres中想问一下 holoweb里面 oss数据湖加速这个 可以创建 oss外部表 吗？
82
0
0
在Hologres中使用Holo往OSS的外部表写数据的时候出现了OOM这是对写入的数据量有限制吗？
82
0
0
DataWorks把oss的 多层目录下的json数据映射 oss外部表， 不知道能做成吗 ？
128
9
0
MaxCompute创建oss外部表写入数据可以不创建.odps/路径吗
86
1
0
DataWorks数据在oss，我在maxcompute中创建外部表这样操作数据源一直在oss对吧？
89
1
0
将Hologres数据写入OSS会切分成小文件的依据是什么
50
1
0