1
条回答
写回答
写回答
-
分布式文件系统按块（Block）存放数据，文件大小比块大小（64MB）小的文件称为小文件。分布式系统不可避免会产生小文件，比如SQL或其他分布式引擎的计算结果、Tunnel数据采集。合并小文件可以达到优化系统性能的目的。本文为您介绍如何在MaxCompute中合并小文件。
参考文档https://help.aliyun.com/zh/maxcompute/use-cases/merge-small-files?spm=a2c4g.11186623.0.i51
2024-06-02 09:04:46赞同 5 展开评论 打赏
问答地址：
开发者社区
>
大数据与机器学习
>
大数据开发治理DataWorks
>
问答
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
热门讨论
热门文章
DataWorks如何通过spark访问外网呢？
242
请教一下DataWorks，doris和starRocks 选型，选哪个？
636
运维中心有这个运行到该节点的功能么?
536
Dataphin和 Dataworks 有啥区别呢？
1012
数据服务报429请求次数过多咋办呀
1620
数据来源：com.alibaba.fastjson.JSONException: syntax er
3438
DataWorks我该如何访问A项目安装了项目的package资源？
809
阿里云有敏感词检测的API吗？可以用在PyODPS吗？
575
DataWorks这个业务日期怎么改成手动执行当天的日期，还有这个预警是否可以自定义文字？
42
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
1206
展开全部
DataWorks重磅推出全新资源组2.0，实现低成本灵活付费和动态平滑扩缩容
53552
DataWorks产品使用合集之如何判断资源组的数据源是否已经打通内网
460
DataWorks产品使用合集之对于ECS数据源的数据集成，是否需要使用独享调度资源和独享集成资源
425
大数据公共数据集上线，免费试用TB级数据分析
7214
数据中台的智能进化—阿里巴巴十二年数据平台发展历程
8252
DataWorks产品使用合集之标准代码如何导入模板下载
226
DataWorks操作报错合集之数据集成使用公共数据集成资源组写入到redis数据源（使用的是VPC连接），提示以下错误：request action:[InnerVpcGrantVpcInstanceAccessToApp], message:[InvalidInstanceId.怎么解决
237
2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
26372
DataWorks常见问题之如何将数据集成到oss链路
523
DataWorks产品使用合集之独享资源组ossutil配置文件路径是什么
167
展开全部
