你好,MaxComputer压缩是怎么压缩的呢?有的表压缩比达到10几倍,有的表才3倍
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
主要看字段里值的内容,相似的内容在一起压缩率高,当前MaxCompute的底层目录结构以及压缩部分没有对外透出。 ,此回答整理自钉群“MaxCompute开发者社区1群”
MaxCompute支持多种列式存储压缩格式,包括LZO、Snappy、GZip、BZIP2和ZLIB。
MaxCompute的压缩分为两种:块压缩和字典压缩。主要区别在于对数据的处理方式、压缩效果和压缩解压缩的速度。
压缩解压缩的速度不仅取决于压缩格式,也与具体的硬件配置、压缩解压缩的算法、压缩文件大小等因素相关。因此,在选择压缩格式时,需要综合考虑数据读写的频率、数据存储量、计算性能等因素。
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。