开发者社区> 问答> 正文

Dataphin中maxcompute 表存储突然变大一般是什么情况?

Dataphin中maxcompute 表存储突然变大一般是什么情况? 数据量比较稳定,表结构也没发生变化,但存储量突然变大了一倍左右。

展开
收起
嘟嘟嘟嘟嘟嘟 2024-05-01 08:54:54 34 0
2 条回答
写回答
取消 提交回答
  • 某政企事业单位运维工程师,主要从事系统运维及大数据开发工作,多次获得阿里云、华为云、腾讯云征文比赛一二等奖;CTF选手,白帽,全国交通行业网络安全大赛二等奖,手握多张EDU、CNVD、CNNVD证书

    当Dataphin中MaxCompute表的存储量突然增大一倍左右,且数据量与表结构保持稳定时,可能的原因包括:

    字段加密: 若表中数据进行了加密处理,即使数据量未变,加密过程可能导致存储空间需求增加,从而使得表的存储量变大。

    回收站数据未清理: 使用desc table_name查看的表大小可能包含了回收站中的数据。已删除的数据默认移入回收站,并继续占用存储空间。需执行purge table table_name来彻底删除并释放空间,之后重新desc table_name查看实际存储大小。

    请检查是否有上述情况发生,并采取相应措施解决存储异常增大的问题。

    Dataphin逻辑表任务运行时间超长 适用于

    大数据计算服务MaxCompute WITH参数

    2024-05-01 21:36:04
    赞同 展开评论 打赏
  • 您可以查一下看Max Computer表是不是有重复数据呀。此回答整理自钉群“Dataphin公共云答疑群”

    2024-05-01 10:00:04
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
问答排行榜
最热
最新

相关电子书

更多
Data+AI时代大数据平台应该如何建设 立即下载
大数据AI一体化的解读 立即下载
构建企业级好数据(Dataphin智能数据建设与治理白皮书) 立即下载