开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

采集一张数据量为8亿的表有什么优化方案嘛

采集一张数据量为8亿的表有什么优化方案嘛

展开
收起
游客6vdkhpqtie2h2 2022-09-27 10:01:23 469 0
1 条回答
写回答
取消 提交回答
  • 用DataWorks的数据集成,提升数据集成的速率有几个方法 走内网、增加并发、读端插件过滤条件中尽量使用索引字段避免全表扫描,避免或减少函数等复杂处理(此答案整理自MaxCompute开发者社区2群)

    2022-09-27 10:19:36
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关电子书

更多
腾讯TB级别的海量日志监控平台 立即下载
十亿级视频播放技术优化揭秘 立即下载
FLINK在大规模实时无效广告流量检测中的应用 立即下载