开发者社区> 问答> 正文

MR作业读取表资源,Archive资源应该如何操作?

MR作业读取表资源,Archive资源应该如何操作?

展开
收起
芯在这 2021-12-08 17:21:09 331 0
1 条回答
写回答
取消 提交回答
  • MaxCompute上的资源(file, table, archive等)可以类比于Hadoop的DistributedCache来理解,同样是会分发到每个计算节点上去,worker再从本地来读取,因而资源文件不能过大,否则分发资源就是一个瓶颈,目前默认有2G的总资源大小限制。 读取资源表,Archive资源总体上来说和读取file类型资源是类似的,只是使用的接口不同。

    2021-12-08 17:21:27
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
HBase2.0重新定义小对象实时存取 立即下载
大批量处理excel文件到ODPS中方案 立即下载
俞航翔|基于Log的通用增量Checkpoint 立即下载

相关实验场景

更多