开发者社区 问答 正文

你的项目提交到job的时候数据量有多大?

你的项目提交到job的时候数据量有多大?

展开
收起
茶什i 2019-10-29 14:21:48 1603 分享 版权
1 条回答
写回答
取消 提交回答
  • 1)回答出数据是什么格式,有没有采用什么压缩,采用了压缩的话,压缩比大概是多少;2)文件大概多大:大概起了多少个map,起了多少个reduce,map阶段读取了多少数据,reduce阶段读取了多少数据,程序大约执行了多久,3)集群什么规模,集群有多少节点,多少内存,多少CPU核数等。把这些点回答进去,而不是给个数字了事。

    2019-10-30 15:24:07
    赞同 展开评论
问答地址: