开发者社区> 问答> 正文

mapreduce 怎么给操作系统调优呢?

mapreduce 怎么给操作系统调优呢?

展开
收起
游客ydhxr2xydmgpo 2021-12-12 21:18:49 699 0
1 条回答
写回答
取消 提交回答
  • 1.增大打开文件数据和网络连接上限,调整内核参数net.core.somaxconn,提高读写速度和网络带宽使用率

    2.适当调整epoll的文件描述符上限,提高Hadoop RPC并发

    3.关闭swap。如果进程内存不足,系统会将内存中的部分数据暂时写入磁盘,当需要时再将磁盘上的数据动态换置到内存中,这样会降低进程执行效率

    4.增加预读缓存区大小。预读可以减少磁盘寻道次数和I/O等待时间

    5.设置openfile

    2021-12-12 21:24:42
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
开放算力·云启未来 立即下载
2022龙蜥操作系统生态用户实践精选 立即下载
冬季实战营第二期:Linux操作系统实战入门 立即下载