开发者社区> 问答> 正文

PRMalloc是如何针对稀疏模型训练优化内存使用效率和系统性能的?

PRMalloc是如何针对稀疏模型训练优化内存使用效率和系统性能的?

展开
收起
不吃核桃 2024-08-07 18:15:53 56 0
1 条回答
写回答
取消 提交回答
  • PRMalloc是DeepRec中设计的一套针对深度学习任务的内存管理方案,它能够极大降低训练过程中minor pagefault,提高多线程并发内存分配、释放的效率。这对于稀疏模型训练尤为重要,因为稀疏场景模型训练中大块内存分配使用常导致大量minor pagefault,且多线程分配效率存在并发分配效率问题。
    image.png

    2024-08-07 18:40:56
    赞同 2 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
大规模机器学习在蚂蚁+阿里的应用 立即下载
阿里巴巴机器学习平台AI 立即下载
机器学习及人机交互实战 立即下载