开发者社区 问答 正文

BladeDISC与TensorRT等推理优化工具相比有哪些优势?

BladeDISC与TensorRT等推理优化工具相比有哪些优势?

展开
收起
冲冲冲c 2024-08-05 18:30:19 58 分享 版权
1 条回答
写回答
取消 提交回答
  • BladeDISC相比TensorRT等推理优化工具的优势包括:完备的动态shape语义支持,基于compiler based的技术路径在非标准模型上的性能优势,以及更为灵活的部署模式选择,以插件形式支持前端框架的透明性优势。

    2024-08-05 21:10:35
    赞同 1 展开评论
问答地址: