开发者社区 > ModelScope模型即服务 > 多模态 > 正文

是否可以拿到encoder的输出,修改decoder的输入

已解决

专家您好,我是否可以 1 拿到encoder的输出 2 修改decoder的输入

展开
收起
叫我饭啊啊 2023-02-24 09:41:26 646 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    可以的,参考源代码就能够拿到 encoder输出:https://github.com/modelscope/modelscope/blob/master/modelscope/models/multi_modal/ofa/modeling_ofa.py#L2100 decoder输入:https://github.com/modelscope/modelscope/blob/master/modelscope/models/multi_modal/ofa/modeling_ofa.py#L2120 都可以改

    2023-02-24 10:33:42
    赞同 展开评论 打赏

包含图像描述、文本生成图片、版面分析、多模态表征、视觉问答、文档理解等多个领域

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载