ModelScope的Qwen-14B-Chat-Int4 最大回复token是多少,哪可以查询呢?

ModelScope的Qwen-14B-Chat-Int4 最大回复token是多少,哪里可以查询呢, 有没有一个标准,最大值之类的嘛?

展开
收起
陈幕白 2023-12-13 16:36:50 264 分享 版权
1 条回答
写回答
取消 提交回答
  • 模型卡片代码debug,model.chat()那里点进去,一般llm会有max_length或max_new_tokens可以设置,您先设置大一点,比如1024,看一下生成内容是否有重复、效果不好等情况,再调整 此回答整理自钉群 “魔搭ModelScope开发者联盟群 ①”

    2023-12-13 17:04:04
    赞同 展开评论

包含图像分类、图像生成、人体人脸识别、动作识别、目标分割、视频生成、卡通画、视觉评价、三维视觉等多个领域

热门讨论

热门文章

还有其他疑问?
咨询AI助理