现在modelscope 的Pipeline无法支持Qwen-7B-Chat吗?

我这边试了很多次方式都不行。都会报错。model = AutoModelForCausalLM.from_pretrained("qwen/Qwen-7B-Chat", revision='v1.0.5', device_map="auto", trust_remote_code=True, fp16=True).eval()

pipeline = Pipeline(Tasks.text_generation, model=model)
这种类型的代码会报错

generator = pipeline(Tasks.text_generation, model='hy-tmp/bigmodel/qwen/Qwen-7B-Chat')
这种直接加载路径的也会报错。

所以现在是不是modelscope 的Pipeline无法支持Qwen-7B-Chat吗?modelscope 的Pipeline有支持模型的列表吗?

展开
收起
游客ga43makp7qprc 2024-05-05 17:28:25 367 分享 版权
1 条回答
写回答
取消 提交回答
  • 同问,遇到AssertionError: Attribute pipeline is missing from configuration.json

    2024-05-07 16:13:24
    赞同 5 展开评论

ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352

还有其他疑问?
咨询AI助理