开发者社区> 问答> 正文

ModelScope中按照bert的代码范例调用,这个错误是什么呀?

ModelScope中按照bert的代码范例调用,这个错误是什么呀?

lQLPJwHExtEnG47NAdLNCEiw8whr-NLSDN8Dhgg03QDqAA_2120_466.png

The tokenizer class you load from this checkpoint is not the same type as the class this function is called from. It may result in unexpected tokenization. The tokenizer class you load from this checkpoint is 'BertTokenizer'. The class this function is called from is 'SbertTokenizer'. 2022-12-02 15:01:31,811 - modelscope - INFO - The key of sentence1: first_sequence, The key of sentence2: None, The key of label: label INFO:modelscope:The key of sentence1: first_sequence, The key of sentence2: None, The key of label: label /opt/conda/lib/python3.7/site-packages/transformers/modeling_utils.py:764: FutureWarning: The device argument is deprecated and will be removed in v5 of Transformers. "The device argument is deprecated and will be removed in v5 of Transformers.", FutureWarning

展开
收起
fuxixi 2022-12-02 17:10:04 668 0
1 条回答
写回答
取消 提交回答
  • 网站:http://ixiancheng.cn/ 微信订阅号:小马哥学JAVA

    标记器类与调用该函数的类的类型不同,看着报错的问题是由于类型不匹配导致的,建议检查一下类型是否匹配。

    2022-12-03 17:11:28
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
+ 订阅
技术图谱:由专家组参与技术图谱的绘制与编写,知识与实践的结合让开发者们掌握学习路线与逻辑,快速提升技能 电子书:电子书由阿里内外专家打造,供开发者们下载学习,更与课程相结合,使用户更易理解掌握课程内容 训练营:学习训练营 深入浅出,专家授课,带领开发者们快速上云 精品课程:汇集知识碎片,解决技术难题,体系化学习场景,深入浅出,易于理解 技能自测:提供免费测试,摸底自查 体验实验室:学完即练,云资源免费使用
问答排行榜
最热
最新

相关电子书

更多
视觉AI能力的开放现状及ModelScope实战 立即下载
ModelScope助力语音AI模型创新与应用 立即下载
低代码开发师(初级)实战教程 立即下载