如果ModelScope中我想使用命名实体识别小模型对垂类领域进行finetune,但我不关心实体的offset并且我自己的数据集也没标,我能简单的将offset都设置为[0,0]训吗?我试了下finetune完模型都没有输出了。 我用的nlp_structbert_siamese-uninlu_chinese-base
finetune示例代码中的数据集是有offse的,https://modelscope.cn/datasets/iic/people_daily_ner_1998_tiny/dataPeview 此回答整理自钉群“魔搭ModelScope开发者联盟群 ①”
在ModelScope平台上进行命名实体识别(NER)任务时,模型通常会根据输入文本自动计算并输出每个实体的起始和结束偏移量(offset)。这些偏移量是相对于原始文本的重要信息,用于标识实体在文本中的确切位置。
ModelScope旨在打造下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,让模型应用更简单!欢迎加入技术交流群:微信公众号:魔搭ModelScope社区,钉钉群号:44837352