本地安装使用ModelScope

本文涉及的产品
交互式建模 PAI-DSW,每月250计算时 3个月
模型训练 PAI-DLC,100CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
简介: 本地安装使用ModelScope

通过ModelScope的在线NoteBook环境体验了一把AI开发,还不过瘾,必须要在本地搞一下啊,下面按照ModelScope的本地环境安装指南加上自己的多次错误修复,完成了一个简单的例子。

本人环境是Windows 10,python 3.8.2

1、首先安装升级一下pip,不知道为啥要升级,反正就升级吧,通过以下语句升级pip:

python.exe -m pip install -i https://mirrors.bfsu.edu.cn/pypi/web/simple --upgrade pip

我这里使用的源是bfsu。tsinghua那个巨慢,不知道啥问题,可供大家参考的源有"-i https://pypi.tuna.tsinghua.edu.cn/simple","-i https://mirrors.ustc.edu.cn/pypi/web/simple"选择一个快的吧,如果这几个都不快,再去找,反正一定要快,要不然不是超时就是出错,反正这件事情挺影响积极性的。

2、升级好了pip以后就按照pytorch和Tensorflow,两个都安装,要不然会报错。

pip3 install torch torchvision torchaudio -i https://mirrors.bfsu.edu.cn/pypi/web/simple

pip3 install tensorflow -i https://mirrors.bfsu.edu.cn/pypi/web/simple

3、然后安装modelscope

pip3 install modelscope -i https://mirrors.bfsu.edu.cn/pypi/web/simple

4、找一个例子开始跑,比如我找的是简单的分词 https://modelscope.cn/docs/wordsegmentation

frommodelscope.modelsimportModelfrommodelscope.pipelinesimportpipelinefrommodelscope.utils.constantimportTasksfrommodelscope.preprocessorsimportTokenClassificationTransformersPreprocessormodel_id='damo/nlp_structbert_word-segmentation_chinese-base'model=Model.from_pretrained(model_id)
tokenizer=TokenClassificationTransformersPreprocessor(model.model_dir)
pipeline_ins=pipeline(task=Tasks.word_segmentation, model=model, preprocessor=tokenizer)
result=pipeline_ins(input="今天天气不错,适合出去游玩")
print (result)

5、运行报错,报了两个错,不是在一起报的,反正一个一个解决,如下:

TypeError: __init__() got an unexpected keyword argument 'allowed_methods'
No module named 'transformers'

6、解决以上的错误:

pip3 install  -i https://mirrors.bfsu.edu.cn/pypi/web/simple --upgrade urllib3

pip3 install  -i https://mirrors.bfsu.edu.cn/pypi/web/simple --upgrade requests

pip3 install transformers -i https://mirrors.bfsu.edu.cn/pypi/web/simple 

7、再次运行上面的python代码,得到如下结果:

1679035574476.png

貌似靠谱的,哈哈。有人提出怀疑,分词不是有java一堆库吗,这玩意跟AI有啥关系?我也不知道,再找AI的例子跑跑吧,至少现在ModelScope搭建完毕,继续努力


目录
相关文章
|
8月前
|
PyTorch 算法框架/工具 Python
pytorch安装教程
pytorch安装教程
153 0
|
机器学习/深度学习 并行计算 PyTorch
PyTorch安装教程
PyTorch是学习深度学习时常用的Python神经网络框架,本文将介绍其部分版本的安装方式。Windows和Linux通用。 作者使用anaconda作为管理虚拟环境的工具。以下工作都在虚拟环境中进行,对Python和Aanaconda的安装及对虚拟环境的管理本文不作赘述,后期可能会撰写相关的博文。
PyTorch安装教程
|
18天前
|
人工智能 API 开发工具
ModelScope魔搭12月版本发布月报
为了给开发者提供更便捷的开源模型API访问方式,我们正式启动了 ModelScope API-Inference 的公测。在开源工具链方面,我们进行了ModelScope 1.21.0的新版本发布,提供了llamafile的集成以及模型加载/下载链路的优化,SWIFT 3.0大版本也已经合并主干,在这个基础上新模型的支持会更加顺畅与便利。
ModelScope魔搭12月版本发布月报
|
4月前
|
人工智能 自然语言处理 API
ModelScope是什么
【9月更文挑战第1天】ModelScope是什么
697 2
|
18天前
【求助】ModelScope Notebook中如何使用conda
在魔搭创建的CPU环境中,虽然在Terminal中可以正常使用miniconda,但在Notebook中无法切换到conda环境,只能选择默认的ipykernel。如何解决这一问题?
68 12
|
2月前
|
存储 数据可视化 API
ModelScope魔搭11月版本发布月报
ModelScope 11月更新来袭!本次更新依然是干货满满的一期。
|
3月前
|
存储 人工智能 缓存
ModelScope魔搭10月版本发布月报
ModelScope 10月份整体上新啦!本次更新干货满满,推出了我们在内部开发与灰度许久的全新站点设计,其中也包括开发者反馈已久的暗黑模式支持等一系列功能,希望得到大家的使用反馈。
|
5月前
|
前端开发
一个简单的魔搭关于gradio的问题。
该用户希望使用黑色主题展示gradio界面,但遇到`js_func`代码未能生效的问题。目前尝试的Soft主题和CSS自定义方法都未能完全满足需求,因为涉及到大量的元素调整工作。寻求帮助以实现魔搭平台上的黑色主题显示。
104 0
|
7月前
|
TensorFlow 算法框架/工具 Python
最新版tensorflow安装教程,pip安装+手动安装
最新版tensorflow安装教程,pip安装+手动安装
669 1
|
8月前
|
机器学习/深度学习 人工智能 监控
ModelScope
ModelScope
221 9

热门文章

最新文章