本地安装使用ModelScope

本文涉及的产品
交互式建模 PAI-DSW,每月250计算时 3个月
模型训练 PAI-DLC,100CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
简介: 本地安装使用ModelScope

通过ModelScope的在线NoteBook环境体验了一把AI开发,还不过瘾,必须要在本地搞一下啊,下面按照ModelScope的本地环境安装指南加上自己的多次错误修复,完成了一个简单的例子。

本人环境是Windows 10,python 3.8.2

1、首先安装升级一下pip,不知道为啥要升级,反正就升级吧,通过以下语句升级pip:

python.exe -m pip install -i https://mirrors.bfsu.edu.cn/pypi/web/simple --upgrade pip

我这里使用的源是bfsu。tsinghua那个巨慢,不知道啥问题,可供大家参考的源有"-i https://pypi.tuna.tsinghua.edu.cn/simple","-i https://mirrors.ustc.edu.cn/pypi/web/simple"选择一个快的吧,如果这几个都不快,再去找,反正一定要快,要不然不是超时就是出错,反正这件事情挺影响积极性的。

2、升级好了pip以后就按照pytorch和Tensorflow,两个都安装,要不然会报错。

pip3 install torch torchvision torchaudio -i https://mirrors.bfsu.edu.cn/pypi/web/simple

pip3 install tensorflow -i https://mirrors.bfsu.edu.cn/pypi/web/simple

3、然后安装modelscope

pip3 install modelscope -i https://mirrors.bfsu.edu.cn/pypi/web/simple

4、找一个例子开始跑,比如我找的是简单的分词 https://modelscope.cn/docs/wordsegmentation

frommodelscope.modelsimportModelfrommodelscope.pipelinesimportpipelinefrommodelscope.utils.constantimportTasksfrommodelscope.preprocessorsimportTokenClassificationTransformersPreprocessormodel_id='damo/nlp_structbert_word-segmentation_chinese-base'model=Model.from_pretrained(model_id)
tokenizer=TokenClassificationTransformersPreprocessor(model.model_dir)
pipeline_ins=pipeline(task=Tasks.word_segmentation, model=model, preprocessor=tokenizer)
result=pipeline_ins(input="今天天气不错,适合出去游玩")
print (result)

5、运行报错,报了两个错,不是在一起报的,反正一个一个解决,如下:

TypeError: __init__() got an unexpected keyword argument 'allowed_methods'
No module named 'transformers'

6、解决以上的错误:

pip3 install  -i https://mirrors.bfsu.edu.cn/pypi/web/simple --upgrade urllib3

pip3 install  -i https://mirrors.bfsu.edu.cn/pypi/web/simple --upgrade requests

pip3 install transformers -i https://mirrors.bfsu.edu.cn/pypi/web/simple 

7、再次运行上面的python代码,得到如下结果:

1679035574476.png

貌似靠谱的,哈哈。有人提出怀疑,分词不是有java一堆库吗,这玩意跟AI有啥关系?我也不知道,再找AI的例子跑跑吧,至少现在ModelScope搭建完毕,继续努力


目录
相关文章
|
并行计算 PyTorch 算法框架/工具
Python安装Pytorch教程(图文详解)
Python安装Pytorch教程(图文详解)
1942 0
Python安装Pytorch教程(图文详解)
|
2月前
|
自然语言处理 前端开发 开发者
使用 modelscope-studio 构建你的 Gradio 应用
modelscope-studio是一个基于 Gradio 的三方组件库,它可以为开发者提供更定制化的界面搭建能力和更丰富的组件使用形式。
|
3月前
【求助】ModelScope Notebook中如何使用conda
在魔搭创建的CPU环境中,虽然在Terminal中可以正常使用miniconda,但在Notebook中无法切换到conda环境,只能选择默认的ipykernel。如何解决这一问题?
103 12
|
7月前
|
并行计算 Ubuntu PyTorch
Ubuntu下CUDA、Conda、Pytorch联合教程
本文是一份Ubuntu系统下安装和配置CUDA、Conda和Pytorch的教程,涵盖了查看显卡驱动、下载安装CUDA、添加环境变量、卸载CUDA、Anaconda的下载安装、环境管理以及Pytorch的安装和验证等步骤。
1161 1
Ubuntu下CUDA、Conda、Pytorch联合教程
|
7月前
|
前端开发
一个简单的魔搭关于gradio的问题。
该用户希望使用黑色主题展示gradio界面,但遇到`js_func`代码未能生效的问题。目前尝试的Soft主题和CSS自定义方法都未能完全满足需求,因为涉及到大量的元素调整工作。寻求帮助以实现魔搭平台上的黑色主题显示。
116 0
|
9月前
|
TensorFlow 算法框架/工具 Python
最新版tensorflow安装教程,pip安装+手动安装
最新版tensorflow安装教程,pip安装+手动安装
1237 1
|
安全 虚拟化 Docker
在win10中使用ModelScope官方镜像
为在办公环境笔记本win10上测试ModelScope的开源模型 ,记录踩坑过程
2317 0
在win10中使用ModelScope官方镜像
|
10月前
|
并行计算 PyTorch 算法框架/工具
pytorch的安装步骤
pytorch的安装步骤
226 6
|
自然语言处理 Shell 测试技术
modelscope库安装
modelscope库安装
6463 0
modelscope库安装
|
10月前
|
人工智能 Ubuntu Linux
linux配置魔搭社区modelscope时的whl下载中断问题和解决方案
本文提供了断点续传和手动安装两个方案。
439 3

热门文章

最新文章