用 Modelscope 评测 Modelscope 是什么效果?

本文涉及的产品
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
模型训练 PAI-DLC,5000CU*H 3个月
交互式建模 PAI-DSW,每月250计算时 3个月
简介: 突发奇想是不是可以用机器的思想评测Modelscope 会出现什么结果?让我们一起看看吧。

突发奇想是不是可以用机器的思想评测Modelscope 会出现什么结果?让我们一起看看吧。

一、写作创作相关提了三个问题,看A,B模型有什么区别?

1.请介绍Modelscope是什么?

A模型一句话式回答

a1.png

B模型的回答相比较而言就全面的多。

a2.png

总结:对AB模型的回答都可以接受。

2.详细说一下Modelscope模型的优势和劣势。

A模型回答相当全面和详细,优缺点出列举止并详细说明

b1.png
b12.png

B模型变成一句话式回答了,只是列出了优劣势的点,并未充分说明。

b2.png

总结:此问题对A模型的回答十分满意。B模型就算了吧。

3.详细Modelscope模型应用场景有哪些?

A模型按点要素回答的,但不知道这个限制回答是什么意思?

c1.png

B模型的回答依然是一句概括式回答。

c2.png

总结:此回答整体来说都不满意,本想详细了解Modelscope模型应用场景,给出的答案太简单。

二、代码相关对Modelscope评测

1.Modelscope使用UML语言的相关代码有哪些?

A模型像是在用写作相关的来解答的。

d1.png

B模型理解了我的意思举例出代码来回答,并详细解释了。

d2.png

总结:A模型可能还没从刚才的写作相关模型里解脱出来,B模型的举例和解释通俗易懂。

2.用UML语言写一段数据搜集入库的代码

A模型写一段代码,这个我也不知道正确与否但感觉这么一小段代码就能完成这么复杂的要求,如果正确那可真强大。

e1.png

B模型直接限流,不知道是模型数据为空还是网卡了。

e2.png

总结:本以为我大串代码才能完成要求,没想到只有一段代码。

3.用UML语言写一段数据搜索并输出的代码

A模型真的太详细了图节不开,直接上代码了。

以下是一个使用uml语言编写的数据搜索代码示例:

struct person {
string name;
string age;
};

struct student {
string name;
double age;
};

struct student {
string name;
double age;
};

struct department {
string name;
int age;
};

if (student == null) {
student = null;
}

fprintf(student, "{name}: {age}", student);
该代码假设要搜索包含"student"字段的数据,然后查找该字段的数据并输出。以下是代码的示例:

% 定义一个person结构体
person person {
firstname name age if (person == null) {
return "person is null";
}
}

lastname name age if (person == null) {
return "person is null";
}
}

student {}
return null;
}

% 定义一个student结构体
student student {
major major age
so age
education bachelor | |
get id() {
return student.getid();
}
}

% 定义一个department结构体
department department {
id

B模型一句话式代码,可以只是实现功能代码里的一句吧

f1.png

总结:AB模型回答天壤之别,感谢有A模型。

三、人类价值观

1.Modelscope的数据是怎样收集的,是否对收集数据区分价值。

A模型解释的很清晰明了

g1.png

B模型一句话回答没有什么亮点。

g2.png

总结:A模式相当给力,B模式相当机器。

2.Modelscope回答的问题,是否具有人为思路?

A模型回答很详细既有人为思路又有机器逻辑。

h1.png

B模型一句话式回答

h2.png

总结:总之,Modelscope的回答是由人为思路和机器学习算法共同构成的,其中人为思路是起到了一定的辅助作用,而机器学习算法则是实现了Modelscope的自动化生成和解释。A模型点赞。

3.Modelscope的回答是否会引起提问者的行为和触犯法律。

A模型回答相当全面详细且负责任,

i1.png

B模型回答相对简单,但也说明了问题

i2.png

总结:两个模型回答都说明了系统会可能引起一争议回答,平台会努力提高做好。回答相当负责任。但出现了一Error不知道这个是什么原因。

最后说一下这次用Modelscope评测试自己的总结。

1.在写作相关模型Modelscope对自己的介绍还是很全面的毕竟这些内容的数据量还是相当丰富的。

2.在代码相关的提问中,我分别要求写出,平台对数据采集,数据存储,数据提取,平台模型给出的答案有的是一段代码有的是大篇代码,没有去做验证,但整体看是通顺的,毕竟自己评测自己代码应该是错不了的。但这样的平台不可能给你全面的代码,那还了得。

3.关于人类价值观上的问题,我主要是想了解Modelscope平台对于提问人指引是否会引起不必要的法律问题,以及平台能否代替人工,总体来说Modelscope回答是负责任,毕竟也是人为创造的工具对我们有一定的帮助,但不会取代人类,且有对自己还有更高的要求不断的完善平台。

相关文章
|
人工智能 自然语言处理 数据安全/隐私保护
【玩转ModelScope有奖征文活动】全新中文大模型竞技场上手评测
近年来,人工智能领域取得了巨大的进展,其中中文自然语言处理(NLP)领域尤为突出。这一进展的关键因素之一是中文大型语言模型的崛起,如BERT、GPT-3和其后继者,等。为了评估这些模型的性能和效用,进行中文大模型评测变得至关重要。本文将深入探讨中文大模型评测的关键方面,方法和洞见。本次测试主要模型为ChatGLM,moss-moon-003-sft,BiLLa-7B-SFT和BELLE-LLaMA-13B-2M等
74060 32
【玩转ModelScope有奖征文活动】全新中文大模型竞技场上手评测
Modelscope 中文竞技场大模型评测
本次评测我选得三个类别分别是:写作创作相关、中文游戏、知识常识三个类别。
436 1
|
开发者
【获奖名单】ModelScope开源模型社区评测征集令
开发者评测局第六期——ModelScope开源模型社区评测征集令公布
【获奖名单】ModelScope开源模型社区评测征集令
|
人工智能 达摩院 开发者
开发者评测局第六期——ModelScope开源模型社区评测征集令
加入ModelScope开源模型社区,使用开源建模神器记录你的建模之旅
开发者评测局第六期——ModelScope开源模型社区评测征集令
|
人工智能 自然语言处理 API
ModelScope评测
ModelScope评测
|
6月前
|
自然语言处理
在ModelScope中,你可以通过设置模型的参数来控制输出的阈值
在ModelScope中,你可以通过设置模型的参数来控制输出的阈值
161 1
|
6月前
|
API 语音技术
ModelScope-FunASR**有支持热词又支持时间戳的模型**。
【2月更文挑战第30天】ModelScope-FunASR**有支持热词又支持时间戳的模型**。
214 2
|
6月前
|
人工智能 API 决策智能
Modelscope结合α-UMi:基于Modelscope的多模型协作Agent
基于单个开源小模型的工具调用Agent,由于模型容量和预训练能力获取的限制,无法在推理和规划、工具调用、回复生成等任务上同时获得比肩大模型等性能。
|
6月前
|
文字识别 并行计算 语音技术
ModelScope问题之下载模型文件报错如何解决
ModelScope模型报错是指在使用ModelScope平台进行模型训练或部署时遇到的错误和问题;本合集将收集ModelScope模型报错的常见情况和排查方法,帮助用户快速定位问题并采取有效措施。
817 3
|
6月前
|
人工智能 达摩院 自然语言处理
超好用的开源模型平台,ModelScope阿里达摩院
超好用的开源模型平台,ModelScope阿里达摩院
469 1

热门文章

最新文章