达摩院OpenVI-图像MOS评价协助清理“垃圾”照片

简介: 达摩院OpenVI-图像MOS评价协助清理“垃圾”照片

01背景

MOS(Mean Opinion Score)是一种常用的主观质量评价方法,常用于视频、图像等多媒体领域中的质量评价。MOS视觉评价通常是通过让受试者观看视频/图像,对视频的清晰度、锐度、颜色饱和度、运动模糊、噪声等方面进行评价。然而,MOS视觉评价也存在一些局限,例如需要大量的受试者,评估时间较长等。

因此,近年来,研究者们也开始探索使用客观评价方法来替代或补充MOS视觉评价。使用基于深度学习模型进行客观MOS评价相比传统的基于主观评价的方法,有以下一些好处:

a.)高效性:相比于传统的主观评价方法需要大量受试者进行评估,使用深度学习模型可以大大减少评估时间和人力成本,从而提高评估效率。

b.)一致性:深度学习模型可以通过训练来学习人类主观评价的规律和模式,从而使得评估结果更加一致和准确。

c.)可重复性:使用深度学习模型进行评价可以使得评估结果具有可重复性,不会像传统的主观评价方法一样受到个体差异的影响。

d.)适配性好:传统的主观评价方法需要大量人力和时间成本,使得其在实际应用中受到一定限制。而深度学习模型可以在大规模数据集上进行训练,从而可以在更广泛的场景下进行应用。

与传统的有参考评价方法PSNR, SSIM, VMAF等指标相比:

1.)MOS评价不需要参考图,更契合终端用户的使用场景;

2.)传统评价方法仅仅考虑图像像素的差异,而忽略了人类视觉系统对图像质量的感知。而使用深度学习模型进行视觉MOS评价有效考虑到人类主观评价的因素,从而更加准确地衡量图像质量;

总之,使用深度学习模型进行视觉MOS评价可以提高评估效率和准确性,同时也可以使得评估结果具有更好的可重复性和更广泛的应用范围。效果如下图所示:

2方法

客观MOS评价模型的原理是通过收集人类主观评估数据,并对数据进行特征提取和建模,自动分析图像的不同特征,例如对比度、清晰度和色彩饱和度等,并生成一个与人类主观意见相似的MOS分数。

最终将该模型应用于新的图像、视频数据,实现了客观地评估媒体内容质量的目的。应用到终端用户的手机中,可以但不限于自动评价相册中海量图像、视频质量,并挑选其中的高画质内容进行二次创作,或者移除低画质内容以优化存储空间。

3体验

体验网址:

方法1:模型即服务

首先打开notebook,可以通过示例右上角快速体验创建账号申领。或者根据本地环境安装(查看文档中“Python环境配置”部分),等到环境ready后,试跑如下示例代码:

from modelscope.pipelines import pipelinefrom modelscope.utils.constant import Tasksfrom modelscope.outputs import OutputKeys img = 'https://modelscope.oss-cn-beijing.aliyuncs.com/test/images/dogs.jpg'image_quality_assessment_pipeline = pipeline(Tasks.image_quality_assessment_mos, 'damo/cv_resnet_image-quality-assessment-mos_youtubeUGC')result = image_quality_assessment_pipeline(img)[OutputKeys.SCORE]print(result)

这样就完成了模型即服务的AI功能调用了。

方法2:使用在线体验功能

打开模型链接, 按下图所示步骤:

1. 上传图片,将待测图片手动上传。

2. 执行测试,云端推理引擎会对上传图像进行mos预测。

3. 显示结果,最终的结果会显示在框中。结果为浮点数,范围[0, 1]值越大代表图像质量越高。

04应用

除了上述模型外,modelscope社区还上线了包括去噪、超分、调色、上色等多种视频图像修复增强算法。任何低质量的原始视频,都能够在增强修复后变得焕然一新,让你享受到极致高清、饱满、丝滑的视频观看体验。

点击链接:

https://www.modelscope.cn/models?page=1&tasks=vision-editing&type=cv

可体验多种视觉编辑功能。

视觉评价是底层视觉的一部分,能有替代人工高效完成画质评估工作,

05模型传送门

异常帧检测

https://www.modelscope.cn/models/damo/cv_mobilenet-v2_bad-image-detecting/summary

图像画质损伤分析

https://www.modelscope.cn/models/damo/cv_resnet50_image-quality-assessment_degradation/summary

相关文章
|
人工智能 算法 编译器
C语言初阶测评题:测试你的基础知识和编程技能!!
C语言初阶测评题:测试你的基础知识和编程技能!!
546 1
|
缓存 网络协议 应用服务中间件
Linux下使用Nginx搭建Rtmp流媒体服务器,实现视频直播功能
Linux下使用Nginx搭建Rtmp流媒体服务器,实现视频直播功能
1762 0
Linux下使用Nginx搭建Rtmp流媒体服务器,实现视频直播功能
|
8月前
|
人工智能 监控 Serverless
阿里云函数计算CPU/GPU实例浅休眠功能:2026年完整介绍及实测测评
在Serverless架构普及的2026年,阿里云函数计算(Function Compute,简称FC)推出的CPU/GPU实例浅休眠功能,成为解决“低延迟”与“低成本”矛盾的核心方案。该功能针对业务潮汐波动场景(如实时推理、音视频处理、定时任务等),让实例在无请求时自动进入休眠状态,仅支付极低保活费用,请求到来时毫秒级唤醒,兼顾服务质量与成本控制。本文结合2026年最新功能优化、实测数据及使用指南,为开发者和企业用户提供全面参考。
536 0
|
7月前
|
存储 人工智能 弹性计算
GPU服务器多少钱?2026年阿里云GPU云服务器(EGS)最新收费标准与场景适配指南
2026年,阿里云将GPU服务器正式更名为“EGS弹性GPU服务”,通过整合NVIDIA系列专业显卡与神龙计算架构,实现了算力的弹性分配与超低IO延迟,可广泛适配AI推理、图形渲染、科学仿真等高性能计算场景。不同于传统固定配置的硬件服务器,EGS采用“基础实例费+组件按需叠加”的透明定价模式,支持包年包月、按量付费及抢占式实例三种计费方式,用户可根据业务周期与算力需求灵活选择。本文基于阿里云官方最新价格清单与技术文档,详细拆解EGS各型号配置、收费标准、场景适配逻辑及选购注意事项,为不同需求用户提供清晰的成本核算与选型参考。
3364 1
|
5月前
|
机器学习/深度学习 数据采集 人工智能
IDC发布Agent基础设施报告,阿里云无影AgentBay总分第一
IDC正式发布《中国 Agent 基础设施平台/执行平台技术评估,2026》报告,凭借在沙箱、工具、记忆、可观测、安全、开放性与兼容性六大核心维度的卓越表现,阿里云无影AgentBay斩获总分第一,全面领跑中国Agent基础设施市场。
|
机器学习/深度学习 编解码 人工智能
面壁开源多模态新旗舰MiniCPM-V 4.5,8B 性能超越 72B,高刷视频理解又准又快
今天,面壁智能正式开源 8B 参数的面壁小钢炮 MiniCPM-V 4.5 多模态旗舰模型,成为行业首个具备“高刷”视频理解能力的多模态模型,看得准、看得快,看得长!高刷视频理解、长视频理解、OCR、文档解析能力同级 SOTA,且性能超过 Qwen2.5-VL 72B,堪称最强端侧多模态模型。
1027 9
|
监控 Java 开发工具
Springboot秒集成-视频推拉流
在工作中需要用到视频的推拉流服务,刚开始准备使用netty服务自己实现RTSP推拉流服务,但在RTSP解包时卡住,自己实现难度确实有点大,后来在网上找到了Zlm4j库,它是基于ZLMediaKit服务实现的Jna版本,可以很容易的集成到Springboot中,在此也。希望本篇博客可以帮助到想快速实现视频推拉流服务的朋友。
1260 10
office卸载工具o15-ctrremove.diagcab下载,如何将office2016卸载干净?
o15-ctrremove.diagcab是微软官方推出的Office卸载工具,可彻底清除Office残留文件和注册表项,解决安装或启动异常问题。无需安装,双击运行即可。使用时按提示操作,卸载完成后重启电脑,确保办公软件干净重装。绿色便携,适合需要深度清理Office的用户。
2805 0
|
开发框架 测试技术 Android开发
如何评价Flutter?
【7月更文挑战第11天】
502 1

热门文章

最新文章