视频 AI 与智能生产(一)|学习笔记

简介: 快速学习视频 AI 与智能生产(一)

开发者学堂课程【视频云技术入门-1024程序员节创造营公益课视频 AI 与智能生产(一)】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/902/detail/14334


视频 AI 与智能生产(一)


目录:

一、 AI 激活数值媒体的沉默资产

二、 高频率智能审核解决方案

三、视频理解算法架构的发展趋势

四、视频字幕Video OCR

、多模态搜索-视频内容搜索

、视频生产赛事分析

七、如何提升生产力

八、核心能力-媒资管理

九、核心能力-智能处理

十、核心能力-模板工厂

十一、行业案例—数字教育

 

一、 AI 激活数值媒体的沉默资产

●视频结构化-“丰富准确的视频详情页"

●多模态搜索“细粒度的视频内容搜索*

●视频辅助生产-“场景化娱乐化的 AGC 视频生产”

 

二、 高频率智能审核解决方案

image.png

场景概述

●审核场景:

对直播画面的涉黄、暴恐涉政、广告、不良场景四大维度进行审核。

●高频截帧:

对于内容风险高的业务如核心主播或交友等类型,采用高频截帧方案,截帧频率为秒~2秒,大幅度规避危险内容曝光的可能性。

关键帧截帧:

对于业务风险相对不高的业务如游戏直播或赛事直播,采用关键帧截帧方案,截帧频率为3秒,可做到优化成本

image.png 

 

三、 视频理解算法架构的发展趋势

image.png 阶段一:图像算法结果后融合

MAP 40%+

阶段二:视频实体及镜头级别的理解

MAP 60%+

阶段三:实体时空关系推理的视频理解

1.如何解决算法性能进一步提高 MAP 80%+

2.如何用好模态实体、时空关系

3.如何面对精细化、定制化的频繁训练问题

 

四、视频字幕—Video OCR

1.语音与图像融合与改写

2.知识纠错与关键词注册

3.视频粒度的 ocr

 

 

五、多模态搜索-视频内容搜索

image.png

通过多模态内容技术,支持以文字搜视频、以图搜视频、以视频搜视频、以图搜图、以人名搜视频等多模检索功能,实现快速准确的内容检索定位。

应用场景:视频版权保护、媒资库内容制作场景媒资检索、短视频消费场景内容搜索

 

相关文章
|
13天前
|
机器学习/深度学习 人工智能 自然语言处理
构建智能化编程环境:AI 与代码编辑器的融合
在人工智能的推动下,未来的代码编辑器将转变为智能化编程环境,具备智能代码补全、自动化错误检测与修复、个性化学习支持及自动化代码审查等功能。本文探讨了其核心功能、技术实现(包括机器学习、自然语言处理、深度学习及知识图谱)及应用场景,如辅助新手开发者、提升高级开发者效率和优化团队协作。随着AI技术进步,智能化编程环境将成为软件开发的重要趋势,变革开发者工作方式,提升效率,降低编程门槛,并推动行业创新。
|
16天前
|
机器学习/深度学习 人工智能 运维
|
4天前
|
机器学习/深度学习 人工智能 供应链
精准农业:AI在农业生产中的应用
【10月更文挑战第1天】随着科技的发展,人工智能(AI)逐渐渗透到农业领域,通过精准监控和管理提升了农业生产效率和质量。AI在精准农业中的应用包括:精准农田管理,如个性化灌溉和施肥;作物病虫害识别与预测,及时发现并预防病虫害;智能农机自动化作业,提高作业效率;农产品质量检测与分类,确保品质;农业供应链优化,预测需求和价格。尽管面临数据收集、技术接受度等挑战,AI在精准农业中的未来前景广阔,有望实现全程自动化作业、数据驱动决策及智能预警系统,推动农业可持续发展。
23 11
|
5天前
|
人工智能 自然语言处理 运维
钉钉x昇腾:用AI一体机撬动企业数字资产智能化
大模型在过去两年迅速崛起,正加速应用于各行各业。尤其在办公领域,其主要模态——文字和图片,成为了数字化办公的基础内容,催生了公文写作、表格生成、文本翻译等多种应用场景,显著提升了工作效率。然而,AI引入办公场景也带来了数据安全与成本等问题。为此,钉钉与昇腾联合推出的“钉钉专属AI一体机解决方案”,通过本地化部署解决了数据安全、成本高昂及落地难等痛点,实现了从硬件到软件的深度协同优化,为企业提供了开箱即用的AI服务,推动了办公场景的智能化升级。
23 11
|
4天前
|
机器学习/深度学习 人工智能 算法
AI与未来医疗:智能化健康管理的新纪元
本文探讨了人工智能(AI)在医疗领域的应用及其对未来健康管理的影响。通过分析当前AI技术在疾病诊断、个性化治疗及远程医疗等方面的最新进展,文章揭示了AI如何提升医疗服务质量,实现精准医疗。同时,探讨了AI技术面临的伦理和隐私挑战,并提出应对策略。最终,本文展望了AI在未来医疗中的潜力,强调其在提高公共健康水平方面的重要性。
|
6天前
|
机器学习/深度学习 人工智能 自然语言处理
如何利用AI提高内容生产效率?
如何利用AI提高内容生产效率?
|
15天前
|
人工智能 算法 大数据
懂场景者得AI,瓴羊发布年度产品智能化战略
9月20日,瓴羊智能科技(以下简称瓴羊)在2024云栖大会上举办了“Data × AI:企业服务智能化,价值增长新动能”专场论坛。阿里巴巴集团副总裁、瓴羊智能科技CEO 朋新宇在会上发布年度产品智能化战略:“(算法 + 算力 + 数据) x 场景 ”,强调企业必须重视场景,只有通过解构场景、重构业务,才能真正拥抱AI,带来突破性增长。
|
9天前
|
人工智能
防AI换脸视频诈骗,中电金信联合复旦提出多模态鉴伪法,还入选顶会ACM MM
【9月更文挑战第26天】中电金信与复旦大学合作,提出一种基于身份信息增强的多媒体伪造检测方法,并入选ACM MM国际会议。该方法利用身份信息作为检测线索,构建了含54位名人324个视频的多模态伪造数据集IDForge,设计了参考辅助的多模态伪造检测网络R-MFDN,显著提升了检测性能,准确率达到92.90%。尽管如此,该方法仍存在一定局限性,如对非英语国家数据及无明确身份信息的视频检测效果可能受限。
15 4
|
9天前
|
存储 人工智能 算法
AI伦理学:建立可信的智能系统框架
【9月更文挑战第26天】随着AI技术的迅猛发展,其在各领域的应用日益广泛,但也带来了算法偏见、数据隐私泄露、就业替代等伦理和法律挑战。本文探讨AI伦理学的核心议题,包括数据隐私保护、算法公平性与透明度、机器决策责任归属及对就业市场的影响,并提出建立可信智能系统框架的建议,如强化法律法规、技术创新、建立监督机制、行业自律和公众教育,以确保AI技术的可持续发展和社会接受。
|
12天前
|
人工智能 运维 Serverless
Serverless + AI 让应用开发更简单,加速应用智能化
2024 云栖大会开幕,在大会第一天,阿里云正式发布全新产品——云应用开发平台 CAP。CAP 拥有丰富的场景化应用模板,可以极速体验,并且具备更低的成本优势以及灵活组装等特点,成为广大开发者与企业必备的一站式应用开发平台,让应用开发更简单。

热门文章

最新文章

下一篇
无影云桌面