视频 AI 与智能生产(二)|学习笔记

简介: 快速学习视频 AI 与智能生产(二)

开发者学堂课程【视频云技术入门-1024程序员节创造营公益课视频 AI 与智能生产(二)】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/902/detail/14334


视频 AI 与智能生产(二)


六、视频生产—赛事分析

体育赛事分析

赛事支持

奥运会、世界杯、世锦赛等赛事运动、如主流运动(足球、篮球、网球、羽毛球、乒乓球、排球等)、小众运动(高尔夫球、棒球、曲棍球、壁球等)、极限运动(跳伞、冲浪、滑板)、涉水/冬季运动(游泳、滑冰、滑雪、跳水等)、健体运动(举重、俯卧撑、深蹲、仰卧起坐等)、格斗运动等。

场馆场地识别

覆盖各个国家奥运会、世界杯、世锦赛等著名体育场馆地标识别,如鸟巢、水立方等;覆盖各个运动种类场地识别,如篮球场、足球场、滑冰场、滑雪场、空手道馆、游泳馆、曲棍球馆等。

人员信息、角色分析

运动员识别

包含中外运动员、足球、篮球、排球、

网球、泳坛、体操等名宿。

角色识别

包含裁判、观众、守门员、球员

运动履历分析

提供所识别人物的生平资料

特定运动员片段集锦

出场率分析

远景、近景、特写提取

赛事文本/音频信息提取

比分信息实时识别

识别当前赛事比分,辅助关键时刻镜头提取

球队信息、赛事信息提取

提取画面中的球队信息,赛事场次

赛事溯源

对赛事进行溯源,定位原场次比赛

解说提取/字幕提取

关键词提取

对关键词分析,如进球、打门等,

获取关键时刻

 

七、如何提升生产力

视频云从音视频的生产、 转码、管理、分发,到客户端的播放体验,打造全链路技术服务

image.png


八、核心能力-媒资管理

云端存储

媒资数据存储于对象存储 OSS 或点播 VOD,提供稳定可靠的云端存储服务,支持素材即传即用,

多模检索

基于视频指纹特征与视频内容理解,实现多模态的搜索与查重能力,主要包含以视频搜视频、以图搜视频、以图搜图等功能,帮助用户快速检索到视频素材。

使用方式:

方式一可视化管理

管理地址待2月4日正式发布后更新

方式二 API 管理

通过开放的 API 接口,对内容库进行增删改查管理。

接口文档参见:

https://help aliyun.com/document _detail/197841.htm

 

九、核心能力-智能处理

智能字幕

将视频或音频中的声音,自动转化为字幕添加编辑项目中,并支持导出为字幕文件。

智能配音

支持将字幕文件通过语音合成的方式,智能生成音频文件。

绿幕抠图

支持对绿幕视频,一键式抠成透明底视频素材。

人像抠图

支持对人像视频,一键式抠成透明底只保留人像部分的视频素材。

智能裁剪

对横屏的视频内容,可根据关注主体,智能裁剪为9:16视频素材。

智能拆条

根据 ppt 标题、场景、关键词等,将长视频自动裁剪为多个短视频

使用方式:

方式一可视化批量智能处理

ice 控制台批量发起智能处理,并在线查看、下载处理结果

方式二可视化智能处理实时纠错

在浏览器或 SDK 封装的剪辑工具中,发起智能处理任务。如右侧2图所示,发起「智能拆条」任务

方式三 API 剪辑

通过开放的 API 接口,对素材进行智能处理。处理完成后异步回调。

 

十、核心能力-模板工厂

自定义+海量系统模板

普通模板:对时间线进行了封装,把常用的时间线定义成模板

高级模板:基于 AE 文件实现炫酷动效模板

模板复用

当有同样的需求出现时,只需要传入动态素材即可快速合成视频

 

十一、行业案例—数字教育

素质教育行业内容即核心资产,内容形式灵活覆盖直播、点播,同时有丰富的短视频投放需求。对源内容的剪辑实时性要求较高,对可视化拆条有明确需求。智能媒体生产为素质教育行体在云端录制剪辑、直播剪辑、智能拆条方面提供了全方位的服务支撑。

快速搭建基于云端媒资的可视化编辑组件

利用基于浏览器的云端渲染的核心技术能力,为客户打造基于云端大媒资的可视化处理组件,1-2天即可集成至业务环境中,实现云上剪辑合成的全流程剪辑服务。

直播实时剪辑、直播转点播收录剪辑

支持直播实时快剪、收录精剪,满足客户对实时性要求高的场景第-时间抢占发布先机

课后精彩回顾高光片段实时生成

基于自定义拆条规则或智能拆条算法,提供批量化实时精彩片段提取及合成服务,利用回顾内容加强家长在课程中的参与感,构建教学-回顾-续费的闭环。

相关文章
|
人工智能 自然语言处理 Devops
云效 AI 智能代码评审体验指南
云效AI智能代码评审正式上线!在合并请求时自动分析代码,精准识别问题,提升交付效率与质量。支持自定义规则、多语言评审,助力研发效能升级。立即体验AI驱动的代码评审革新,让AI成为你的代码质量伙伴!
222 0
|
30天前
|
人工智能 自然语言处理 算法
【2025云栖大会】AI 搜索智能探索:揭秘如何让搜索“有大脑”
2025云栖大会上,阿里云高级技术专家徐光伟在云栖大会揭秘 Agentic Search 技术,涵盖低维向量模型、多模态检索、NL2SQL及DeepSearch/Research智能体系统。未来,“AI搜索已从‘信息匹配’迈向‘智能决策’,阿里云将持续通过技术创新与产品化能力,为企业构建下一代智能信息获取系统。”
288 9
|
1月前
|
人工智能 运维 关系型数据库
云栖大会|AI时代的数据库变革升级与实践:Data+AI驱动企业智能新范式
2025云栖大会“AI时代的数据库变革”专场,阿里云瑶池联合B站、小鹏、NVIDIA等分享Data+AI融合实践,发布PolarDB湖库一体化、ApsaraDB Agent等创新成果,全面展现数据库在多模态、智能体、具身智能等场景的技术演进与落地。
|
28天前
|
机器学习/深度学习 人工智能 算法
用于实验室智能识别的目标检测数据集(2500张图片已划分、已标注) | AI训练适用于目标检测任务
本数据集包含2500张已标注实验室设备图片,涵盖空调、灭火器、显示器等10类常见设备,适用于YOLO等目标检测模型训练。数据多样、标注规范,支持智能巡检、设备管理与科研教学,助力AI赋能智慧实验室建设。
用于实验室智能识别的目标检测数据集(2500张图片已划分、已标注) | AI训练适用于目标检测任务
|
1月前
|
机器学习/深度学习 人工智能 算法
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
NBA中国与阿里云达成合作,首发360°实时回放技术,融合AI视觉引擎,实现多视角、低延时、沉浸式观赛新体验,重新定义体育赛事观看方式。
287 0
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
|
1月前
|
存储 人工智能 安全
拔俗AI临床大数据科研分析平台:让医学研究更智能、更高效
阿里云原生AI临床大数据科研平台,打通异构医疗数据壁垒,实现智能治理、可视化分析与多中心安全协作,助力医院科研提速增效,推动精准医疗发展。
|
1月前
|
人工智能 编解码 搜索推荐
AI智能换背景,助力电商图片营销升级
电商产品图换背景是提升销量与品牌形象的关键。传统抠图耗时费力,AI技术则实现一键智能换背景,高效精准。本文详解燕雀光年AI全能设计、Canva、Remove.bg等十大AI工具,涵盖功能特点与选型建议,助力商家快速打造高质量、高吸引力的商品图,提升转化率与品牌价值。(238字)
216 0
|
1月前
|
人工智能 自然语言处理 小程序
拔俗AI审前服务平台:让法律准备更智能、更高效,助力司法公正提速
AI审前服务平台融合大模型与法律知识,智能解析证据、推送类案、评估风险,助力律师高效备诉、当事人理性维权,推动法律服务普惠化、精准化,是智慧司法的重要基石。(238字)

热门文章

最新文章