不用看就能懂,快速理解海量视频内容

简介: 想要快速理解海量视频内容?借助视频视觉理解技术,您可以轻松实现视频内容的自动化分析和信息提取。这项AI技术不仅大幅提升了工作效率,还为开发者提供了更多创意和应用的可能性。

本方案现在支持免费试用,点击https://www.aliyun.com/solution/tech-solution/information-extraction方案链接即可体验


  • 视频太长,没时间看完?想要快速获取文字摘要以提高信息获取效率?
  • “生肉”视频没有字幕,难以理解?希望更好地掌握视频内容?
  • 视频太多,难以管理?想要快速分类并加上精准标签?
  • 想根据游戏视频实时分析玩家行为,实现精准解析?


现在,这一切都迎刃而解!借助视频视觉理解技术,您可以轻松实现视频内容的自动化分析和信息提取。这项AI技术不仅大幅提升了工作效率,还为开发者提供了更多创意和应用的可能性。


通过下图展示的1928年阿姆斯特丹奥运会的实际案例,您可以直观感受到AI在处理视频内容方面的高效与精准。无论是自动摘要、字幕生成、内容分类还是行为分析,视频视觉理解都能为您带来前所未有的便利和创新体验。


image.png


1.技术架构

本文介绍的视频内容提取主要使用了以下三种基础设施和云服务,函数计算 FC 函数、对象存储 OSS Bucket和百炼模型服务。其中函数计算 FC 函数用于提取视频关键帧和调用百炼模型服务 API,进行视频信息提取。对象存储 OSS Bucket用于存储视频关键帧图片。百炼模型服务用于调用API使用视觉模型和文本模型最终实现视频理解与内容提取。


在视频理解与内容提取的流程中,会先使用计算资源(本方案使用的函数计算)构建的 Web 服务来接收用户的请求,在函数计算内部将视频关键帧图片上传到对象存储 OSS 中,然后将关键帧图片地址和提示词发送至百炼模型服务,由视觉模型处理后,再次调用文本模型处理,最终将结果呈现出来。


下图展示了完整的技术架构,视频上传后即可一键获得精炼版文字内容。


image.png


2.体验部署

2.1前置准备

在开始体验之前,准备阿里云账号并开通百炼模型服务、创建对象存储OSS。(别忘记领取免费试用资源哦!)


  • 开通百炼模型服务

1. 开通百炼:前往百炼控制台[1],如果页面顶部显示以下消息,您需要开通百炼的模型服务,以获得免费额度。如果未显示该消息,则表示您已经开通。


image.png

  1. 获取API Key:在控制台的右上角选择API-KEY,然后创建API Key,用于通过API调用大模型。


image.png

  • 创建对象存储OSS

接下来创建1个对象存储OSS Bucket,用于存放静态资源。

1. 登录OSS管理控制台[2]。

2. 在左侧导航栏,选择Bucket列表。

3. 在Bucket列表页面,单击创建Bucket

4. 在创建Bucket面板,按照下表信息进行配置,然后单击完成创建

image.png

2.2部署启动

前往部署[3]打开我们提供的函数计算应用模板,参考下表进行参数配置,然后单击创建并部署默认环境


image.png

2.3应用体验

1)完成上述步骤后,可以在环境详情环境信息中找到示例网站的访问域名。点击访问域名,即可打开示例应用。


image.png

image.png

2)点击提取信息,使用默认填写的关键词,模型会根据给出的关键词提取出对应的信息。


image.png

3)提取结果展示如下:

image.png


参考链接:

参考一

参考二

参考三





来源  |  阿里云开发者公众号


相关文章
|
人工智能 分布式计算 供应链
高效提取图片信息:AI技术赋能企业数字化转型
本文介绍了如何通过AI技术高效提取图片中的结构化信息,提升企业运营效率。具体应用场景包括票据与合同管理、电商商品信息管理、保险理赔和物流单据处理等。AI技术能将传统人工录入流程缩短至秒级,准确率高达99%,减少人为错误,提升客户满意度。方案优势在于易于扩展、灵活高性价比的调用模式及便捷安全的云产品接入。文中还详细描述了部署应用、访问示例应用及使用官方示例进行信息提取的操作步骤,并提供了参考链接和源码下载途径。
|
网络安全 数据库
【保姆级教程】基于阿里云搭建网站,看这篇就够了!
本文演示了三种网站的搭建,分别是:博客、论坛、个人作品。从域名选择,到阿里云服务器的购买,到最后的网站搭建。
【保姆级教程】基于阿里云搭建网站,看这篇就够了!
|
4月前
|
存储 SQL 大数据
从 o11y 2.0 说起,大数据 Pipeline 的「多快好省」之道
SLS 是阿里云可观测家族的核心产品之一,提供全托管的可观测数据服务。本文以 o11y 2.0 为引子,整理了可观测数据 Pipeline 的演进和一些思考。
318 35
|
1月前
|
数据采集 存储 人工智能
基于 EventBridge 构筑 AI 领域高效数据集成方案
本文深入探讨了AI时代数据处理的变革与挑战,分析了事件驱动架构(EventBridge)在AI数据处理中的技术优势,并结合实践案例,展示了其在多源数据接入、向量数据库优化、智能数据转换等方面的应用价值。
341 30
|
6月前
|
人工智能 自然语言处理 机器人
招商银行X通义大模型 ,2024年度AI最佳实践案例!
招商银行X通义大模型 ,2024年度AI最佳实践案例!
|
1月前
|
运维 Dubbo Cloud Native
Dubbo 云原生重构出击:更快部署、更强控制台、更智能运维
Apache Dubbo 最新升级支持云原生,提供一键部署微服务集群与全新可视化控制台,提升全生命周期管理体验,助力企业高效构建云原生应用。
211 25