Adobe :用 AI 剪视频!像复制、粘贴一样简单

简介: Adobe :用 AI 剪视频!像复制、粘贴一样简单

前言


机器之心报道 编辑:陈萍、小舟

Adobe 让视频剪辑变得就像复制、粘贴文本一样简单。

随着各类强大生成模型的问世,人工智能生成内容(AIGC)越来越受到关注。在视觉生成领域,基于 GAN、扩散模型的图像生成模型越来越多,生成效果也越来越好。这些模型也在加速落地,许多「AI 画图」工具的能力都令人惊艳。


作为视觉内容生产力工具大厂的 Adobe,近期终于宣布入局 AIGC 赛道。北京时间本周四晚,Adobe 宣布其视频编辑软件 Premiere Pro 将推出一系列 AI 功能。这是继上个月在 GTC 大会上,Adobe 联合英伟达推出 AI 图像生成工具 Firefly(萤火虫)后的又一项 AIGC 工作。


根据 Adobe 目前的介绍,Premiere Pro 将引入基于文本的视频编辑,这将让视频粗剪就像复制和粘贴文本一样简单。总的来说,Premiere Pro 添加了视频编辑用户一直需要的数十项改进,包括自动色调映射、背景自动保存、更好的协作工具等等。Premiere Pro 将会升级为功能更强大,运行速度更快、更稳定的版本。


正文


功能简介


基于文本编辑视频


Premiere Pro 基于文本编辑视频的方法将彻底改变视频粗剪的工作流程。Premiere Pro 中基于文本的编辑功能由 Adobe Sensei 提供支持,使用最新的 AI 工具自动转录用户的源媒体。Adobe Sensei 是一个可以应用于 Adobe 旗下各款产品(例如 Photoshop、Premiere、Illustrator)的底层人工智能工具。Sensei 利用 Adobe 长期积累下来的大量数据和内容,从图片到影像,能够帮助人们解决在媒体素材创意过程中面临的一系列问题,帮助用户把一些固定、重复的操作变得自动化和简单化。


基于文本的编辑功能推出之后,用户将能够浏览转录副本、搜索关键字并将它们添加到时间线(Timeline)以开始粗剪,用户不再需要仅仅为了找到合适的声音片段而观看数小时的镜头。


Premiere Pro 会在用户构建序列时为其生成转录副本。因此,一旦用户在时间线上获得了一些剪辑,就可以在序列转录副本中复制和粘贴文本短语,并观看时间线中的编辑自动更改来匹配操作。当编辑完成后,基于文本的编辑会为用户提供现成的文字记录,可用于快速生成字幕。


自动色调映射


为了让用户轻松地在同一时间线中处理不同的媒体和色彩空间,而无需 LUT 或自定义色彩设置,Premiere Pro 将推出自动色调映射功能。当前,相机已经可以记录大量的颜色和细节,因此 log 和其他 HDR 格式的使用也越来越多。自动色调映射可转换 HDR 文件(如 iPhone HLG)和流行 log 格式(如 Sony S-Log)的更宽色域,以便以标准序列正确显示。与 LUT 不同,色调映射是非破坏性的,用户可以在媒体上应用颜色分级,而不会出现伪影或剪切高光(clipping highlight)。


Premiere Pro 不仅更快、更可靠,而且还添加了后台自动保存功能,随时备份文件,而不会中断流程。借助新的格式支持和 GPU 加速的 ARRI、RED,以及新的启动复位选项,用户很容易执行日常维护任务,如清除媒体缓存。


其他改进还包括更准确的蒙版、更快的动态图形模板,以及在时间轴中批量编辑标题的能力等。Premiere Pro 将会支持丹麦语、荷兰语、挪威语、瑞典语等 18 种语言


协作编辑(collaborative editing)的更新让你可以轻松地与同一项目中的其他编辑一起工作。Team Project 跟踪项目中的每次更改,Sequence Locking 确保没有其他人可以对你正在处理的内容进行编辑。


特效软件 After Effects 数项更新


After Effects 中的属性面板(Properties panel )与 Adobe Illustrator 和 Adobe Photoshop 中的面板类似,基于此可加快动画设计速度。不同于控件深入到层中进行调整,而是在合成窗口旁根据上下文向用户呈现控件。这样更容易进行新的尝试和迭代设计。属性面板还可以与基本属性一起使用,无论你是经验丰富的专业人士还是刚开始从事动画设计的入门者,属性面板都可以缩短 After Effects 中创意与执行之间的距离。


221.png

此外,After Effects 还提供对 ACES 和 OpenColorIO 的原生支持。ACES 是一种颜色交换标准,具有极宽的色域,可提供更大动态范围和更丰富的图像细节。如果你正在与其他艺术家或机构合作,ACES 和 OpenColorIO 色彩管理可以确保在移交项目时保持一致的色彩。


一直以来,Adobe 不断听取用户各种意见,改善 After Effects 功能 。其中 Selectable Track Mattes 是一项非常受欢迎的功能,它可以让你为多个图层重复使用相同的蒙版(matte),从而节省时间。现在,新的快捷键让动态蒙版工作流程更加简洁。此外,Adobe 还更改了 Colorama,使其默认为本机 After Effects 颜色选择器,这是一项功能请求,可在用户每次使用时节省点击次数。其实早在去年秋天,Adobe 就添加了 50 个动画预设,这些预设深受 After Effects 用户的喜爱。今年 Adobe 将继续添加 50 多个预设来帮助用户创建动画,而无需从头开始。


最后,包括 Premiere Pro 中的 Automatic Tone Mapping 和 After Effects 中的 ACES/OCIO 色彩管理等许多功能,Adobe 已经在最近的更新中发布。其他功能,包括 Premiere Pro 中的基于文本的编辑和背景自动保存以及 After Effects 中的属性面板,目前处于公开测试阶段,将于 5 月正式上线。


参考链接:

https://blog.adobe.com/en/publish/2023/04/13/nab-2023-introducing-text-based-editing-premiere-pro-properties-panel-after-effects-more

相关文章
|
1月前
|
人工智能 自然语言处理 开发者
AIGC创作活动 | 跟着UP主秋葉一起部署AI视频生成应用!
本次AI创作活动由 B 站知名 AI Up 主“秋葉aaaki”带您学习在阿里云 模型在线服务(PAI-EAS)中零代码、一键部署基于ComfyUI和Stable Video Diffusion模型的AI视频生成Web应用,快速实现文本生成视频的AI生成解决方案,帮助您完成社交平台短视频内容生成、动画制作等任务。制作上传专属GIF视频,即有机会赢取乐歌M2S台式升降桌、天猫精灵、定制保温杯等好礼!
|
1月前
|
人工智能
一键生成视频!用 PAI-EAS 部署 AI 视频生成模型 SVD 工作流(清晰的实例)
用 PAI-EAS 部署 AI 视频生成模型 SVD 工作流(清晰的实例)
162 2
|
2月前
|
机器学习/深度学习 编解码 人工智能
麻省理工AI新研究可将马赛克变视频
【2月更文挑战第30天】麻省理工学院等机构的研究团队推出AI新技术FeatUp,可将低分辨率图像提升为高清视频,该技术在2024年ICLR会议上引起关注。FeatUp基于深度特征提取,通过多视角一致性损失恢复空间信息,提高视频清晰度。模型通用性强,适用于多种任务和现有应用。实验显示,它在图像超分辨率和端到端学习模型性能提升上超越其他方法。然而,尚存在对某些内容处理不完善和计算资源需求高的局限性。
61 2
麻省理工AI新研究可将马赛克变视频
|
2月前
|
人工智能 vr&ar
AIGC领域又有大动作了!AI视频“黑马”Morph Studio 来袭,1080P高清画质视频免费生成!
AIGC领域又有大动作了!AI视频“黑马”Morph Studio 来袭,1080P高清画质视频免费生成!
|
2月前
|
机器学习/深度学习 人工智能 编解码
哲学家解析Sora本质,AI视频离世界模拟器还有多远?
【2月更文挑战第24天】哲学家解析Sora本质,AI视频离世界模拟器还有多远?
32 2
哲学家解析Sora本质,AI视频离世界模拟器还有多远?
|
2月前
|
人工智能 边缘计算 监控
【开源视频联动物联网平台】视频AI智能分析部署方式
【开源视频联动物联网平台】视频AI智能分析部署方式
134 3
|
2月前
|
人工智能 监控 算法
java智慧城管源码 AI视频智能分析 可直接上项目
Java智慧城管源码实现AI视频智能分析,适用于直接部署项目。系统运用互联网、大数据、云计算和AI提升城市管理水平,采用“一级监督、二级指挥、四级联动”模式。功能涵盖AI智能检测(如占道广告、垃圾处理等)、执法办案、视频分析、统计分析及队伍管理等多个模块,利用深度学习优化城市管理自动化和智能化,提供决策支持。
228 4
java智慧城管源码 AI视频智能分析 可直接上项目
|
6天前
|
机器学习/深度学习 人工智能
超越Sora极限,120秒超长AI视频模型诞生!
【5月更文挑战第1天】 StreamingT2V技术突破AI视频生成界限,实现120秒超长连贯视频,超越Sora等传统模型。采用自回归方法,结合短期记忆的条件注意模块和长期记忆的外观保持模块,保证内容连贯性和动态性。在实际应用中,展示出优秀的动态性、连贯性和图像质量,但仍有优化空间,如处理复杂场景变化和连续性问题。[链接](https://arxiv.org/abs/2403.14773)
23 3
|
10天前
|
人工智能 数据安全/隐私保护
Sora超逼真视频引恐慌!Nature刊文警示AI视频模型,或在2024年颠覆科学和社会
【4月更文挑战第27天】OpenAI公司的新型AI工具Sora能根据文字提示生成超逼真视频,引发关注。尽管已有类似产品,如Runway的Gen-2和谷歌的Lumiere,Sora以其高质量生成效果领先。该技术的进步可能导致2024年全球政治格局的颠覆,同时带来虚假信息的挑战。OpenAI已组建“红队”评估风险,但虚假视频识别仍是难题。尽管有水印解决方案,其有效性尚不确定。Sora在教育、医疗和科研等领域有潜力,但也对创意产业构成威胁。
21 2
|
12天前
|
人工智能 搜索推荐 大数据
【视频】如何用人工智能AI、大数据打动消费者洞察PPT|报告分享
【视频】如何用人工智能AI、大数据打动消费者洞察PPT|报告分享