Adobe :用 AI 剪视频!像复制、粘贴一样简单

简介: Adobe :用 AI 剪视频!像复制、粘贴一样简单

前言


机器之心报道 编辑:陈萍、小舟

Adobe 让视频剪辑变得就像复制、粘贴文本一样简单。

随着各类强大生成模型的问世,人工智能生成内容(AIGC)越来越受到关注。在视觉生成领域,基于 GAN、扩散模型的图像生成模型越来越多,生成效果也越来越好。这些模型也在加速落地,许多「AI 画图」工具的能力都令人惊艳。


作为视觉内容生产力工具大厂的 Adobe,近期终于宣布入局 AIGC 赛道。北京时间本周四晚,Adobe 宣布其视频编辑软件 Premiere Pro 将推出一系列 AI 功能。这是继上个月在 GTC 大会上,Adobe 联合英伟达推出 AI 图像生成工具 Firefly(萤火虫)后的又一项 AIGC 工作。


根据 Adobe 目前的介绍,Premiere Pro 将引入基于文本的视频编辑,这将让视频粗剪就像复制和粘贴文本一样简单。总的来说,Premiere Pro 添加了视频编辑用户一直需要的数十项改进,包括自动色调映射、背景自动保存、更好的协作工具等等。Premiere Pro 将会升级为功能更强大,运行速度更快、更稳定的版本。


正文


功能简介


基于文本编辑视频


Premiere Pro 基于文本编辑视频的方法将彻底改变视频粗剪的工作流程。Premiere Pro 中基于文本的编辑功能由 Adobe Sensei 提供支持,使用最新的 AI 工具自动转录用户的源媒体。Adobe Sensei 是一个可以应用于 Adobe 旗下各款产品(例如 Photoshop、Premiere、Illustrator)的底层人工智能工具。Sensei 利用 Adobe 长期积累下来的大量数据和内容,从图片到影像,能够帮助人们解决在媒体素材创意过程中面临的一系列问题,帮助用户把一些固定、重复的操作变得自动化和简单化。


基于文本的编辑功能推出之后,用户将能够浏览转录副本、搜索关键字并将它们添加到时间线(Timeline)以开始粗剪,用户不再需要仅仅为了找到合适的声音片段而观看数小时的镜头。


Premiere Pro 会在用户构建序列时为其生成转录副本。因此,一旦用户在时间线上获得了一些剪辑,就可以在序列转录副本中复制和粘贴文本短语,并观看时间线中的编辑自动更改来匹配操作。当编辑完成后,基于文本的编辑会为用户提供现成的文字记录,可用于快速生成字幕。


自动色调映射


为了让用户轻松地在同一时间线中处理不同的媒体和色彩空间,而无需 LUT 或自定义色彩设置,Premiere Pro 将推出自动色调映射功能。当前,相机已经可以记录大量的颜色和细节,因此 log 和其他 HDR 格式的使用也越来越多。自动色调映射可转换 HDR 文件(如 iPhone HLG)和流行 log 格式(如 Sony S-Log)的更宽色域,以便以标准序列正确显示。与 LUT 不同,色调映射是非破坏性的,用户可以在媒体上应用颜色分级,而不会出现伪影或剪切高光(clipping highlight)。


Premiere Pro 不仅更快、更可靠,而且还添加了后台自动保存功能,随时备份文件,而不会中断流程。借助新的格式支持和 GPU 加速的 ARRI、RED,以及新的启动复位选项,用户很容易执行日常维护任务,如清除媒体缓存。


其他改进还包括更准确的蒙版、更快的动态图形模板,以及在时间轴中批量编辑标题的能力等。Premiere Pro 将会支持丹麦语、荷兰语、挪威语、瑞典语等 18 种语言


协作编辑(collaborative editing)的更新让你可以轻松地与同一项目中的其他编辑一起工作。Team Project 跟踪项目中的每次更改,Sequence Locking 确保没有其他人可以对你正在处理的内容进行编辑。


特效软件 After Effects 数项更新


After Effects 中的属性面板(Properties panel )与 Adobe Illustrator 和 Adobe Photoshop 中的面板类似,基于此可加快动画设计速度。不同于控件深入到层中进行调整,而是在合成窗口旁根据上下文向用户呈现控件。这样更容易进行新的尝试和迭代设计。属性面板还可以与基本属性一起使用,无论你是经验丰富的专业人士还是刚开始从事动画设计的入门者,属性面板都可以缩短 After Effects 中创意与执行之间的距离。


221.png

此外,After Effects 还提供对 ACES 和 OpenColorIO 的原生支持。ACES 是一种颜色交换标准,具有极宽的色域,可提供更大动态范围和更丰富的图像细节。如果你正在与其他艺术家或机构合作,ACES 和 OpenColorIO 色彩管理可以确保在移交项目时保持一致的色彩。


一直以来,Adobe 不断听取用户各种意见,改善 After Effects 功能 。其中 Selectable Track Mattes 是一项非常受欢迎的功能,它可以让你为多个图层重复使用相同的蒙版(matte),从而节省时间。现在,新的快捷键让动态蒙版工作流程更加简洁。此外,Adobe 还更改了 Colorama,使其默认为本机 After Effects 颜色选择器,这是一项功能请求,可在用户每次使用时节省点击次数。其实早在去年秋天,Adobe 就添加了 50 个动画预设,这些预设深受 After Effects 用户的喜爱。今年 Adobe 将继续添加 50 多个预设来帮助用户创建动画,而无需从头开始。


最后,包括 Premiere Pro 中的 Automatic Tone Mapping 和 After Effects 中的 ACES/OCIO 色彩管理等许多功能,Adobe 已经在最近的更新中发布。其他功能,包括 Premiere Pro 中的基于文本的编辑和背景自动保存以及 After Effects 中的属性面板,目前处于公开测试阶段,将于 5 月正式上线。


参考链接:

https://blog.adobe.com/en/publish/2023/04/13/nab-2023-introducing-text-based-editing-premiere-pro-properties-panel-after-effects-more

相关文章
|
12天前
|
机器学习/深度学习 人工智能 编解码
VideoVAE+:AI 生成视频高保真重建和跨模态重建工具,基于文本信息指导视频重建,提升视频细节质量
VideoVAE+ 是香港科技大学推出的先进跨模态视频变分自编码器,通过时空分离压缩机制和文本指导,实现了高效视频压缩与精准重建。
55 7
VideoVAE+:AI 生成视频高保真重建和跨模态重建工具,基于文本信息指导视频重建,提升视频细节质量
|
14天前
|
机器学习/深度学习 人工智能 算法
Enhance-A-Video:上海 AI Lab 推出视频生成质量增强算法,显著提升 AI 视频生成的真实度和细节表现
Enhance-A-Video 是由上海人工智能实验室、新加坡国立大学和德克萨斯大学奥斯汀分校联合推出的视频生成质量增强算法,能够显著提升视频的对比度、清晰度和细节真实性。
52 8
Enhance-A-Video:上海 AI Lab 推出视频生成质量增强算法,显著提升 AI 视频生成的真实度和细节表现
|
23天前
|
人工智能
AniDoc:蚂蚁集团开源 2D 动画上色 AI 模型,基于视频扩散模型自动将草图序列转换成彩色动画,保持动画的连贯性
AniDoc 是一款基于视频扩散模型的 2D 动画上色 AI 模型,能够自动将草图序列转换为彩色动画。该模型通过对应匹配技术和背景增强策略,实现了色彩和风格的准确传递,适用于动画制作、游戏开发和数字艺术创作等多个领域。
94 16
AniDoc:蚂蚁集团开源 2D 动画上色 AI 模型,基于视频扩散模型自动将草图序列转换成彩色动画,保持动画的连贯性
|
1月前
|
人工智能 自然语言处理 前端开发
Director:构建视频智能体的 AI 框架,用自然语言执行搜索、编辑、合成和生成等复杂视频任务
Director 是一个构建视频智能体的 AI 框架,用户可以通过自然语言命令执行复杂的视频任务,如搜索、编辑、合成和生成视频内容。该框架基于 VideoDB 的“视频即数据”基础设施,集成了多个预构建的视频代理和 AI API,支持高度定制化,适用于开发者和创作者。
96 9
Director:构建视频智能体的 AI 框架,用自然语言执行搜索、编辑、合成和生成等复杂视频任务
|
1月前
|
机器学习/深度学习 人工智能 自然语言处理
MMAudio:开源 AI 音频合成项目,根据视频或文本生成同步的音频
MMAudio 是一个基于多模态联合训练的高质量 AI 音频合成项目,能够根据视频内容或文本描述生成同步的音频。该项目适用于影视制作、游戏开发、虚拟现实等多种场景,提升用户体验。
103 7
MMAudio:开源 AI 音频合成项目,根据视频或文本生成同步的音频
|
1月前
|
机器学习/深度学习 存储 人工智能
EfficientTAM:Meta AI推出的视频对象分割和跟踪模型
EfficientTAM是Meta AI推出的轻量级视频对象分割和跟踪模型,旨在解决SAM 2模型在移动设备上部署时的高计算复杂度问题。该模型采用非层次化Vision Transformer(ViT)作为图像编码器,并引入高效记忆模块,以降低计算复杂度,同时保持高质量的分割结果。EfficientTAM在多个视频分割基准测试中表现出与SAM 2相当的性能,具有更快的处理速度和更少的参数,特别适用于移动设备上的视频对象分割应用。
57 9
EfficientTAM:Meta AI推出的视频对象分割和跟踪模型
|
27天前
|
人工智能 小程序 API
【一步步开发AI运动小程序】十七、如何识别用户上传视频中的人体、运动、动作、姿态?
【云智AI运动识别小程序插件】提供人体、运动、姿态检测的AI能力,支持本地原生识别,无需后台服务,具有速度快、体验好、易集成等优点。本文介绍如何使用该插件实现用户上传视频的运动识别,包括视频解码抽帧和人体识别的实现方法。
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
LTX Video:Lightricks推出的开源AI视频生成模型
LTX Video是由Lightricks推出的开源AI视频生成模型,能够在4秒内生成5秒的高质量视频。该模型基于2亿参数的DiT架构,确保帧间平滑运动和结构一致性,支持长视频制作,适用于多种场景,如游戏图形升级和电子商务广告变体制作。
142 1
LTX Video:Lightricks推出的开源AI视频生成模型
存储 人工智能 自然语言处理
79 6
|
3月前
|
人工智能 自然语言处理 安全
【通义】AI视界|Adobe推出文生视频AI模型,迎战OpenAI和Meta
本文精选了过去24小时内的重要科技新闻,包括微软人工智能副总裁跳槽至OpenAI、Adobe推出文本生成视频的AI模型、Meta取消高端头显转而开发超轻量设备、谷歌与核能公司合作为数据中心供电,以及英伟达股价创下新高,市值接近3.4万亿美元。这些动态展示了科技行业的快速发展和激烈竞争。点击链接或扫描二维码获取更多资讯。

热门文章

最新文章