Adobe :用 AI 剪视频!像复制、粘贴一样简单

简介: Adobe :用 AI 剪视频!像复制、粘贴一样简单

前言


机器之心报道 编辑:陈萍、小舟

Adobe 让视频剪辑变得就像复制、粘贴文本一样简单。

随着各类强大生成模型的问世,人工智能生成内容(AIGC)越来越受到关注。在视觉生成领域,基于 GAN、扩散模型的图像生成模型越来越多,生成效果也越来越好。这些模型也在加速落地,许多「AI 画图」工具的能力都令人惊艳。


作为视觉内容生产力工具大厂的 Adobe,近期终于宣布入局 AIGC 赛道。北京时间本周四晚,Adobe 宣布其视频编辑软件 Premiere Pro 将推出一系列 AI 功能。这是继上个月在 GTC 大会上,Adobe 联合英伟达推出 AI 图像生成工具 Firefly(萤火虫)后的又一项 AIGC 工作。


根据 Adobe 目前的介绍,Premiere Pro 将引入基于文本的视频编辑,这将让视频粗剪就像复制和粘贴文本一样简单。总的来说,Premiere Pro 添加了视频编辑用户一直需要的数十项改进,包括自动色调映射、背景自动保存、更好的协作工具等等。Premiere Pro 将会升级为功能更强大,运行速度更快、更稳定的版本。


正文


功能简介


基于文本编辑视频


Premiere Pro 基于文本编辑视频的方法将彻底改变视频粗剪的工作流程。Premiere Pro 中基于文本的编辑功能由 Adobe Sensei 提供支持,使用最新的 AI 工具自动转录用户的源媒体。Adobe Sensei 是一个可以应用于 Adobe 旗下各款产品(例如 Photoshop、Premiere、Illustrator)的底层人工智能工具。Sensei 利用 Adobe 长期积累下来的大量数据和内容,从图片到影像,能够帮助人们解决在媒体素材创意过程中面临的一系列问题,帮助用户把一些固定、重复的操作变得自动化和简单化。


基于文本的编辑功能推出之后,用户将能够浏览转录副本、搜索关键字并将它们添加到时间线(Timeline)以开始粗剪,用户不再需要仅仅为了找到合适的声音片段而观看数小时的镜头。


Premiere Pro 会在用户构建序列时为其生成转录副本。因此,一旦用户在时间线上获得了一些剪辑,就可以在序列转录副本中复制和粘贴文本短语,并观看时间线中的编辑自动更改来匹配操作。当编辑完成后,基于文本的编辑会为用户提供现成的文字记录,可用于快速生成字幕。


自动色调映射


为了让用户轻松地在同一时间线中处理不同的媒体和色彩空间,而无需 LUT 或自定义色彩设置,Premiere Pro 将推出自动色调映射功能。当前,相机已经可以记录大量的颜色和细节,因此 log 和其他 HDR 格式的使用也越来越多。自动色调映射可转换 HDR 文件(如 iPhone HLG)和流行 log 格式(如 Sony S-Log)的更宽色域,以便以标准序列正确显示。与 LUT 不同,色调映射是非破坏性的,用户可以在媒体上应用颜色分级,而不会出现伪影或剪切高光(clipping highlight)。


Premiere Pro 不仅更快、更可靠,而且还添加了后台自动保存功能,随时备份文件,而不会中断流程。借助新的格式支持和 GPU 加速的 ARRI、RED,以及新的启动复位选项,用户很容易执行日常维护任务,如清除媒体缓存。


其他改进还包括更准确的蒙版、更快的动态图形模板,以及在时间轴中批量编辑标题的能力等。Premiere Pro 将会支持丹麦语、荷兰语、挪威语、瑞典语等 18 种语言


协作编辑(collaborative editing)的更新让你可以轻松地与同一项目中的其他编辑一起工作。Team Project 跟踪项目中的每次更改,Sequence Locking 确保没有其他人可以对你正在处理的内容进行编辑。


特效软件 After Effects 数项更新


After Effects 中的属性面板(Properties panel )与 Adobe Illustrator 和 Adobe Photoshop 中的面板类似,基于此可加快动画设计速度。不同于控件深入到层中进行调整,而是在合成窗口旁根据上下文向用户呈现控件。这样更容易进行新的尝试和迭代设计。属性面板还可以与基本属性一起使用,无论你是经验丰富的专业人士还是刚开始从事动画设计的入门者,属性面板都可以缩短 After Effects 中创意与执行之间的距离。


221.png

此外,After Effects 还提供对 ACES 和 OpenColorIO 的原生支持。ACES 是一种颜色交换标准,具有极宽的色域,可提供更大动态范围和更丰富的图像细节。如果你正在与其他艺术家或机构合作,ACES 和 OpenColorIO 色彩管理可以确保在移交项目时保持一致的色彩。


一直以来,Adobe 不断听取用户各种意见,改善 After Effects 功能 。其中 Selectable Track Mattes 是一项非常受欢迎的功能,它可以让你为多个图层重复使用相同的蒙版(matte),从而节省时间。现在,新的快捷键让动态蒙版工作流程更加简洁。此外,Adobe 还更改了 Colorama,使其默认为本机 After Effects 颜色选择器,这是一项功能请求,可在用户每次使用时节省点击次数。其实早在去年秋天,Adobe 就添加了 50 个动画预设,这些预设深受 After Effects 用户的喜爱。今年 Adobe 将继续添加 50 多个预设来帮助用户创建动画,而无需从头开始。


最后,包括 Premiere Pro 中的 Automatic Tone Mapping 和 After Effects 中的 ACES/OCIO 色彩管理等许多功能,Adobe 已经在最近的更新中发布。其他功能,包括 Premiere Pro 中的基于文本的编辑和背景自动保存以及 After Effects 中的属性面板,目前处于公开测试阶段,将于 5 月正式上线。


参考链接:

https://blog.adobe.com/en/publish/2023/04/13/nab-2023-introducing-text-based-editing-premiere-pro-properties-panel-after-effects-more

相关文章
|
1月前
|
人工智能 自然语言处理 安全
【通义】AI视界|Adobe推出文生视频AI模型,迎战OpenAI和Meta
本文精选了过去24小时内的重要科技新闻,包括微软人工智能副总裁跳槽至OpenAI、Adobe推出文本生成视频的AI模型、Meta取消高端头显转而开发超轻量设备、谷歌与核能公司合作为数据中心供电,以及英伟达股价创下新高,市值接近3.4万亿美元。这些动态展示了科技行业的快速发展和激烈竞争。点击链接或扫描二维码获取更多资讯。
|
1月前
|
人工智能 编解码 API
【选择”丹摩“深入探索智谱AI的CogVideoX:视频生成的新前沿】
【选择”丹摩“深入探索智谱AI的CogVideoX:视频生成的新前沿】
|
2月前
|
人工智能
防AI换脸视频诈骗,中电金信联合复旦提出多模态鉴伪法,还入选顶会ACM MM
【9月更文挑战第26天】中电金信与复旦大学合作,提出一种基于身份信息增强的多媒体伪造检测方法,并入选ACM MM国际会议。该方法利用身份信息作为检测线索,构建了含54位名人324个视频的多模态伪造数据集IDForge,设计了参考辅助的多模态伪造检测网络R-MFDN,显著提升了检测性能,准确率达到92.90%。尽管如此,该方法仍存在一定局限性,如对非英语国家数据及无明确身份信息的视频检测效果可能受限。
61 4
|
1月前
|
人工智能 自然语言处理 搜索推荐
Sora - 探索AI视频模型的无限可能
这篇文章详细介绍了Sora AI视频模型的技术特点、应用场景、未来展望以及伦理和用户体验等方面的问题。
27 0
|
3月前
|
机器学习/深度学习 人工智能 编解码
|
3月前
|
人工智能 搜索推荐
影视与游戏行业AI视频制作的第3步:为角色生成说话视频
继 影视与游戏行业AI视频制作实战:第一步,角色形象设计的一致性以及影视与游戏行业AI视频制作实战:第二步,为角色生成个性化语音 后,实现角色生动化的下一步动作就是能让图像动起来。
|
3月前
|
人工智能 自然语言处理 语音技术
使用AI识别语音和B站视频并通过GPT生成思维导图原创
AI脑图现新增语音及B站视频内容识别功能,可自动生成思维导图。用户可通过发送语音或上传语音文件,系统自动转换为文本并生成结构化的思维导图;对于B站视频,仅需提供链接即可。其工作流程包括:语音转文本、文本结构化、生成Markdown、Markdown转思维导图HTML以及输出最终的思维导图图片给用户。
81 0
|
4月前
|
机器学习/深度学习 人工智能 自然语言处理
AIGC-基于EAS服务快速部署一个AI视频生成
AIGC-基于EAS服务快速部署一个AI视频生成
|
3月前
|
机器学习/深度学习 人工智能 算法
|
4月前
|
人工智能 数据安全/隐私保护 计算机视觉
旷视开源的AI人像视频生成太炸了!输入照片即可模仿任意表情包
【7月更文挑战第6天】旷视科技开源AI模型MegActor,以照片生成逼真人像视频,模仿表情包。基于条件扩散模型,解决身份泄露和背景干扰问题,使用合成数据、图像分割、CLIP编码及风格迁移技术。虽有视频质量、隐私风险及计算资源限制,但对动画和虚拟偶像行业带来革新。[链接](https://arxiv.org/abs/2405.20851)
103 3

热门文章

最新文章