52个AIGC视频生成算法模型介绍(中)

简介: 52个AIGC视频生成算法模型介绍(中)

52个AIGC视频生成算法模型介绍(上):https://developer.aliyun.com/article/1480690


  • Pix2Video: Video Editing using Image Diffusion


机构:Abode

时间:2023.3.22

https://duyguceylan.github.io/pix2video.github.io/


  • InstructVid2Vid: Controllable Video Editing with Natural Language Instructions


机构:浙大

时间:2023.5.21


  • ControlVideo: Training-free Controllable Text-to-Video Generation


机构:华为

时间:2023.5.22

https://github.com/YBYBZhang/ControlVideo


  • ControlVideo: Conditional Control for One-shot Text-driven Video Editing and Beyond


机构:清华

时间:2023.11.28

https://github.com/thu-ml/controlvideo


  • Control-A-Video: Controllable Text-to-Video Generation with Diffusion Models


时间:2023.12.6https://controlavideo.github.io/


  • StableVideo: Text-driven Consistency-aware Diffusion Video Editing


机构:MSRA

时间:2023.8.18

https://github.com/rese1f/StableVideo


  • MagicEdit: High-Fidelity and Temporally Coherent Video Editing


机构:字节

时间:2023.8.28

https://magic-edit.github.io/(未开源)


  • GROUND-A-VIDEO: ZERO-SHOT GROUNDED VIDEO EDITING USING TEXT-TO-IMAGE DIFFUSION MODELS


机构:KAIST时间:2023.10.2https://ground-a-video.github.io/

  • FateZero: Fusing Attentions for Zero-shot Text-based Video Editing


机构:腾讯AI Lab时间:2023.10.11

https://fate-zero-edit.github.io


  • Motion-Conditioned Image Animation for Video Editing


机构:Meta

时间:2023.11.30

facebookresearch.github.io/MoCA(未开源)


  • VidEdit: Zero-shot and Spatially Aware Text-driven Video Editing


机构:Sorbonne Université, Paris, France

时间:2023.12.15

https://videdit.github.io


  • Zero-Shot Video Editing Using Off-The-Shelf Image Diffusion Models


时间:2024.1.4https://github.com/baaivision/vid2vid-zero

 人物动态化



主要是通过人体姿态作为条件性输入(结合controlnet等),将一张图作为前置参考图,或者直接使用文本描述生成图片。其中阿里和字节分别有几篇代表性论文,其中字节的代码有两篇已经开源,阿里的代码还在等待阶段。


  • Follow Your Pose


机构:腾讯AI Lab

时间:2023.4.3

https://follow-your-pose.github.io/

  • DreamPose: Fashion Image-to-Video Synthesis via Stable Diffusion


机构:google,nvidia

时间:2023.5.4

https://grail.cs.washington.edu/projects/dreampose/


  • DISCO: Disentangled Control for Realistic Human Dance Generation


机构:微软

时间:2023.10.11

https://disco-dance.github.io


  • MagicAnimate: Temporally Consistent Human Image Animation using Diffusion Model


机构:字节

时间:2023.11.27

https://showlab.github.io/magicanimate/


  • MaigcDance


机构:字节

时间:2023.11.18

https://boese0601.github.io/magicdance/


  • Animate Anyone: Consistent and Controllable Image-to-Video Synthesis for Character Animation


机构:阿里

时间:2023.12.7

https://humanaigc.github.io/animate-anyone/(未开源)

  • DreaMoving: A Human Video Generation Framework based on Diffusion Model


机构:阿里

时间:2023.12.11

https://dreamoving.github.io/dreamoving(未开源)

52个AIGC视频生成算法模型介绍(下):https://developer.aliyun.com/article/1480687

目录
相关文章
|
4月前
|
人工智能 自然语言处理 算法
算法及模型合规:刻不容缓的企业行动指南
随着AI技术迅猛发展,算法与模型成为企业数字化转型的核心。然而,国家密集出台多项法规,如《人工智能生成合成内容标识办法》等,并开展“清朗·整治AI技术滥用”专项行动,标志着AI监管进入严格阶段。算法备案从“可选项”变为“必选项”,未合规可能面临罚款甚至刑事责任。同时,多地提供备案奖励政策,合规既是规避风险的需要,也是把握政策红利和市场信任的机遇。企业需系统规划合规工作,从被动应对转向主动引领,以适应AI时代的挑战与机遇。
|
5月前
|
机器学习/深度学习 存储 算法
18个常用的强化学习算法整理:从基础方法到高级模型的理论技术与代码实现
本文系统讲解从基本强化学习方法到高级技术(如PPO、A3C、PlaNet等)的实现原理与编码过程,旨在通过理论结合代码的方式,构建对强化学习算法的全面理解。
603 10
18个常用的强化学习算法整理:从基础方法到高级模型的理论技术与代码实现
|
6月前
|
人工智能 算法 语音技术
Video-T1:视频生成实时手术刀!清华腾讯「帧树算法」终结闪烁抖动
清华大学与腾讯联合推出的Video-T1技术,通过测试时扩展(TTS)和Tree-of-Frames方法,显著提升视频生成的连贯性与文本匹配度,为影视制作、游戏开发等领域带来突破性解决方案。
185 4
Video-T1:视频生成实时手术刀!清华腾讯「帧树算法」终结闪烁抖动
|
6月前
|
机器学习/深度学习 数据采集 算法
短视频到底如何推荐的?深度剖析视频算法推送原理详细且专业的解读-优雅草卓伊凡-【01】短视频算法推荐之数据收集
短视频到底如何推荐的?深度剖析视频算法推送原理详细且专业的解读-优雅草卓伊凡-【01】短视频算法推荐之数据收集
547 12
短视频到底如何推荐的?深度剖析视频算法推送原理详细且专业的解读-优雅草卓伊凡-【01】短视频算法推荐之数据收集
|
6月前
|
机器学习/深度学习 人工智能 自然语言处理
AI训练师入行指南(三):机器学习算法和模型架构选择
从淘金到雕琢,将原始数据炼成智能珠宝!本文带您走进数字珠宝工坊,用算法工具打磨数据金砂。从基础的经典算法到精密的深度学习模型,结合电商、医疗、金融等场景实战,手把手教您选择合适工具,打造价值连城的智能应用。掌握AutoML改装套件与模型蒸馏术,让复杂问题迎刃而解。握紧算法刻刀,为数字世界雕刻文明!
205 6
|
6月前
|
算法 数据挖掘 数据安全/隐私保护
基于CS模型和CV模型的多目标协同滤波跟踪算法matlab仿真
本项目基于CS模型和CV模型的多目标协同滤波跟踪算法,旨在提高复杂场景下多个移动目标的跟踪精度和鲁棒性。通过融合目标间的关系和数据关联性,优化跟踪结果。程序在MATLAB2022A上运行,展示了真实轨迹与滤波轨迹的对比、位置及速度误差均值和均方误差等关键指标。核心代码包括对目标轨迹、速度及误差的详细绘图分析,验证了算法的有效性。该算法结合CS模型的初步聚类和CV模型的投票机制,增强了目标状态估计的准确性,尤其适用于遮挡、重叠和快速运动等复杂场景。
|
7月前
|
机器学习/深度学习 算法
扩散模型=进化算法!生物学大佬用数学揭示本质
在机器学习与生物学交叉领域,Tufts和Harvard大学研究人员揭示了扩散模型与进化算法的深刻联系。研究表明,扩散模型本质上是一种进化算法,通过逐步去噪生成数据点,类似于进化中的变异和选择机制。这一发现不仅在理论上具有重要意义,还提出了扩散进化方法,能够高效识别多解、处理高维复杂参数空间,并显著减少计算步骤,为图像生成、视频合成及神经网络优化等应用带来广泛潜力。论文地址:https://arxiv.org/pdf/2410.02543。
188 21
|
7月前
|
人工智能 算法 搜索推荐
单纯接入第三方模型就无需算法备案了么?
随着人工智能的发展,企业接入第三方模型提升业务能力的现象日益普遍,但算法备案问题引发诸多讨论。根据相关法规,无论使用自研或第三方模型,只要涉及向中国境内公众提供算法推荐服务,企业均需履行备案义务。这不仅因为服务性质未变,风险依然存在,也符合监管要求。备案内容涵盖模型基本信息、算法优化目标等,且需动态管理。未备案可能面临法律和运营风险。建议企业提前规划、合规管理和积极沟通,确保合法合规运营。
|
8月前
|
机器学习/深度学习 人工智能 算法
机器学习算法的优化与改进:提升模型性能的策略与方法
机器学习算法的优化与改进:提升模型性能的策略与方法
1357 13
机器学习算法的优化与改进:提升模型性能的策略与方法
|
9月前
|
机器学习/深度学习 人工智能 算法
Enhance-A-Video:上海 AI Lab 推出视频生成质量增强算法,显著提升 AI 视频生成的真实度和细节表现
Enhance-A-Video 是由上海人工智能实验室、新加坡国立大学和德克萨斯大学奥斯汀分校联合推出的视频生成质量增强算法,能够显著提升视频的对比度、清晰度和细节真实性。
344 8
Enhance-A-Video:上海 AI Lab 推出视频生成质量增强算法,显著提升 AI 视频生成的真实度和细节表现

热门文章

最新文章