52个AIGC视频生成算法模型介绍(中)

简介: 52个AIGC视频生成算法模型介绍(中)

52个AIGC视频生成算法模型介绍(上):https://developer.aliyun.com/article/1480690


  • Pix2Video: Video Editing using Image Diffusion


机构:Abode

时间:2023.3.22

https://duyguceylan.github.io/pix2video.github.io/


  • InstructVid2Vid: Controllable Video Editing with Natural Language Instructions


机构:浙大

时间:2023.5.21


  • ControlVideo: Training-free Controllable Text-to-Video Generation


机构:华为

时间:2023.5.22

https://github.com/YBYBZhang/ControlVideo


  • ControlVideo: Conditional Control for One-shot Text-driven Video Editing and Beyond


机构:清华

时间:2023.11.28

https://github.com/thu-ml/controlvideo


  • Control-A-Video: Controllable Text-to-Video Generation with Diffusion Models


时间:2023.12.6https://controlavideo.github.io/


  • StableVideo: Text-driven Consistency-aware Diffusion Video Editing


机构:MSRA

时间:2023.8.18

https://github.com/rese1f/StableVideo


  • MagicEdit: High-Fidelity and Temporally Coherent Video Editing


机构:字节

时间:2023.8.28

https://magic-edit.github.io/(未开源)


  • GROUND-A-VIDEO: ZERO-SHOT GROUNDED VIDEO EDITING USING TEXT-TO-IMAGE DIFFUSION MODELS


机构:KAIST时间:2023.10.2https://ground-a-video.github.io/

  • FateZero: Fusing Attentions for Zero-shot Text-based Video Editing


机构:腾讯AI Lab时间:2023.10.11

https://fate-zero-edit.github.io


  • Motion-Conditioned Image Animation for Video Editing


机构:Meta

时间:2023.11.30

facebookresearch.github.io/MoCA(未开源)


  • VidEdit: Zero-shot and Spatially Aware Text-driven Video Editing


机构:Sorbonne Université, Paris, France

时间:2023.12.15

https://videdit.github.io


  • Zero-Shot Video Editing Using Off-The-Shelf Image Diffusion Models


时间:2024.1.4https://github.com/baaivision/vid2vid-zero

 人物动态化



主要是通过人体姿态作为条件性输入(结合controlnet等),将一张图作为前置参考图,或者直接使用文本描述生成图片。其中阿里和字节分别有几篇代表性论文,其中字节的代码有两篇已经开源,阿里的代码还在等待阶段。


  • Follow Your Pose


机构:腾讯AI Lab

时间:2023.4.3

https://follow-your-pose.github.io/

  • DreamPose: Fashion Image-to-Video Synthesis via Stable Diffusion


机构:google,nvidia

时间:2023.5.4

https://grail.cs.washington.edu/projects/dreampose/


  • DISCO: Disentangled Control for Realistic Human Dance Generation


机构:微软

时间:2023.10.11

https://disco-dance.github.io


  • MagicAnimate: Temporally Consistent Human Image Animation using Diffusion Model


机构:字节

时间:2023.11.27

https://showlab.github.io/magicanimate/


  • MaigcDance


机构:字节

时间:2023.11.18

https://boese0601.github.io/magicdance/


  • Animate Anyone: Consistent and Controllable Image-to-Video Synthesis for Character Animation


机构:阿里

时间:2023.12.7

https://humanaigc.github.io/animate-anyone/(未开源)

  • DreaMoving: A Human Video Generation Framework based on Diffusion Model


机构:阿里

时间:2023.12.11

https://dreamoving.github.io/dreamoving(未开源)

52个AIGC视频生成算法模型介绍(下):https://developer.aliyun.com/article/1480687

目录
相关文章
|
2月前
|
存储 机器学习/深度学习 人工智能
阿里云环境下 Runway 深度部署:从技术原理到 AIGC 视频生成落地
Runway作为AI视频生成标杆,融合扩散模型与多模态技术,依托潜空间优化与时空注意力机制,实现高效高质视频生成。结合阿里云算力与API生态,支持版权合规、运镜控制与多模态联动,广泛应用于影视、广告与游戏领域,推动内容创作智能化升级。
591 0
|
2月前
|
机器学习/深度学习 人工智能 JSON
微软rStar2-Agent:新的GRPO-RoC算法让14B模型在复杂推理时超越了前沿大模型
Microsoft Research最新推出的rStar2-Agent在AIME24数学基准测试中以80.6%的准确率超越超大规模模型DeepSeek-R1,展现“思考更聪明”而非“更长”的AI推理新方向。
155 8
微软rStar2-Agent:新的GRPO-RoC算法让14B模型在复杂推理时超越了前沿大模型
|
2月前
|
机器学习/深度学习 传感器 算法
【无人车路径跟踪】基于神经网络的数据驱动迭代学习控制(ILC)算法,用于具有未知模型和重复任务的非线性单输入单输出(SISO)离散时间系统的无人车的路径跟踪(Matlab代码实现)
【无人车路径跟踪】基于神经网络的数据驱动迭代学习控制(ILC)算法,用于具有未知模型和重复任务的非线性单输入单输出(SISO)离散时间系统的无人车的路径跟踪(Matlab代码实现)
193 2
|
2月前
|
机器学习/深度学习 并行计算 算法
【CPOBP-NSWOA】基于豪冠猪优化BP神经网络模型的多目标鲸鱼寻优算法研究(Matlab代码实现)
【CPOBP-NSWOA】基于豪冠猪优化BP神经网络模型的多目标鲸鱼寻优算法研究(Matlab代码实现)
|
2月前
|
机器学习/深度学习 资源调度 算法
遗传算法模型深度解析与实战应用
摘要 遗传算法(GA)作为一种受生物进化启发的优化算法,在复杂问题求解中展现出独特优势。本文系统介绍了GA的核心理论、实现细节和应用经验。算法通过模拟自然选择机制,利用选择、交叉、变异三大操作在解空间中进行全局搜索。与梯度下降等传统方法相比,GA不依赖目标函数的连续性或可微性,特别适合处理离散优化、多目标优化等复杂问题。文中详细阐述了染色体编码、适应度函数设计、遗传操作实现等关键技术,并提供了Python代码实现示例。实践表明,GA的成功应用关键在于平衡探索与开发,通过精心调参维持种群多样性同时确保收敛效率
|
2月前
|
机器学习/深度学习 边缘计算 人工智能
粒子群算法模型深度解析与实战应用
蒋星熠Jaxonic是一位深耕智能优化算法领域多年的技术探索者,专注于粒子群优化(PSO)算法的研究与应用。他深入剖析了PSO的数学模型、核心公式及实现方法,并通过大量实践验证了其在神经网络优化、工程设计等复杂问题上的卓越性能。本文全面展示了PSO的理论基础、改进策略与前沿发展方向,为读者提供了一份详尽的技术指南。
粒子群算法模型深度解析与实战应用
|
2月前
|
机器学习/深度学习 运维 算法
基于粒子群优化算法的配电网光伏储能双层优化配置模型[IEEE33节点](选址定容)(Matlab代码实现)
基于粒子群优化算法的配电网光伏储能双层优化配置模型[IEEE33节点](选址定容)(Matlab代码实现)
181 0
|
2月前
|
机器学习/深度学习 数据采集 传感器
【WOA-CNN-LSTM】基于鲸鱼算法优化深度学习预测模型的超参数研究(Matlab代码实现)
【WOA-CNN-LSTM】基于鲸鱼算法优化深度学习预测模型的超参数研究(Matlab代码实现)
195 0
|
3月前
|
传感器 算法 定位技术
KF,EKF,IEKF 算法的基本原理并构建推导出四轮前驱自主移动机器人的运动学模型和观测模型(Matlab代码实现)
KF,EKF,IEKF 算法的基本原理并构建推导出四轮前驱自主移动机器人的运动学模型和观测模型(Matlab代码实现)
125 2
|
2月前
|
机器学习/深度学习 存储 算法
基于模型预测算法的混合储能微电网双层能量管理系统研究(Matlab代码实现)
基于模型预测算法的混合储能微电网双层能量管理系统研究(Matlab代码实现)

热门文章

最新文章