AI 剧本生成与动画创作时空门
短视频行业的快速增长使得内容创作的速度和质量成为竞争关键。传统动画故事制作复杂且昂贵,限制了创作者对市场热点的快速反应和创新实现。本方案通过 AI 生成剧本和动画,简化创作流程并降低技术门槛,使创作者能高效生产高质量作品,迅速适应市场需求。
方案优势
降低技术门槛
无需深厚的动画制作技术背景,可通过简单的交互界面完成复杂创作,使得更多创意想法得以实现,促进了内容多样性和创新。
加速内容生产
通过自动化流程整合剧本撰写、插图设计、声音合成至视频合成,极大缩短了动画创作周期,使得创作者能够迅速响应市场变化,提高内容产出速度。
灵活性与定制化
提供剧本策划与续写功能,可根据需求调整剧本类型、梗概、风格等,实现个性化创作,满足不同项目的需求。
优化成本
减少了传统动画制作中的人力与设备成本,尤其是对于初创团队或个人创作者而言,显著降低了进入门槛,且支持按需调整资源,灵活管理成本。
春节前我已经多次参加了阿里云社区的AI剧本生成的活动,所以本次测评不是陌生体验,带着记忆再复习一遍,回忆之前使用过程中遇到的问题。
进入正题
本方案利用函数计算 FC 构建 Web 服务,结合百炼模型服务和 ComfyUI 工具,实现了从故事剧本撰写、插图设计、声音合成和字幕添加到视频合成的一站式自动化流程。
相关云产品:
- 1个函数计算 FC 应用:分别部署 ComfyUI 和 WebUI 两个函数。
- 1个对象存储 OSS Bucket:存储图片、音频、视频等。
- 百炼模型服务:调用 API 完成剧本生成,语音合成和字幕相关信息生成。
在线部署,进入实操。
部署资源
开通百炼模型,获取API。
创建对象存储BUcket
部署应用
按照上一步复制的API-KEY,创建的对象存储信息,填入函数计算模板,最后点击创建并部署默认环境。
耐心等待,大概3分钟左右,最长不超过5分钟,部署完成。点击访问域名,开始体验。
剧本创作
按照步骤先上传图片,确定我们的主人公IP。然后输入剧本提示词【1000字以内】。选择旁白声音,生成视频。
PS:结合春节前de 使用和最近测试满血版DeepSeek的情况,结果并不是很理想,感觉和我想要的不太一样。随着AI的火爆,深入的学习才知道,虽然大模型已经可以使用了。但是想要生成的更准确,还要不断的喂养学习,描述的越准确,则生成的视频贴近需求。
提示(Prompt)是您输入给大模型(LLM)的文本信息,用于明确地告诉模型您想要解决的问题或完成的任务,也是大语言模型理解用户需求并生成相关、准确回答或内容的基础。
回归本次创作,我的剧本是用通义千问生成的。
点击生成视频【本实验以实际使用资源量计费的,即使我们创建了应用,但是没调用函数计算生成视频是不计费的】
通过多次的实验,发现生成视频的时长和剧本长度有关系。但上述的视频生成失败,网页一直在转呀转,没反应。同样的内容重新第二次生成也一样失败了,没找到原因,我感觉可能有2点,1是文本过场,需要生成多个图片。2是人物形象不对,我给的是猫头鹰,动物形象,不是人物形象,如果支持动物的话,也可能我的图片比例不协调,无法抽取到形象特征。
所以我沿用了春节前创建的铁扇公主形象,重新测试。同样用通义千问生成,这次为了节省时间并对比测试,300字。
这次大概耗时7分钟,完成制作。但是制作的效果不太理想,《蓝眸少女奇遇记》,和我的剧本基本根本不搭嘎,所以我尝试对人物描述在重新进行限定,但是剧本不做变更。
もう一度,大概7-8分钟的样子。
生成一段56秒的视频《情牵火焰山》,视频由以下5张图片组成,以类似幻灯片的形式播放,并附带旁白。
生成的内容都存储到对象存储中,可以对图片、视频进行下载。每个素材都是一个文件夹,点击进入可以看到生成的1个视频,5张图片和5个MP3格式的音频。
总结下近1个月多次使用的体验:
- web页面缺少提示,或者说是入口检查。第一次我上传了猫头鹰的图片,不符合人物形象,但是我也可以成功上传图片。但是无法生成视频,一直在生成的过程中,转圈转圈,等了大概半小时还是没变化,然后刷新下页面,结果什么都没有了。不知道任务状态,成功还是失败?
- 其实我第一步生成插图就失败了,生成插图是个X,但是还是一直转圈,这里就应该立即停止任务,并做报错提示。
- 如果成功的完成了创作,先生成插图,再合成视频。点击视频下载,就跳转到视频播放页面。网页内容没保存,后退网页内容清空了,想要再次查看生成的内容,就只能去对象存储了。
- 就因为上个问题,导致我为了保存截图,重复了多次创作。我每次的输入都是一模一样的,但是每次输出都不一样。
- 每个插图的内容不一致。
- 图片和内容不一致。
- 偶尔不按照我们的剧本提示生成,又一次是完全和剧本内容不一样。
如下,图一图二铁扇公主的牛魔王的IP不一样,文字内容铁扇公主是翠绿长裙。
一眼假综上吧,我觉得AI创造的剧本和动画,还是有所缺陷的。虽然简化和创作流程也降低技术门槛,但是作品的质量不高。