阿里云《AI 剧本生成与动画创作》技术解决方案测评

简介: 本问是对《AI 剧本生成与动画创作》的用心体验。结论不是特别理想,在实际使用中仍存在一些问题。

AI 剧本生成与动画创作时空门


短视频行业的快速增长使得内容创作的速度和质量成为竞争关键。传统动画故事制作复杂且昂贵,限制了创作者对市场热点的快速反应和创新实现。本方案通过 AI 生成剧本和动画,简化创作流程并降低技术门槛,使创作者能高效生产高质量作品,迅速适应市场需求。

image.png

方案优势

降低技术门槛

无需深厚的动画制作技术背景,可通过简单的交互界面完成复杂创作,使得更多创意想法得以实现,促进了内容多样性和创新。

加速内容生产

通过自动化流程整合剧本撰写、插图设计、声音合成至视频合成,极大缩短了动画创作周期,使得创作者能够迅速响应市场变化,提高内容产出速度。

灵活性与定制化

提供剧本策划与续写功能,可根据需求调整剧本类型、梗概、风格等,实现个性化创作,满足不同项目的需求。

优化成本

减少了传统动画制作中的人力与设备成本,尤其是对于初创团队或个人创作者而言,显著降低了进入门槛,且支持按需调整资源,灵活管理成本。


春节前我已经多次参加了阿里云社区的AI剧本生成的活动,所以本次测评不是陌生体验,带着记忆再复习一遍,回忆之前使用过程中遇到的问题。

进入正题

本方案利用函数计算 FC 构建 Web 服务,结合百炼模型服务和 ComfyUI 工具,实现了从故事剧本撰写、插图设计、声音合成和字幕添加到视频合成的一站式自动化流程。

相关云产品:

  • 1个函数计算 FC 应用:分别部署 ComfyUI 和 WebUI 两个函数
  • 1个对象存储 OSS Bucket:存储图片、音频、视频等。
  • 百炼模型服务:调用 API 完成剧本生成,语音合成和字幕相关信息生成。

在线部署,进入实操。

部署资源

开通百炼模型,获取API。

image.png

创建对象存储BUcket

image.png

部署应用

按照上一步复制的API-KEY,创建的对象存储信息,填入函数计算模板,最后点击创建并部署默认环境。

image.png

耐心等待,大概3分钟左右,最长不超过5分钟,部署完成。点击访问域名,开始体验。

image.png


剧本创作


按照步骤先上传图片,确定我们的主人公IP。然后输入剧本提示词【1000字以内】。选择旁白声音,生成视频。 image.png


PS:结合春节前de 使用和最近测试满血版DeepSeek的情况,结果并不是很理想,感觉和我想要的不太一样。随着AI的火爆,深入的学习才知道,虽然大模型已经可以使用了。但是想要生成的更准确,还要不断的喂养学习,描述的越准确,则生成的视频贴近需求。

Prompt 最佳实践

提示(Prompt)是您输入给大模型(LLM)的文本信息,用于明确地告诉模型您想要解决的问题或完成的任务,也是大语言模型理解用户需求并生成相关、准确回答或内容的基础。

image.png

回归本次创作,我的剧本是用通义千问生成的。

image.png

点击生成视频【本实验以实际使用资源量计费的,即使我们创建了应用,但是没调用函数计算生成视频是不计费的

image.png

通过多次的实验,发现生成视频的时长和剧本长度有关系。但上述的视频生成失败,网页一直在转呀转,没反应。同样的内容重新第二次生成也一样失败了,没找到原因,我感觉可能有2点,1是文本过场,需要生成多个图片。2是人物形象不对,我给的是猫头鹰,动物形象,不是人物形象,如果支持动物的话,也可能我的图片比例不协调,无法抽取到形象特征。

所以我沿用了春节前创建的铁扇公主形象,重新测试。同样用通义千问生成,这次为了节省时间并对比测试,300字。

image.png

这次大概耗时7分钟,完成制作。但是制作的效果不太理想,《蓝眸少女奇遇记》,和我的剧本基本根本不搭嘎,所以我尝试对人物描述在重新进行限定,但是剧本不做变更。

image.png

もう一度,大概7-8分钟的样子。

image.png

生成一段56秒的视频《情牵火焰山》,视频由以下5张图片组成,以类似幻灯片的形式播放,并附带旁白。

image.png image.png


生成的内容都存储到对象存储中,可以对图片、视频进行下载。每个素材都是一个文件夹,点击进入可以看到生成的1个视频,5张图片和5个MP3格式的音频。

image.png image.png



总结下近1个月多次使用的体验:

  • web页面缺少提示,或者说是入口检查。第一次我上传了猫头鹰的图片,不符合人物形象,但是我也可以成功上传图片。但是无法生成视频,一直在生成的过程中,转圈转圈,等了大概半小时还是没变化,然后刷新下页面,结果什么都没有了。不知道任务状态,成功还是失败?
  • 其实我第一步生成插图就失败了,生成插图是个X,但是还是一直转圈,这里就应该立即停止任务,并做报错提示。

image.png

  • 如果成功的完成了创作,先生成插图,再合成视频。点击视频下载,就跳转到视频播放页面。网页内容没保存,后退网页内容清空了,想要再次查看生成的内容,就只能去对象存储了。

image.png

  • 就因为上个问题,导致我为了保存截图,重复了多次创作。我每次的输入都是一模一样的,但是每次输出都不一样。
  1. 每个插图的内容不一致。
  2. 图片和内容不一致。
  3. 偶尔不按照我们的剧本提示生成,又一次是完全和剧本内容不一样。

如下,图一图二铁扇公主的牛魔王的IP不一样,文字内容铁扇公主是翠绿长裙。

image.png


一眼假综上吧,我觉得AI创造的剧本和动画,还是有所缺陷的。虽然简化和创作流程也降低技术门槛,但是作品的质量不高。

相关实践学习
【AI破次元壁合照】少年白马醉春风,函数计算一键部署AI绘画平台
本次实验基于阿里云函数计算产品能力开发AI绘画平台,可让您实现“破次元壁”与角色合照,为角色换背景效果,用AI绘图技术绘出属于自己的少年江湖。
从 0 入门函数计算
在函数计算的架构中,开发者只需要编写业务代码,并监控业务运行情况就可以了。这将开发者从繁重的运维工作中解放出来,将精力投入到更有意义的开发任务上。
相关文章
|
5月前
|
人工智能 数据安全/隐私保护
如何识别AI生成内容?探秘“AI指纹”检测技术
如何识别AI生成内容?探秘“AI指纹”检测技术
886 119
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
AI检测技术:如何识别机器生成的“数字指纹”?
AI检测技术:如何识别机器生成的“数字指纹”?
365 115
|
5月前
|
人工智能 自然语言处理 算法
揭秘AI文本:当前主流检测技术与挑战
揭秘AI文本:当前主流检测技术与挑战
895 115
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
如何准确检测AI生成内容?这三大技术是关键
如何准确检测AI生成内容?这三大技术是关键
912 116
|
5月前
|
机器学习/深度学习 人工智能 算法
AI生成内容的“指纹”与检测技术初探
AI生成内容的“指纹”与检测技术初探
614 9
|
5月前
|
人工智能 开发者
从技术到品牌:一个AI指令,让开发者也能写出动人的品牌故事
开发者常擅技术却困于品牌叙事。本文分享一套结构化AI指令,结合DeepSeek、通义千问等国产工具,将品牌故事拆解为可执行模块,助力技术人快速生成有温度、有逻辑的品牌故事框架,实现从代码到共鸣的跨越。
426 5
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
识破“幻影”:当前AI内容检测的技术与挑战
识破“幻影”:当前AI内容检测的技术与挑战
380 3
|
5月前
|
人工智能 自然语言处理
如何识别AI生成内容?这几点技术指标是关键
如何识别AI生成内容?这几点技术指标是关键
1053 2
|
5月前
|
人工智能 搜索推荐 数据安全/隐私保护
AI检测技术:如何识别机器生成内容?
AI检测技术:如何识别机器生成内容?
378 0

热门文章

最新文章