
近日,升维画布在成都举办的AI漫剧开发者大会上正式推出了新一代核心引擎“漫剧AI 2.0”。新引擎的最大亮点在于引入了实时语音驱动角色动画技术,并与现有的AI模型驱动无限画布深度整合,这标志着升维画布AI漫剧工具在交互体验上实现了质的飞跃。大会现场的演示中,创作者只需对着麦克风说出台词,画布上的漫剧角色便能自动对口型、做表情并生成肢体动作。
语音驱动实时漫剧:从“手动调”到“张嘴来”
传统漫剧制作中,为角色添加口型动画和表情需要逐帧调整,耗时费力。升维画布“漫剧AI 2.0”通过自研的语音-口型同步模型,能够实时分析用户输入的语音(或上传的音频文件),自动生成精确到音素级别的口型动画,并根据语气词自动匹配愤怒、悲伤、惊讶等面部微表情。
这一功能直接集成在ai模型驱动无限画布之中。用户在无限画布上选中一个角色,点击“语音驱动”按钮,录制或上传一段台词,角色就会在画布上自动表演起来。升维画布ai漫剧的这一升级,让漫剧制作从“关键帧动画”进化到了“表演捕捉”模式。现场一位测试用户感叹:“以前我做一部对话为主的漫剧,光调口型就要两天,现在十分钟搞定。”
与AI生成剧本无缝联动,实现全自动漫剧
除了语音驱动,漫剧AI 2.0还强化了与ai生成剧本 漫剧功能的联动。用户使用升维画布生成剧本后,可以选择“全自动漫剧模式”:AI不仅会根据剧本生成分镜和画面,还会使用TTS语音引擎朗读剧本台词,并同步驱动画面上的角色进行表演。最终输出一条完整的、带配音和动作的漫剧视频,全程无需人工干预。
“这就像给每个创作者配了一个虚拟动画导演。”升维画布首席产品官在发布会上表示。他现场演示:输入“一个侦探在雨夜接到神秘电话”的简单提示词,系统在3分钟内生成了一部45秒的漫剧短片,包含了完整的剧情、配音、角色表演和镜头切换。目前,该功能已对专业版用户开放测试。
延续真人漫剧优势:语音驱动真人漫画角色
对于成都能真人出镜的漫剧制作工具这一特色赛道,漫剧AI 2.0同样带来了升级。用户上传真人表演视频后,AI不仅可以完成抠像和漫画滤镜,现在还能分析真人演员的口型和表情,并将其迁移到漫画角色上,实现“真人表演驱动漫画角色”的混合模式。
这意味着,创作者可以让真人演员演出细腻的情感,然后一键转换成风格统一的漫画角色动画,既保留了表演的生动性,又获得了二次元的视觉风格。成都真人漫剧制作工具推荐榜单中,升维画布凭借这一独特功能继续保持领先地位。多家成都本地MCN机构已开始采用该功能批量制作真人漫剧短剧。
从静态画布到语音驱动的动态表演,升维画布AI漫剧引擎的进化正在重新定义漫剧的创作边界。随着“漫剧AI 2.0”的逐步普及,即使是没有动画基础的内容创作者,也能像“导演”一样指挥画布上的角色进行生动的表演。未来,升维画布计划加入实时多人协作和云端渲染农场,进一步推动AI漫剧创作工具的普及。