ToonComposer利用AI技术简化动漫制作，实现自动上色与动画生成

快速阅读: 中国香港中文大学和腾讯PCG推出ToonComposer，利用生成式AI技术简化动画制作流程，用户仅需一张草图和一帧彩色图像即可生成完整动画，节省70%人工时间，提高创作效率。

在动画制作领域,传统的动漫制作流程耗时耗力,通常需要高水平的艺术家进行关键帧绘制、补间处理和上色等多个环节。而最近,由中国香港中文大学和腾讯 PCG 的研究团队推出的 ToonComposer,将这一过程大大简化,利用生成式 AI 技术,将繁琐的手工操作转变为一个无缝的流程。

ToonComposer 的 “生成后补间” 技术,可以让用户只需提供一张草图和一帧彩色图像,便能生成完整的卡通视频,节省高达70% 的人工工作时间,让创作者可以将更多精力投入到创作本身。

在关键帧控制方面,ToonComposer 提供了精确的草图关键帧控制功能,艺术家能够在时间轴的任意位置用稀疏的关键帧来引导动画的进展。即便是复杂的运动,该系统也能精准处理,生成的结果质量与传统手工补间和上色流程不相上下。

此外,ToonComposer 还引入了区域控制功能,用户可以选择将某些草图区域留白,并通过画笔工具进行标记,系统会智能识别这些区域并使用上下文或提示进行填充,进一步提升创作效率。

研究团队对 B&T Studio 和古洞动画工作室表示感谢,感谢他们允许使用《大鱼海棠》和《喵先生》等动画内容进行学术展示。同时,也感谢视频基础模型 Wan 及其他开源工具的支持。值得注意的是,页面上展示的所有图像、视频及其他资料均用于学术和研究目的,ToonComposer 作为一项研究项目,并不打算用于商业用途。

项目:https://lg-li.github.io/project/tooncomposer/ 划重点: 🎨 ToonComposer 通过生成式 AI 技术,简化了动画制作流程,用户仅需一张草图和一帧彩色图像即可生成完整动画。

⏳ 该系统可节省高达70% 的人工工作时间,让创作者专注于创意。

🖌️ 提供区域控制功能,用户可自由标记草图区域,系统会智能填充,提升创作效率。

(以上内容均由Ai生成)