给游戏设计师支招,5个插件推动剧情动画一键生成
GDC是在全球范围内享有最高影响力的游戏开发者会议,已举办35届,今年于3月21至25日在旧金山举行。网易互娱今年有12位大咖的9个提案入围GDC非赞助类演讲,包括1项核心演讲和8项主题峰会演讲,让我们一起围观入围的提案和大神风采!
![]() 一、技术概述
标准的剧情动画设计通常先由游戏设计师构建故事情节,然后资源制作组基于故事情节来制作动画。但是这个动画设计过程往往伴随着多次的沟通和修改,因为制作的动画不一定能与游戏设计师的想法所对应,这个过程会浪费大量的时间和人力。
为了提高角色动画制作过程中的沟通和开发效率,我们提出了一个低资源依赖的易用过场动画预览工具。这个工具包含5个插件,可以根据游戏剧本一键生成配音和动画原型。游戏设计师们可以十分容易地利用这些插件来构造原型,并且用于沟通和修改。这个工具可以有效地减少了资源的浪费,以及方便了剧情动画开发过程中的沟通和调整。
目前方案的其中4个插件已全部接入Messiah和Montage的剧情编辑器中,而且每个插件也可以单独拆分,服务于相应的功能。
二、问题背景
剧情动画设计往往需要伴随大量的资源准备,然而每一次的剧情迭代都会牵动很多资源的改动。传统的剧情动画设计,一般是先由策划撰写一个完整的剧本,然后为每个角色和对白标记上对应的情绪,确定好之后会分别由美术和音频的同学进行动画绘制和音频配音,从而拼接起来完成一个完整的剧情动画。然而大多数情况下,这个过程会需要多次的沟通和修改,甚至可能会因为剧本的问题需要推翻重来,因此带来了资源的浪费。
传统剧情动画制作流程
在一个完整剧情动画设计中会涉及到一些重复迭代的部分,包括:剧本撰写、剧本情绪识别、配音、嘴型动画、表情和动作、站位镜头等,现有的成熟的AI技术理论上能处理剧本情绪识别、配音、嘴型动画、表情和动作的部分了,但是还需要针对实际项目中的一些问题进行适配,比如剧本数据领域、配音情绪处理、不同游戏的动画设计等。另外的剧本撰写和站位镜头相关技术仍在发展阶段。
总的来说,剧情动画制作,在实际项目中会遇到以下问题:
剧情动画工具对于非专业人员入门十分困难,而且反复地修改剧情会带来资源的浪费;
剧本相比于一般自然文本来讲更短而且上下文依赖性更强,同一句话在不同的上下文情况下情绪会不一样,而且同一个人对不同的对象也会有不同的情绪,还有一些游戏风格类型的文本风格适配问题;
配音往往会更关注情绪表达,语音合成技术在对于情绪表达方面也需要依赖大量的标注数据,而且还有音色转换等问题;
嘴型动画通常是比较繁琐重复的工作,一般在初期的剧情动画设计中不涉及,因此会缺少很多角色表现力;
表情和动作同样也是角色表现力的体现,初期缺少了会影响剧情动画原型的一些质量,从而没能更直观地体现出成品,可能会导致设计师们对于后续剧情动画迭代的一些细节的把握不够精细。
为了缓解上述问题,我们参考CG制作过程中的分镜概念,借助剧情动画原型来介入剧情动画制作过程,并且期望剧情动画原型在制作过程中,可以十分方便地让游戏设计师们自行调整至自己满意的程度,再去做进一步的沟通和制作,这样可以很好的地避免时间和资源的浪费。
游戏设计师可自行调整,方便后续资源准备和沟通
另外,为了达到便捷易用,这个工作提出了一个剧情动画自动化生成AI工具包,可以一键生成剧情原型,使得剧情动画原型更贴近成品,提高剧情动画设计过程中的开发和沟通效率。该工具包集小说转剧本、剧本情绪识别、情绪语音合成、嘴型动画与表情动作四个插件匹配于一身,既能一键生成剧情原型,又能单独拎出每个插件服务于对应场景。
剧情动画自动化生成AI工具包可以直观地展示出游戏设计师前期的剧情设计,让设计师自行调整剧本内容和效果,再使用产生的原型与负责资源的同学进行沟通,可以有效地减少了资源的浪费,以及方便了剧情动画开发过程中的沟通和调整。而且其中的嘴型动画可以达到直接可用的程度,减轻了美术同学的工作。
三、技术实现
我们受CG制作的启发,CG制作通常会先让设计师制作原型,一般通过漫画、分镜、故事版等方式表现,然后再针对原型来准备资源,最终完成一个完整的CG。其中的原型起到了十分关键的提效作用,资源同事可以十分清晰地明确整个CG的流程和细节。
换而言之,在剧情动画制作过程中使用原型,也是可以提高制作效率。因为剧情动画通常都是使用游戏中的角色资源来制作,那么我们希望剧情动画的原型是可以更直观而且更容易去制作,以便游戏设计师都可以自行制作,因此我们提出了一个剧情动画自动化生成AI工具包,主要包含4个顺序的插件:小说转剧本、剧本情绪分析、情感可控语音合成、嘴型表情动画合成。每一个插件都是相辅相成,也可以单独拎出来成为一个插件,即插即用。 (编辑:二游网_173173游戏网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |