网易游戏雷火事业群 - 以技术推动创新,以文化传递信心

网易游戏雷火事业群 - 以技术推动创新,以文化传递信心

简中 EN

新闻资讯

NEWS

「用AI为IP赋能」 IP动画编辑平台获得2019“机器之心”年度奖项

  在最近公布的“机器之心”2019人工智能年度奖项评选中,网易伏羲实验室的IP动画编辑平台获得“30大AI产品/解决方案”奖项。相比较于传统动画流程,伏羲实验室的IP动画编辑平台到底具有什么领先优势及特色?让我们一起来一探究竟吧!

  IP动画编辑平台的产品定位为IP动画内容生产平台,旨在用AI为IP赋能,提供创新、智能、便捷、高效的IP动画制作手段。用户只需通过简单的音频输入,就能得到符合IP人设的动画片段,相比传统的动画生成更智能、高效,从而降低动画制作的门槛。

巨大需求:IP动画市场增长

  随着虚拟IP的火热,越来越多的IP运营方,开始投入虚拟IP的市场,其中短视频和动画成为IP运营方首选的内容形式。与此同时,中国的动画行业处于一个整体产能不足的状态,动画水平参差不齐,亦或是需要较高的美术成本投入,这些因素都导致IP运营方对快速、高效、低成本的动画生成系统有强烈的需求。

  互联网技术、短视频、直播、AR、VR等技术的发展,帮助虚拟IP更多、更便捷、更大范围的直接接触到互联网用户。未来IP动画的市场还会继续增长,这势必会引来更多的虚拟IP运营方加入,从而给动画生产带来更大需求。

  针对目前国内市场的巨大需求,IP动画编辑平台通过AI技术,让运营方通过简单的音频输入,就能得到一段符合IP人设的动画片段,并提供丰富的再编辑功能,供用户进行再创作,打造符合运营目标的动画。与此同时,伏羲实验室还率先将这一技术应用到了游戏领域,实现技术的落地。

强大功能:IP动画智能编辑

  作为一款IP动画内容生产平台,伏羲实验室的IP动画编辑平台包含3个部分:智能表情合成、智能动作合成、以及编辑器客户端

  智能表情合成:以神经网络为主体,提取输入语音的声学特征,并以该声学特征作为语音和表情动作两种模态之间的连接桥梁,实现跨模态的语音到智能表情的生成。

  智能动作合成:根据人设和骨架信息以及提取的语音特征,生成匹配表达需求且符合输入人设的角色动作。

  编辑器客户端:编辑器前端主要负责将AI合成的数据,进⾏动画渲染展⽰,同时提供丰富、易用的交互界面,⽀持⽤⼾对动画进⾏⼆次编辑制作

落地案例:成功应用于多款游戏、虚拟偶像场景

  通过智能表情合成技术和智能动作合成技术,IP动画编辑平台率先在游戏领域成功落地,展示了其强大的功能,极大地提高了玩家的游戏体验。

  在《天谕》手游中,生成了超过400分钟的NPC表情动画,大大提高了表情数据处理的效率。

  在《极客战记》中,IP动画编辑平台通过智能动作合成功能,帮助打造虚拟老师,输出了上千条虚拟老师讲课的动作,增加了产品的沉浸式体验。

《极客战记》虚拟老师

  而凭借智能表情合成技术,IP动画编辑平台为《大宋映画》提供AI表情合成功能。玩家可以通过配音,快捷的为游戏角色配上面部表情和口型动画,供玩家高效的进行UGC(用户生成内容)制作

逆水寒动画编辑器——《大宋映画》

  在虚拟偶像运营场景中,IP动画编辑平台也在进行一系列的探索。例如,IP动画编辑平台正在与“网易新闻-曲师师运营团队”合作,利用编辑平台的功能快速创作“曲师师”动画,真正做到了高效、低成本的动画生成。目前,“曲师师”动画短视频在抖音每日更新(抖音搜索“曲师师”,快来关注一波吧)。

虚拟偶像 IP “曲师师”

  未来,IP动画编辑平台还将与“哎咿多工作室-中国爱酱运营团队”、“蜗牛读书-抖音运营团队”深入合作,持续探索低成本、快速生成短视频动画的可行性,以及短视频IP动画的落地应用

虚拟偶像-中国爱酱

  除了游戏和虚拟偶像之外,IP动画编辑平台还积极尝试应用于其他场景。例如在与“蜗牛读书馆”的合作中,IP动画编辑平台负责合成了虚拟图书管理员的表现动画,打造线下虚拟管理员

  IP动画编辑平台在过往的研发过程中,精确狙击市场痛点,打造表情合成、动作合成技术,并且在游戏、虚拟偶像等领域中进行落地。可以说,作为一款AI产品,网易伏羲实验室的IP动画编辑平台使得IP动画制作更高效、更智能。随着动画内容市场持续增长,平台会有更大的需求空间,未来还将继续探索,用AI助力动画产业的发展。