SIGGRAPH是计算机图形领域的国际顶级学术会议,今年将如期在美国举办。但因疫情改为线上形式,于8月17日至8月28日(太平洋时间)举行。英特尔作为赞助合作伙伴,也将参与并为大家展示我们的3D动画、渲染等相关技术。网易伏羲实验室作为国内首家专业游戏AI研究机构,将与我们的工程师一起,于太平洋时间8.24 8am(北京时间8.24 11pm)在线上为大家展示我们的一个Intel® oneAPI相关项目。
项目名称:
Move your feet to the beat! AI Dance Creator powered by Intel® oneAPI
项目介绍:
Dance Creator可以基于任意长度的音乐自动生成高质量的预设舞蹈动作。传统视频游戏中创造舞蹈动作很大程度上依赖于专业的舞蹈演员和编舞。Dance Creator基于Intel® OpenVINO加速的深度神经网络,可以自动合成3D舞蹈动作。这套系统已经部署在网易雷火工作室的MMORPG游戏《逆水寒》上。它已经为《逆水寒》提供了超过404000个伴舞任务,为玩家生成舞蹈动画时长25200000s。
技术细节:
Dance Creator能够通过对预先录制的动画进行分析、切片和匹配来生成给定旋律的舞蹈动画。Dance Creator利用收集到的大量编舞视频,训练从音乐到动作的自动翻译器。该翻译器对输入的旋律片段进行了智能地分析,并生成相应的舞蹈动作特征。这些特征再经过“基于相位的舞蹈匹配”,生成最终的3D舞蹈动画。
Dance Creator基于Intel® OpenVINO和Intel® Math Kernel Library进行了在线部署性能优化。优化后的音频分析时间有20%到80%的加速;在线网络推理速度提高了2~3倍。整体来说,基于CPU的服务器集群部署使每个用户请求的响应时间缩短了20%,节约了在线部署成本,也提高了用户体验。
感兴趣的小伙伴欢迎点击注册SIGGRAPH 会议,关注该项目的分享吧!