论文介绍
音乐舞蹈是近年来角色扮演类游戏中广受玩家喜爱的一个功能。此前,业内普遍将音乐舞蹈生成的问题看作是基于时序数据的受监督动作合成问题。不过,应用这类方法生成舞蹈,需要大规模有标注的训练数据作为基础,同时生成动作的质量常常不可控。
对此,我们提出了一个新的思路——用舞蹈专家视角来看待音乐舞蹈问题。团队首次尝试将传统舞蹈理论建模,即在逐片段的舞蹈动作检索框架下实现了自动编舞。基于上述设计,玩家可以在算法的基础上进一步编辑舞蹈动作,实现了以往被忽略的交互功能。
考虑到舞蹈动作所需的动作捕捉技术成本较高,且需要专业的舞者进行指导,因此,团队进一步使用了自监督训练方法,大大减少了对监督数据的依赖,降低了训练成本
论文地址
https://www.ijcai.org/proceedings/2021/323