DanceFusion

DanceFusion是由清华大学研发的开源框架，专注于通过音频驱动的方式实现舞蹈动作的重建与生成。该框架结合了分层时空Transformer-VAE和扩散模型，能够高效处理来自社交媒体平台的不完整或嘈杂骨骼数据，并生成与音乐高度同步的逼真舞蹈动作。通过先进的掩码策略和迭代扩散过程，DanceFusion显著提升了动作生成的保真度及音乐匹配度，在内容创作、虚拟现实、互动娱乐等多个领域展现出广泛应用潜力。