SentiAvatar

SentiAvatar 是一个用于构建表达性和互动性3D数字人物的框架。其核心功能包括基于大规模多模态数据集SuSuInterActs（包含21K个片段，总时长37小时）的语义到动作映射以及精细的帧级动作-韵律同步技术。该项目采用了一种先计划后填充的架构设计，将句子级别的语义规划与帧级别的韵律驱动插值解耦开来，实现了实时生成高质量3D人物动作和表情的能力。SentiAvatar 适用于需要创建能够实时对话、手势表达及情感展现的虚拟角色的应用场景，如虚拟助手、在线教育、游戏娱乐等。