facebookresearch

audio2photoreal

facebookresearch

Code and dataset for photorealistic Codec Avatars driven from audio

AI 简介

该项目通过音频生成逼真的虚拟人物,适用于对话场景。其核心功能包括训练代码、测试代码以及预训练的运动模型,并提供了从音频到面部和身体动作合成的完整流程。基于PyTorch实现,用户可以通过简单的Gradio界面快速体验从录音到视频渲染的过程。此外,项目还详细介绍了数据集和预训练模型的使用方法,支持用户根据自身需求进行深度定制或从零开始训练模型。适合需要创建高质量虚拟交互角色的应用场景,如虚拟助手、在线教育或远程会议等。

Python
Other
2.9k
Stars
282
Forks
2
Watchers
6
Issues

Star 增长

今日+1
近 7 天+1
近 30 天+1
综合评分61.96
默认分支main