Soul-AILab

SoulX-LiveAct

Soul-AILab

Official inference code for SoulX-LiveAct: Towards Hour-Scale Real-Time Human Animation with Neighbor Forcing and ConvKV Memory

AI 简介

SoulX-LiveAct 是一个用于实时生成高保真人类动画视频的框架,特别适用于长时间实时流媒体互动。该项目的核心功能包括通过邻域强制和卷积键值记忆技术实现步长一致的自回归视频生成,并支持在仅使用两块H100/H200 GPU的情况下达到20帧每秒的处理速度。此外,它还优化了系统以适应消费级GPU(如RTX 4090, RTX 5090),并利用FP8 KV缓存及CPU模型卸载技术进一步提升性能。此项目非常适合需要高质量、低延迟人物动画的应用场景,例如在线播客、音乐表演、脱口秀等多媒体内容创作领域。

Python
1.1k
Stars
106
Forks
47
Watchers
12
Issues

Star 增长

今日0
近 7 天+4
近 30 天+15
综合评分54.59
默认分支main