baaivision

Emu3

baaivision

Next-Token Prediction is All You Need

AI 简介

Emu3 是一个基于纯 next-token 预测范式的端到端多模态大模型系列,统一处理文本、图像与视频的生成与理解任务。其核心技术是将视觉信号离散化为 token 序列,仅用标准自回归 Transformer 进行联合训练,无需扩散模型、CLIP 或预训练语言模型辅助。模型支持高分辨率图像生成、跨模态理解(如图文问答)、因果式视频生成与外推,在多项基准上超越 LLaVA、SDXL 和 OpenSora 等专用架构。适用于需要统一架构支撑多模态生成与感知的研究与应用,如智能内容创作、多模态对话系统和视频预测等场景。

Python
Apache License 2.0
2.4k
Stars
100
Forks
27
Watchers
66
Issues

Star 增长

今日0
近 7 天0
近 30 天+7
综合评分58.71
默认分支main