
tribev2
facebookresearch
This repository contains the code to train and evaluate TRIBE v2, a multimodal model for brain response prediction
AI 简介
TRIBE v2 是一个用于预测人脑fMRI响应的多模态基础模型,支持视频、音频和文本输入。其核心是统一的Transformer架构,将视觉、听觉与语言表征映射到fsaverage5皮层网格(约2万顶点),输出时序脑响应预测,并自动校正5秒血流动力学延迟。项目提供预训练权重、开箱即用的推理接口及完整训练框架,依赖PyTorch Lightning,支持皮层/皮层下区域建模。适用于计算神经科学中的脑编码研究、自然刺激范式分析及跨模态神经表征建模等场景。
Jupyter Notebook
Other3k
Stars
659
Forks
31
Watchers
18
Issues
Star 增长
今日0
近 7 天0
近 30 天+53
综合评分65.76
默认分支main