edmicho

mm-probe-kit

edmicho

A small, hackable toolkit for probing multimodal LLMs — attention, hidden states, alignment, and causal tracing.

AI 简介

mm-probe-kit 是一个用于探究多模态大语言模型(如LLaVA、Qwen-VL等)内部机制的小型工具包,主要功能包括查看注意力分布、隐藏状态以及模态对齐情况。该项目通过提供一系列简洁可复用的Python工具,如前向钩子注册、标准探测器和matplotlib辅助函数,简化了跨视觉与语言模型组件边界的数据提取和分析过程。适用于需要深入理解多模态模型工作原理的研究者或开发者,在进行因果追踪实验时尤为有用。

Python
Other
223
Stars
8.6k
Forks
6
Watchers
0
Issues

Star 增长

今日0
近 7 天0
近 30 天+194
综合评分60
默认分支main