decoderesearch

circuit-tracer

decoderesearch

暂无描述

AI 简介

circuit-tracer 是一个用于在大语言模型中识别与可视化神经电路(即特征级因果归因图)的Python工具库。它基于跨层MLP转码器(transcoder)的激活特征,计算输入token、转码器特征及误差节点对输出logit或其他特征的直接效应,支持电路发现、交互式可视化标注与特征级干预实验。技术上依赖归因图构建、稀疏图渲染和可插拔的转码器接口,兼容Gemma-2等开源模型。适用于LLM可解释性研究、机制分析、安全评估及神经元功能验证等需要细粒度电路理解的场景。

Python
MIT License
2.9k
Stars
344
Forks
20
Watchers
16
Issues

Star 增长

今日0
近 7 天0
近 30 天0
综合评分29.61
默认分支main