跳到正文
Berkeley AI Research·· 2026-03-13AI 评分38

Berkeley AI Research 提出 SPEX 与 ProxySPEX,可大规模识别 LLM 关键交互

Identifying Interactions at Scale for LLMs

AI 导读

Berkeley AI Research 提出 SPEX 与 ProxySPEX 算法,用于在特征归因、数据归因和机制可解释性中大规模识别驱动模型输出的关键交互。SPEX 利用稀疏性与低阶性把交互搜索转化为稀疏恢复问题,ProxySPEX 进一步利用层级结构,以约 10 倍更少的消融达到 SPEX 的性能。在情感分析任务上,SPEX 在上下文扩展到数千个特征时仍保持高忠实度。

来源:Berkeley AI Research · bair.berkeley.edu