跳到正文
Berkeley AI Research·· 2026-07-26AI 评分38

ABBEL:通过信念状态监督让 LLM 高效进行长程交互

Teaching LLMs to Update Beliefs for Efficient Long-Horizon Interaction

AI 导读

伯克利 AI 研究团队提出 ABBEL 框架,将 LLM 的交互摘要隔离为自然语言"信念状态"并对其内容进行监督评分。在协作编码基准 CollabBench 上,ABBEL 把与全上下文模型的性能差距缩小约 50%,训练步数减少 50%,峰值上下文 token 数仍显著低于全上下文。该方法用受自编码器启发的重建评分作为通用奖励,缓解递归摘要带来的性能损失。

来源:Berkeley AI Research · bair.berkeley.edu