研究团队发布 InMind 基准,包含 125 个专家验证任务,测试智能体记忆系统处理隐式关联的能力。
当关键记忆直接放入上下文时,骨干模型能回答 84.0% 的间接查询;
但通过六种记忆系统检索时,命中率最高仅 14.4%,尽管这些系统直接召回准确率可达 100%。
失败根源在于查询驱动的检索接口本身,将"路由--决定哪些事实必须保持可见"确立为核心开放问题。
The research team released the InMind benchmark, which includes 125 expert validation tasks to test the agent's memory system's ability to handle implicit...
The research team released the InMind benchmark, which includes 125 expert validation tasks to test
the agent's memory system's ability to handle implicit associations. When key memories are placed directly in context, the backbone model can answer 84.0% of indirect queries; But when retrieved through six memory systems, the highest hit rate was only 14.4%, although these systems could achieve 100% accuracy in direct recall. The root of failure lies in the query-driven retrieval interface itself, which establishes "routing—determining which facts must remain visible" as a core open question.
研究团队发布 InMind 基准,包含 125 个专家验证任务,测试智能体记忆系统处理隐式关联的能力。
当关键记忆直接放入上下文时,骨干模型能回答 84.0% 的间接查询;
但通过六种记忆系统检索时,命中率最高仅 14.4%,尽管这些系统直接召回准确率可达 100%。
失败根源在于查询驱动的检索接口本身,将"路由--决定哪些事实必须保持可见"确立为核心开放问题。
InMind 基准以 125 个专家验证任务评估智能体记忆系统的隐式关联能力。关键记忆直接进入上下文时,骨干模型对间接查询的回答率为 84.0%;经六种记忆系统检索时,最高命中率仅 14.4%。
材料显示,受测记忆系统的直接召回准确率最高可达 100%,但面对需要隐式关联的间接查询,检索表现明显下降。研究将问题指向查询驱动的检索接口,并提出应关注哪些事实需要持续可见。
Aioga 判断,这组结果提示:直接召回准确率不足以单独衡量智能体记忆系统的有效性。系统即使能够找到明确相关的信息,也可能无法识别完成间接查询所需的潜在关联。
该研究可能推动智能体记忆评估从直接匹配扩展到隐式关联与信息路由。值得关注的是,后续系统设计是否会把关键事实的持续可见性纳入检索接口,而非只优化查询与记忆的直接相似关系。 Aioga 判断,下一步应在更多任务中复核 InMind 所揭示的差距,并分别评估骨干模型、记忆检索和路由机制。研究还可围绕“哪些事实必须保持可见”设计对照实验,但材料未提供具体方案。
The readable text on this page was extracted from the public source and organized with attribution, publication time and the original link. Copyright remains with the original author and publisher.
Ingestion channel: Summary aggregation · Source domain: arxiv.org
Source: HuggingFace Daily Papers(社区热门论文)
Original link: Open original source
Aioga archive: Open intelligence page
Content record: summary-fallback · Updated: 2026-07-27T00:00:00.000Z

统一接入主流 AI 模型 API,为开发、测试与生产环境提供稳定调用入口。
立即访问 api.w173.comAioga aggregates global AI updates and preserves source information for verification and citation.