CrossProfile揭示LLM群体记忆失效
AI 总结
一篇新提交的论文提出CrossProfile诊断基准,包含60个模板、自动验证的答案键和480个隐藏画像任务。研究测试Qwen2.5-7B、Llama-3.1-8B及两个DeepSeek模型,发现按稀有性或相关性筛选记忆可能系统性失效,最终决策模型还可能过度重视被多名智能体支持的事实。作者还报告称,完整的自然讨论记录准确率可能低于完全不记笔记。
深度见解
CrossProfile提供了一种受控测试压缩群体记忆能否保留有效证据的方法,揭示了诱饵信息、证据平衡和归因驱动的从众判断造成的失效。
Computer Science > Artificial Intelligence
arXiv:2610.37624 (cs)
[Submitted on 27 Oct 2026]
Title:Rare, Relevant, and Still Wrong: How Memory Fails LLM Group Decisions
Authors:Anouar Imel, Imad Charradi, Abderrahman Sghir, Khalil El Khammar
View a PDF of the paper titled Rare, Relevant, and Still Wrong: How Memory Fails LLM Group Decisions, by Anouar Imel and 3 other authors