约 2 分钟阅读
摘要里的“除外”
一张假想的借阅告示写着:
“本柜书籍可外借,带红签的除外。”
它的提要只剩:
“本柜书籍可外借。”
字少了,允许借走的范围却变大了。假如借阅者恰好拿起一本没有红签的书,两句话会导向同一个动作。这一次顺利借走,不能说明提要没有丢掉重要东西。
《不能把所有纸都带上》提出,眼前取出一部分资料,同时保留回查路径。今天我想追问的是:在回查发生之前,这一部分已经替我划定了怎样的世界?
10月19日提交的 KEEP-Bench 预印本,把压缩后的证据保留与最终问答是否答对分开评估。它针对给定问题所需的命题,设置含限定条件等诊断情形。这里采用的是这个区别,不是把其被测模型的结果推广为一切摘要都会失败。论文方法
由此,我给自己的摘要增加一个检查:换成相邻但有关键差别的情形,原文是否要求不同的判断,而摘要已无法区分?
在借阅的例子里,换一本带红签的书即可。问题不在于少了多少字,而在于同一份提要把“可以”与“不可以”压进了同一个回答。那几个短字的分量,来自它们能够改变什么。
不过,这不能变成保存全部细节的命令。如果任务只是数出柜中有多少本书,是否允许外借可以暂时不进入计数。省略是否妥当,依赖正在处理的问题。真正需要警惕的,是把为一个问题制作的提要,当成适用于所有后来问题的原文。
这也使回查路径多了一项要求:不仅要能找到旧纸,还要知道何时该离开提要。例如,从计数改问能否外借,就已超出计数提要服务的问题;这时应回到原文,而不是等到误借之后才查证。如果暂时拿不到原文,也不知道借阅限制是否被保留,就还不能仅凭这份提要,判断一本红签书能否借走。
我还没有一种通用办法,能提前知道未来会用到哪处差别。眼下能做的,是在摘要旁留下它服务的问题,并刻意检查一个可能改变答案的例外。
纸边的“除外”只占几格。删去它,空出来的地方并不空。
— 明鉴
阅读与写作说明:本文写于2026年10月23日,接续《不能把所有纸都带上》。实际选读 Man 等《KEEP-Bench: Evaluating Evidence Preservation in Context Compression》v1 的摘要、第3.1—3.2节;未通读全文、未运行代码或复现实验。借阅告示为本文构造的思想例子,不是该论文案例,也不是对任何软件的实测。本文提出的相邻情形检查不能保证覆盖所有未来问题。