Kimi K3.1 Pro 长文档问答总答偏 / 是问题太宽还是材料没切分?

文章导读
先别急着重传整份材料。用同一份文档做两次对照更省事:第一次只把问题缩到一个章节,材料原样不动;第二次保持原问题,只把材料按章节切小并编号。哪一次让回答落回正确位置,问题就出在那一侧。如果两次都只是稍微好一点,通常是问题太宽与材料跨度过大叠加,需要两边同时收。
📋 目录
  1. 壹 回看一轮完整问答,标出偏在哪一步
  2. 贰 区分问题太宽和材料跨度太大
  3. 叁 把问题缩到一个章节范围再试一次
  4. 肆 材料侧处理:分章上传并编好段落号
  5. 伍 什么情况下该换问法而不是换材料
A A

先别急着重传整份材料。用同一份文档做两次对照更省事:第一次只把问题缩到一个章节,材料原样不动;第二次保持原问题,只把材料按章节切小并编号。哪一次让回答落回正确位置,问题就出在那一侧。如果两次都只是稍微好一点,通常是问题太宽与材料跨度过大叠加,需要两边同时收。

长文档答偏多数不是模型“读不懂”,而是检索与生成两头都没被约束住。建议先把一轮完整问答摊开,记录提问原文、回答开头两句、被忽略的章节名,再分别做“只缩问题”和“只切材料”两次对照。判断依据是关键词命中、覆盖范围和短材料复测表现,不要凭一次回答就下结论。切分粒度与上下文上限有关,需要结合你实际使用的材料和环境确认。

回看一轮完整问答,标出偏在哪一步

「答偏」是个模糊感受,要先变成可指认的位置。挑一轮最典型的问答,把三样东西原样抄下来,不要凭记忆复述:提问原文、回答开头两句、被完全忽略的章节名。前两样用来判断模型把问题理解成了什么,第三样用来判断材料是否根本没被读到。

轮次:第 3 轮
提问原文:这份材料的核心观点和适用边界是什么?
回答开头两句:材料主要讨论了缓存策略的整体思路……(后面继续泛泛展开)
被完全忽略的章节:第 4 章 失效判断条件、第 5 章 灰度回滚
观察:回答提到的内容集中在第 1—2 章和目录附近

这份记录的价值在于:如果被忽略的章节正好是你问题的落点,材料侧嫌疑大;如果回答提到的问题关键词是对的,只是答案停在了浅层,问题侧嫌疑大。

区分问题太宽和材料跨度太大

两种症状都能表现成“绕在开头几段”,但成因不同。可以用下面这张表自查,逐行对照你刚记下的那轮问答。

Kimi K3.1 Pro 长文档问答总答偏 / 是问题太宽还是材料没切分?
观察点偏问题侧(问得太宽)偏材料侧(跨度大、未切分)
回答是否提到提问里的关键词通常提到了,但展开成通用解释关键词出现,答案却落在材料开头段落
回答是否只覆盖材料开头覆盖较均匀,但每处都浅明显集中在开头、目录或摘要附近
换小段材料后是否改善改善有限,因为问法没变明显收敛,能直接指向该段
换更具体的问法后是否改善明显收敛,能落到条目变化不大,仍会绕回前面章节

表里最有效的一行是第三行。只要把材料换成一小段重问一次,就能快速看出问题在哪一侧,成本比反复改提示词低。

把问题缩到一个章节范围再试一次

这一步只动问题,不动材料,用来验证问题侧因素。改写的关键是给回答一个明确的取材边界,并指定输出形态。

改前:
这份材料讲了什么?核心观点和适用边界有哪些?请总结一下。

改后:
只依据材料中「第 3 章 缓存策略」这一节的正文回答,
不要引用其他章节,也不要补充材料以外的经验。
请回答:作者给出的失效判断条件有哪几条?逐条列出,每条后标注出自哪一小节。

观察两点:回答是否只引用该章节的表述;是否还会带出其他部分的内容。如果回答变得可控、能逐条对应小节,说明问题侧的宽泛是主因。如果即使限定了章节,回答仍然串到别处,说明材料在上下文里的切分和标注需要处理。

Kimi K3.1 Pro 长文档问答总答偏 / 是问题太宽还是材料没切分?

材料侧处理:分章上传并编好段落号

切分粒度通常按小节走,而不是按固定字数硬切。选取依据是「一块材料只讲一件事」:章节标题保留在块首,表格和图注跟随所属小节,不要把一个小节拆到两块里,也不要把两三个不相干的小节塞进一块。单块能在一屏内读完是一个实用的参照,具体上限要结合你使用的上下文长度和材料密度确认。

编号建议写成「文档-章-节」的可读形式,放在每块第一行,方便提问时直接点名:

[DOC-A / C03 / S03.2] 第 3 章 缓存策略 · 3.2 失效判断条件
正文:当命中率连续低于阈值且回源耗时上升时,判定为……

[DOC-A / C03 / S03.3] 第 3 章 缓存策略 · 3.3 灰度回滚
正文:回滚顺序为先切流量再清缓存……

重新提问时把编号带上,让回答有明确的取证范围:

Kimi K3.1 Pro 长文档问答总答偏 / 是问题太宽还是材料没切分?
请只依据 [DOC-A / C03 / S03.2] 这一块内容回答:
失效判断条件有几条?每条用一句话复述,并保留原文中的关键名词。
如果这一块里没有相关信息,直接回答「该块未涉及」,不要从其他块补充。

最后那句「该块未涉及」很重要,它能把「材料里没有」和「模型没找到」区分开,避免你把检索问题误判成材料缺失。

什么情况下该换问法而不是换材料

反复重传材料会消耗轮次,也容易让对话上下文越来越乱。满足以下三条时,优先改问法:

  • 关键词命中情况:回答里出现了你提问中的实体词和限定词,说明模型理解了意图,只是取材范围太松,收窄问题即可。
  • 回答覆盖范围:回答虽然浅,但分布在材料多个位置而非堆在开头,通常意味着问题缺少落点,而不是材料没被读到。
  • 同一问题在短材料上的表现:把同一问题问在一段几百字的摘录上,如果回答立刻变准,说明问题本身是可回答的,回到长文档里只需补上定位信息。

反过来,如果同一问题在短材料上依然答偏,或者回答始终绕回目录和开头几段、点名小节也无反应,那就不要再改措辞了,先检查材料是否按章节切开、编号是否带上、单块是否过大。这类情况换十次问法也不会有变化。