AI 工具实测:让 AI 读 217 页 PDF,它把第 47 页的空白页读出了 3 条要点

AI 工具实测第 14 期。先说结论：让 AI 读长文档，它读的不是你的 PDF，是它以为的 PDF。

上期写完竞品分析，后台有条留言问我：那长文档呢？我们公司有份技术白皮书 217 页，我丢给 AI，42 秒出了一份 1800 字摘要，看着还挺像那么回事。

我当天就把那份 PDF 要来了。然后我做了一件很笨的事：打印出来，逐页核。

核完，23 处对不上。

42 秒的摘要里，藏着 23 处对不上

217 页、8.6 万字的技术白皮书。我让它「总结核心观点」，42 秒，1800 字，五个部分，条理清楚，读起来比原文档还专业。

然后我拿红笔一页一页对。23 处问题，我分了四类。

9 处是它编的——原文压根没这个说法。

7 处是张冠李戴——把第 3 章的架构说明，安到了第 7 章的部署方案上。其中一条还特别通顺，通顺到我第一次读的时候直接信了。

4 处是数字错。最离谱的一条，原文写「支持 32 路并发」，它写「支持 320 路并发」，差 10 倍。

剩下 3 处，最好笑。

第 47 页是个空白页，整页只有页眉页脚，正文一个字没有。它在摘要里，给这一页总结了 3 条要点。

第 12 页是目录，它把目录当成了「核心方法论」。附录三是 2021 年的旧版参数，它当现行标准写进了结论。

我又拿同一个问题追问了 5 次。第一次答「32 路」，第三次变成「320 路」，第五次变成「文档未提及」。同一个对话里，五个答案，三个不一样。

我把「总结」改成「摘抄」，23 处变成 2 处

问题不在 AI 笨，在我给了它总结权。你让它总结，它就必须自己造结构；造结构就一定要补空白；补空白的地方，它只能编。

所以我改成了三步。

第一步：切片。217 页切成 9 段，每段 25 页左右、约 1 万字。一次只喂一段，先让它输出「这一段有多少页、每页主题一句话」。这一步不带任何观点，只让它报页码。

第二步：只许摘抄，不许概括。我加了一条硬要求：每条结论必须是原文原句，后面跟页码；凡是自己概括的句子，一律打回。概括权归我，摘抄权归它。

第三步：反向审。它一共给了我 61 条带页码的结论。我拿回 PDF 里 Ctrl+F 一条一条搜，搜不到的删掉，删了 9 条；有 4 条页码是错的，改正；还有 2 条页码指向的页面根本不存在——文档只有 217 页，它给了我一个「第 243 页」。

走完这三步，问题从 23 处降到 2 处。代价是时间：42 秒变成 19 分钟。

剩下 2 处，是被「不许补」三个字干掉的

最后那 2 处，都是同一个原因：它找不到，就自己补了一个看起来合理的。

于是我又加了半句话：找不到就回「未查到」，不许补。

加了这半句，2 处变 0 处。

但代价也很实在。它第一次老老实实告诉我：这份 PDF 里，有 11 页它压根没读到。

我不问，它永远不说。一次丢 217 页进去，它会被截断，而截断这件事，它不会主动告诉你。

三个坑，和一条我一直在用的判断线

坑一：让它「总结一下」。这三个字等于把创作权交出去。在长文档里，总结权和编造权是同一件事。

坑二：一次丢整本。不分片就会被截断，被截断它还会假装读完了。我现在的原则是单次不超过 1.5 万字，超了就切。

坑三：跨章节提问。「这份文档对部署有什么建议？」这类问题会让它把第 3 章和第 7 章拼成一个不存在的结论，而且拼得特别顺。

所以现在我用 AI 读长文档，只问自己一句：这句话后面，能不能跟一个「第几页？」

能跟的——事实、参数、时间、责任人、版本号——AI 只能摘抄，不能生成。

跟不了的——结构、顺序、重点排序——那是我自己的活，别指望它。

说白了，AI 是个翻页很快、但会顺手填空的助理。你得先告诉它：空着的地方，不许填。

你有没有被 AI 的文档摘要坑过？最离谱的一次，它给你编了什么？评论区聊两句，我挑几条放进下期。

下期我想测这个：让 AI 读一份 12 个月的 Excel，它给我算出了第 13 个月的数据。表格这条，比 PDF 还邪门，我们下期聊。