大家在使用大模型总结大量文本时,如何防止张冠李戴

2025 年 11 月 5 日
 mekingname

目前有个工作任务,需要每天总结 3000 封邮件,生成一封 500 字的日报并发给老板。

我发现在实践过程中,如果邮件本身就是日报形式的,非常容易出现张冠李戴的问题。

举个例子,其中一封邮件的内容:

张三今日完成工作如下:优化 XX 项目后端延迟,与 YY 供应商签订合作协议
李四今日完成工作如下:与 xx 公司达成战略合作协议

大模型在总结后生成的内容,可能会出现张三与 xx 公司达成战略合作协议。我分别测试了 GPT-5 、Claude-Sonnet-4.5 、Kimi k2 、Gemini-2.5-pro,都会出现这个问题。

3000 封邮件大概会有 10 几万字,因为里面可能会有很长的研报。我是每 50 封邮件总结一次。最后把 60 次总结再进一步合并总结。

我的 Prompt 写得非常详细,已经明确要求把公司和事实一一对应了,但依然会出现这个问题。

大家对这种问题有没有什么好办法。各种方案我都试过了,prompt 已经优化得不能再优化了。这种问题还是会出现。

1457 次点击
所在节点    问与答
4 条回复
NQ
2025 年 11 月 5 日
用 claude 这种现象会少很多
Maboroshii
2025 年 11 月 5 日
这种问题挺痛的,也就是说 ai 总结了以后无论如何还是要自己检查一遍,那工作量并不少
mekingname
2025 年 11 月 5 日
@Maboroshii 我打算放弃直接基于文本来总结了。

先基于文本提取实体和事实,生成 json 。

然后基于 json 生成最终的总结。
WithoutSugarMiao
2025 年 11 月 5 日
把具体 prompt 发出来看看吧。感觉 50 封总结一次 也还好吧,不行降低一下 30 封总结一次呢?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1170650

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX