Terrasse关于ChatGPT各模型网页搜索能力具体实现的一点研究 中发帖

最近在迭代修改自己的自定义提示词,产生了一个疑问:模型调用网页搜索工具得到的结果,是否会长期存在于上下文中? 
先说结论
不会。无论是常规模型4o、4.1,还是推理模型o4-mini,详细的网页搜索都只会在当次回复中被放进上下文,后续的所有对话中模型都只能看到历史输出,而没有详细的网页内容信息。
研究过程
我指示模型检索一个特定网页并按要求返回目标句子原文,然后在第二轮对话中要求模型在不重新调用网页工具的前提下返回另一个句子原文。如果能正确返回第二个句子,则说明网页内容长期存在与上下文,否则说明没有。
详情看图(被测模型为GPT-4.1),如果允许再次检索:
[图片]
此时模型会自动重新检索这个网页,然后正确返回结果。如果明确要求不允许再次检索:
[图片]
此时模型表示无法返回目标句子,说明此时网页内容已经不在上下文。进一步要求其返回上下文中所有相关信息:
[图片]
如...