同一个问题,联网和不联网问出来的答案经常不一样。联网的版本更长、会带来源链接;不联网的版本更短,几乎没有外部链接,内容取决于模型已有的印象和你这次会话里给过的上下文。很多团队把这两种结果放在一张表里比较,然后得出“平台不稳定”的结论,问题其实出在记录方式上。
两种模式的差别在哪里
联网模式会调用外部检索,把当前网页内容带进回答;不联网模式只用模型自身的信息和当前会话上下文。Microsoft 的 Copilot 支持文档把这一点写得很直接:如果组织关闭了联网搜索,“Copilot still responds to your prompts but without the benefit of current web information.” 也就是说,回答不会因为关掉联网而消失,只是不再有外部依据。
需要注意的是,模式并不总是掌握在你手里。Claude 的帮助文档在启用方式一节里有一句提醒:新界面下没有联网开关,“Claude searches the web when it helps.” 这意味着同一款产品在不同界面、不同账号设置下,模式可能是自动判断的。记录时如果不写明这一点,两次结果就没有可比性。
对照记录的关键:一次只变一个变量
要把“模式差异”看清楚,两次提问之间只能有模式这一个变量不同。具体做法是:问题原文一字不改,语言、登录状态、账号地区、提问时间尽量靠近,唯一变化的是联网开关。如果顺手把问法也改得更口语,那结果差异到底来自模式还是来自问法,就分不出来了。
教学样例(用于说明记录结构,不是真实客户数据):
- 问题原文:固定一句,例如“这种工况下应该比较哪些技术参数”。
- 第一次:联网开启,保存完整回答、可见来源链接、时间。
- 第二次:联网关闭,同一问题原文,保存完整回答、时间。
- 对比项:回答长度、是否出现来源链接、提到的事实条目、有无明显错误。
- 结论写法:只写“在联网模式下观察到 X,在不联网模式下观察到 Y”,不写“平台更偏向 X”。
记录字段建议固定下来
- 平台与产品入口(网页版、桌面应用、手机应用)。
- 模式状态:联网开、联网关,或自动判断且无法确认。
- 是否登录、账号所在地区、界面语言。
- 问题原文、提问时间(含时区)。
- 完整回答原文,而不是截图或摘要。
- 回答中的可见来源链接,以及链接能否打开。
- 与事实清单的偏差项。
“自动判断且无法确认”这一项一定要如实写。它的存在本身就是一条有用的信息:说明这个入口下你无法做模式对照,后面的结论就必须收窄。
不联网的回答也有参考价值
很多人只关注联网那一轮,把不联网的结果当成噪音。实际上不联网的回答反映的是模型已有的整体印象,也就是公开资料长期积累下来的结果。如果这一轮把品牌说错、把业务范围说小,说明长期印象与事实脱节,这类偏差修正得最慢,也最需要稳定、持续的公开资料去覆盖。
两轮结果放在一起看,还能得到一个具体判断:联网时答对、不联网时答错,说明外部资料已经足够,缺的是模型自身的印象;两边都错,说明源头事实本身有问题。这两种情况的下一步动作完全不同,混为一谈就会把力气花在错误的方向上。
保存方式也影响可比性。完整回答要留下原文,截图只能作为辅助。如果回答很长,把它存成文本文件并记录网址或入口即可,不要节选成只有品牌名的那一段——节选之后,第二次记录的人无法判断当时回答的整体口径。
多久做一次模式对照
模式对照不需要高频。产品功能或界面调整之后做一次,内容有较大改动之后做一次,其余时间按常规问题集复测即可。每次都做两轮问答会把工作量翻倍,得到的新信息却往往有限。真正需要保持的是字段完整:模式状态、时间、问题原文、完整回答,缺一项就白做一轮。
三类常见误读
第一类是把联网与不联网的差异当成内容问题。不联网时品牌没被提到,是很正常的结果,因为模型没有去读你的页面。第二类是把联网模式下涌现的来源当成“必须保持的名单”,下一次换了来源就以为出了问题。第三类是把一次模式对照的结论写成长期规律,之后不再复测。三种误读都源于同一个动作缺失:没有把测试条件写在结论旁边。
这些记录能用来做什么
它能回答一个实际问题:你的品牌事实有没有被外部资料支撑。联网模式下的回答如果引用了第三方页面而不是官网,说明公开资料里有一份比官网更新的描述,或者官网那一段写得不够直接。不联网模式下如果品牌被说错,说明模型已有的印象与现实脱节,这部分只能靠长期、稳定的公开资料慢慢修正,没有捷径。
两种模式的对照结果,和跨平台之间的差异是两件事,处理顺序也不同,可以配合跨平台差异的三类归因一起看。如果你在按平台管理来源,来源建设那篇里有对应的检查方式。光算的GEO 服务把问题集、模式与采样条件写进复测口径,报告只呈现观察到的样本,具体平台与频率按项目确认。
这一环节还有几篇相关的方法与排查可以接着看:国内GEO怎么验收:用固定问题集记录品牌提及、引用来源和事实偏差。
参考来源
- How web search works in Microsoft Copilot Chat and agents — 支持“关闭联网后回答仍存在但没有外部信息”。
- Enable and use web search — 支持“新版界面没有联网开关”。
- Overview of OpenAI Crawlers — 支持“用户触发的访问不一定受 robots.txt 约束”。