用AI核对两轮GEO监测样本能不能比

用AI逐条核对问题版本、平台入口、回答状态和引用,再按有效样本重算提及与官网引用。八条虚构记录演示如何处理问法变化、超时和重复官网链接。

事橙营销AI实践频道封面图

用 AI 核对原问题、入口、采样条件和原始回答,先找出能参与同一口径统计的样本,再算品牌提及和官网引用。这次用八条教学记录试跑,专门放入问法变化、超时和同条回答有两个官网链接的情况。样本、品牌和域名均为虚构,结果用于验证这套检查过程。

先交给AI原始明细,再让它计算

真实使用时,导出两轮明细,保留问题版本和原句、平台与入口、采样时间、可见模型和设置、回答状态、原回答和引用。用于这次试跑的八条记录均标为同一模拟网页入口和相同设置,时间用轮次表示。V1 问“国内有哪些工业温度传感器供应商?”,V2 问“示例品牌A能不能提供工业温度传感器?”。品牌名按正文中的“示例品牌A”判定,官网域名为 `brand-a.example`。

  • **A1|第1轮,V1,有效**:回答提到“示例品牌A”,引用第三方供应商目录 `industry.example/supplier-directory`。
  • **A2|第1轮,V1,有效**:回答没有提到品牌,引用官网页面 `brand-a.example/guide`。
  • **A3|第1轮,V1,有效**:回答没有提到品牌,也没有官网引用。
  • **A4|第1轮,V1,超时**:没有有效回答。
  • **B1|第2轮,V1,有效**:回答提到“示例品牌A”,引用两个官网页面 `brand-a.example/spec` 与 `brand-a.example/install`。
  • **B2|第2轮,V1,有效**:回答没有提到品牌,也没有官网引用。
  • **B3|第2轮,V1,超时**:没有有效回答。
  • **B4|第2轮,V2,有效**:回答提到“示例品牌A”并引用官网,但问法版本不同,单独保留。

把这些明细和品牌识别规则交给 AI,可以用下面这段提示词。

你在复核两轮 GEO 监测明细。以我给定的问题版本、平台入口和采样设置为比较口径。
1. 先按轮次列出全部样本 ID。把问法、入口或已知设置不同的记录标记为另组,把条件缺失的记录标记为待核。保留每条排除理由。
2. 对同口径记录分别列出尝试次数、有效回答和失败样本。以有效回答数为提及率和官网引用率的分母,单列失败次数。分母为零时填待核。
3. 逐条检查正文是否明确写出目标品牌,并记录对应原句。另查来源列表是否包含目标官网域名。单条回答内有多个官网链接时,官网引用样本计一次。正文提及与官网引用分别给出样本 ID。
4. 输出逐轮的分子、分母、比例和原始样本 ID。标出影响比较的样本数和条件差异。把需要人确认的原文、域名或异常记录列出来。

复算时先看样本ID,再看百分比

第1轮在V1下尝试4次,3条回答有效。品牌提及是1/3(A1),官网引用是1/3(A2),A4超时。

第2轮在V1下尝试3次,2条回答有效。品牌提及是1/2(B1),官网引用也是1/2(B1),B3超时。B4使用V2问法,不能混进V1的前后比较。

A2正文没有写品牌名,但引用了官网;B1有两个官网链接,仍只计一个官网引用样本。两轮提及和引用的分子都为1,有效回答数却从3条变成2条,所以比例不同。拿到正式监测明细后,照这个顺序逐条复算,再由业务同事检查品牌表述和引用页面。没有原始回答或采样条件的记录,留在待核项。

这组数据只演示复核方法。如何选择人工抽查或监测工具,见手动查询与GEO监测工具的区别;工具采样要检查哪些明细,也可看第三方GEO工具监测常见问题。

可直接复制使用的 Prompt

下面是按这项实践整理的可复用 Prompt。使用时请补充当前任务的真实资料、适用边界和需要人工确认的内容。

可直接使用的 Prompt
请复核两轮 GEO 监测明细,先核对口径,再统计。不要把不同条件的数据合并。

输入字段:轮次、样本ID、问题版本与原句、平台入口、采样时间、可见模型或模式、设置、状态、完整回答、引用链接。
品牌识别规则:[填写准确品牌名称、别名及不应算作提及的相似名称]
官网域名:[填写需要核对的正式域名]
提及规则:回答正文明确出现目标品牌名称才计为提及。
引用规则:该回答至少有一个链接属于目标官网域名才计为官网引用,同一回答的多个官网链接只计一个样本。

1. 逐轮列出所有样本ID,统计尝试数、有效回答数、失败数。
2. 按问题版本、平台入口和已知设置分组。记录差异,条件缺失的样本列为待核;不把不同问题版本合并比较。
3. 对每条有效回答给出提及与官网引用的判断、原文依据和样本ID。
4. 以有效回答数为分母计算提及率和官网引用率,逐项显示分子、分母、比例与失败数。
5. 同一回答里的多个官网链接只计一个官网引用样本。
6. 列出排除项及原因、异常记录和需要业务人员确认的地方。没有原文或口径依据时填“待核”,不要猜测。