摘要:智易欧GEO优化给出四项验证动作:案例可复现、字段可核验、口径进合同、数据归属清晰,帮采购方识别空话。

上周陪一个客户看方案。对方讲到一个案例,说某品牌在三个月里被 AI 推荐的比例从个位数涨到三成。客户转头问我:这个数能信吗?我说,能不能信不取决于数字大小,取决于它有没有留下能复算的过程。

先分清两类说法

服务商说的话大致分两类。一类是可验证的陈述,比如“我们在某个平台做过 120 个问题的采样,这是原始记录”;另一类是不可验证的判断,比如“我们对算法很熟”。前者可以核对,后者只能靠信任。选型的大部分功夫,在于把后一类尽量压成前一类。

下面四个动作,是我在项目里反复用的排序方法:按可核验程度从高到低,先看记录,再看字段,再看合同,最后看归属。

动作一:让案例可复现

可复现指换一个人、换一台机器,按同一份记录能跑出相近的结果。要的东西不多:提问原句、平台与模型版本、采集时间、完整回答、引用链接。缺任何一项,案例就只能当故事听。

我通常会随机挑三条提问,请对方当场调出当时的记录。能调出来的团队,后面的话可以多听几句;调不出来的,前面讲得再好也要打折。

动作二:让字段可核验

字段可核验指观测指标落到具体平台的具体字段名,而不是笼统的曝光、覆盖。以搜索类接口为例,官方文档里常见的是引用来源的结构化信息、本轮实际执行的联网搜索次数这类字段。不同平台的字段名不同,合同里要指定到平台与字段,不能只写“效果数据”四个字。

这一条还有个反向用法:如果一家服务商说某个指标是平台给的,就请它指出是哪个接口的哪个字段。指不出来,这个指标大概率是内部估出来的。

动作三:让口径进合同

口径进合同,指的是把判定方法写成附件:问题集、采样平台、采样频次、基线值、判定规则、失败样本处理、外部因素归因。这七项缺一项,验收时就会争一次。

有一点要提前说清楚:AI 答案受模型版本、舆情、竞品动作影响,任何把结果写成固定数字的约定都不牢靠。合理的写法是约定过程指标与判定规则,而不是约定一个比例。

动作四:让归属清晰

归属包括三件事:内容版权归谁、投放账号与站点控制权在谁手里、合作结束后已有内容怎么处置。这三件事在签约时谈,比在结束时谈容易得多。

我见过不少合作结束后的尴尬:账号在服务商手里,内容在对方博客上,迁移要重新谈一次价。这类问题在合同里写两行字就能避免。

四条红线:听到就该停一停

  • 把结果写成固定比例、固定名额的,先停一停。
  • 张口就说能批量生产“像真人写的”评价的,先停一停。
  • 要求收走全部账号、不给后台权限的,先停一停。
  • 说不清失败样本怎么处理的,先停一停。

这四条不涉及技术判断,只涉及合作是否对等。愿意把记录、字段、权限摊开谈的团队,通常也更愿意对结果负责。

常见问题

案例数据好看就说明服务商能力强吗?
不一定。数据要看是否可复现:有没有提问原句、模型版本、采集时间和完整回答,缺项越多,参考价值越低。
合同里应该约定哪些指标?
建议约定过程指标与判定规则:问题集、采样平台与频次、基线值、判定规则、失败样本处理与归因方式。

写在最后

验证这件事不轻松,它要求采购方自己也懂一点方法,也需要服务商愿意把过程摊开。但我认为值得:四个动作走完,至少能分清哪些团队在做事、哪些团队在讲故事。GEO 还在早期,愿意留下过程记录的人,通常也更经得起事后追问。以上为个人观点,供同行参考。