同一家店隔一个月再测,分数为什么不一样
复查分数变化有三个来源:取样问题不一样、平台模型或索引更新、自己页面内容有变化。只有第三种算真进步。做法是固定一组问题、固定平台、固定位置,每次记录是否提到、提到时引用了哪句话。如果整组问题全线上升,多半是平台更新;如果只有补过内容的那几个问题上升,才是改对了。
结论先说:分数变了先别高兴也别慌。三个来源会造成同样的表面变化,只有一个是你的功劳。分不清来源,就会把平台波动当成自己的成果,把内容问题当成运气不好。
三个来源,长得几乎一样
第一个来源是取样变了。上次问五个问题,这次问八个;上次只问了一个平台,这次问了三个;上次在店里问,这次在外地问。任何一项变了,分数就不可比。这是最常见的原因,也是最好排除的。
第二个来源是平台自己变了。模型版本更新、索引重建、排序策略调整,都会让同一组问题的答案整体位移。这种位移通常是一次性的、影响面很广,同行的表现也会一起变。
第三个来源才是你的页面变了。补了门店介绍、加了问答、对齐了地址电话,这些改动会让相关问题的表现缓慢上升。这一类变化通常不是全线上涨,而是集中在补过内容的那几类问题上。
怎么区分是哪一种
方法很土但有效:看变化的分布。整组问题齐涨齐跌,八成是平台更新;只有两三个问题涨了,而且刚好是你补过内容的方向,那是真进步;涨跌零散、没有规律,多半是取样方式不一致。
再补一个动作:同时测一家同行。如果同行的表现和你同步变化,说明是平台层面的位移;如果只有你变了,才可能是内容起了作用。这一步很多人省掉,结果永远分不清原因。
固定问题集是前提
没有固定问题集,复查就没有意义。固定问题集的意思是:同一批问题、同样的问法、同样的顺序、同样的平台、同样的位置。四项都固定,变化才有解释力。
- 先定六到十个问题,覆盖价格、场景、品类、位置四类
- 问题用客户原话,不用行业术语,一句一问
- 每次按同样顺序问,不要临时增加或删减
- 固定平台,换平台要单独记录,不能混在一个分数里
- 固定位置,注明是在店附近还是在外区
- 每次记录日期,AI 的回答随时在变,没日期就无法对比
这套做法看起来笨,但它让数据可比。做了三个月之后,你能看到哪类问题先起来、哪类一直不动,这比一个总分有用得多。
分数没动,但生意变好了,怎么解释
这种情况常见。AI 回答只是客户路径上的一环,客户还可能从地图、平台、朋友推荐来。分数不动说明在 AI 这一环没变化,不代表其他环节没起作用。要分开看,不要用一个指标解释全部到店量。
反过来也成立:分数涨了但生意没变。可能是因为被提到的那些问题本来就不是你的客户会问的,也可能是因为提到时描述得不准,客户看了不觉得是给他的。这时候要改的不是数量,是说法。
一份能照着记的复查表
| 字段 | 怎么填 | 为什么要有 |
| 日期 | 年月日 | 回答每天在变,没日期不可比 |
| 平台 | 只写一个 | 多平台混记会掩盖差异 |
| 问题原话 | 照抄,不改字 | 改一个字结论就可能不同 |
| 位置 | 店附近或某区 | AI 会参考位置给候选 |
| 是否提到 | 提到、只提品类、未提 | 三种要分开,不能合并成有或无 |
| 引用句 | 摘一句原文 | 反推 AI 在哪种页面上找到你 |
| 同行对照 | 可选,记一家 | 用来判断是不是平台整体位移 |
这张表不需要工具,一个表格文件就够。连续记八到十二周,就能看出趋势。多数人失败在记了三周就停了,然后凭感觉判断有没有用。
复查节奏怎么定
刚改完内容的两周内可以一周一次,看有没有初步反应。之后一个月一次就够,因为抓取和索引本身需要时间,测太密只会看到噪声。稳定的店可以一个季度一次。
遇到平台大版本更新,可以临时加测一次,但要单独标注,不要和常规记录混在一起算趋势。混进去之后,那条曲线就没法看了。
多数人放弃不是因为记录难,是因为前两周没看到变化就以为没用。实际的变化通常出现在第四到第八周,前面那段安静期才是最容易误判的时候。
两个常见误解
误解一:分数涨了就是做对了。可能只是平台更新,或者你换了一组更容易被提到的问题。误解二:分数没涨就是白做。内容需要时间被抓取,两三天就下结论,通常判断错。
一句话总结
复查的价值不在分数本身,在能不能解释分数的变化。固定问题、固定平台、固定位置、加上一家同行对照,这四件事做到,你就能分清哪些是自己的功劳,哪些只是风变了。