今年年初我们给客户做一个「买前调研」类问答产品,用户问的是「预算 8000 的降噪耳机怎么选」「20 人团队用哪款 CRM」这类问题。上线六周后,运营同学提了个很尖锐的观察:「AI 给的答案看着挺客气,但你顺着它的引用点进去,一半是软文。」
这句话值得认真对待。AI 答案引擎把「内容生产」和「答案呈现」之间的距离拉得极近——谁被引用,谁就获得了答案层面的曝光,这和传统 SEO 里「谁排第一」是同一种权力,只是更集中,也更难被普通用户察觉。这篇复盘写我们怎么把这件事量化:4 个主流答案引擎、20 个查询模板、320 次真实查询,外加 1,142 个引用源的逐条归因。核心结论:18.6% 的引用源是营销或软文内容,其中「商业购买类」查询的污染率 31.2%,是信息性查询(6.4%)的 4.9 倍。
一、方法:先给「软广」一个可操作的定义
要统计它,先得能识别它。我们建了三道判定,前两道自动跑,第三道人工,任意一道命中即计入污染:
- 域名信誉:站点以导购、清单体、分销返利为主业。我们人工核验了引用域名的 top 300,其中 172 个进入名单。
- 内容特征:标题含「十大」「最强」「闭眼入」「避坑」等模板词;正文出现返利链接或 affiliate 披露;同一模板站下批量产出。
- 文本结构:无一手数据、无实测过程、无任何负面描述,且段落结构与多篇文章高度同构(用 n-gram 相似度 >0.42 判定)。
两名标注员独立打分,Cohen’s κ = 0.81,分歧样本由第三人仲裁。320 次查询共回收 1,142 个引用源,其中 212 个被判污染。
二、数据:污染率随「商业距离」单调上升
把 20 个查询模板按商业距离排开,规律非常干净:问题越接近掏钱,引用源越脏。
| 查询类别 | 查询数 | 引用源污染率 | 平均引用数 |
|---|---|---|---|
| 商业购买类 | 40 | 31.2% | 6.8 |
| 产品对比类 | 40 | 24.7% | 5.1 |
| B2B 采购类 | 40 | 19.8% | 7.4 |
| 商业服务类 | 40 | 14.3% | 5.6 |
| 信息性查询 | 160 | 6.4% | 4.9 |
另一个反直觉发现:污染率和引用源的新鲜度正相关。发布时间在 90 天内的引用源污染率 26.3%,三年以上的老内容只有 7.8%。答案引擎普遍偏爱新内容,而软广的生产成本最低、更新最快、最愿意追逐新关键词——这不是巧合,是结构性优势。传统搜索里用户还会扫一眼域名,答案引擎把域名折叠成一个小角标之后,这种「扫一眼」的判断机会被拿掉了。
三、引擎差异:谁更愿意引站点权威
四个引擎在污染率上的差距接近一倍,且和它们公开宣称的「引用质量优先」并不完全一致。我们同时统计了引用可点开率(链接真实可达、非聚合页非登录墙)和引用集中度(同一域名在单次回答中重复出现的比例):
| 引擎 | 污染率 | 引用可点开率 | 引用集中度 |
|---|---|---|---|
| 引擎 A | 12.4% | 91% | 0.31 |
| 引擎 B | 18.9% | 86% | 0.44 |
| 引擎 C | 21.6% | 78% | 0.52 |
| 引擎 D | 23.8% | 82% | 0.47 |
最值得注意的不是谁的绝对污染率低,而是引用集中度与污染率的相关性达到 0.68——把引用堆在同几个域名上,本质上是把「可引用的源」范围缩小了,而缩小后的池子里软广浓度更高。引用数量多不等于答案更可信,我们见过给 8 个引用但 5 个是同站内页的回答。
四、我们能做的五件事
- 查询词改写后重问。加上「评测」「实测」「报告」这类词,污染率平均降 7.3 个百分点——软广内容极少覆盖这类词根。
- 商业查询强制注入一手源。把官方文档、行业报告、第三方检测机构的结果先塞进提示上下文,让模型在「有据可依」时不需要去链海里捞。
- 双引擎交叉。同一问题问两家,取交集引用。我们的样本里,双引擎同时引用的软广源只占 4.1%,远低于任何单引擎。
- 时间与站点限定。白名单站点加
site:限定,或加时间过滤,能把信息性查询的污染率压到 2% 以下,但会牺牲时效性,我们只在采购决策这类慢场景用。 - 把引用源健康度做成产品内的可见字段。域名类型、出版时间、是否有返利披露直接展示给用户。上线这个字段后,用户点开引用源的比例涨了 19%,但订单转化没掉——用户不排斥知道真相,排斥的是被骗。
总结
320 次查询、1,142 个引用源的归因,最后留给我们的不是「某个引擎更脏」这种结论,而是一个判断:答案引擎正在把内容营销的激励结构原样继承过来,而它在界面层面隐藏了用户原本拥有的怀疑线索。污染率会随商业距离上升、随内容新鲜度上升,这两条规律都不是任何一家的模型问题,是生态问题。能做的是在自己这一侧把怀疑线索还回来:改写查询、注入一手源、交叉验证,以及把来源健康度摊开给用户看。
互动提问:你们在自己的产品里遇到答案引用质量的问题了吗?我们最意外的数据是污染率和内容新鲜度正相关,一度以为是标注标准有偏。
互动提问:「引用源健康度」这种字段,你们敢摊开给用户看吗?我们内部最大的顾虑是客户方觉得在打同行的脸。
— IMAI 编辑部 | 2026-11-11