一行代码,让AI巨头学会敲门
📋 总体概括
Google、Microsoft 与 OpenAI 计划共同遵守一条共享的 AI 训练 opt-out 声明,站长一次表态即可对多家生效。叠加 Graphite 报告中 AI 助手月会话达 760 亿次的体量,抓取规则、流量度量与品牌叙事权正在被重新谈判。本文拆解协议背后的产业逻辑,并给出站点的应对策略。
📄 正文
做 SEO 这么多年,我第一次见到 Google、Microsoft 和 OpenAI 三家在同一件事上主动靠拢:认同一行写在 robots.txt 里的共享声明,让网站可以一次性对多家 AI 厂商说'别拿我的内容训练模型'。
这不是技术更新,这是一次谈判姿态的转变。过去是厂商各自立规矩、站长逐家去拒;现在,规则的表达权第一次往站长手里挪了一寸。结合 Graphite 刚发布的 760 亿次月会话数据,以及 MarTech 最近对 AI 时代品牌声誉的讨论,我认为:AI 抓取问题正在从'个案纠纷'变成'产业标准之争',而标准之争的胜负,取决于谁先把成本降下来。
🤝 一行声明,三家罕见站到了一起
先讲场景。过去两年,一个内容站主要求 AI 厂商别抓内容,得在 robots.txt 里逐家写规则——拒了 A 家,B 家和 C 家照抓不误;漏写一行,内容就进了别人的训练集。站长们私下抱怨最多的一句话是:'我不是不想拒绝,是拒绝不过来。'
现在情况可能要变了。据 Search Engine Journal 2025 年 11 月的报道(《Google, Microsoft & OpenAI Align On Shared AI Opt-Out Signal》,链接:https://www.searchenginejournal.com/google-microsoft-openai-shared-ai-opt-out/),Google、Microsoft 与 OpenAI 计划共同遵守一条共享的 AI 训练 opt-out 声明——网站只需声明一次,就可以同时对这几家生效。但报道也明确点出一个关键细节:参与的公司在具体执行上'处理方式各不相同'。
这句话值得反复咀嚼。协议是共享的,执行是分散的,这意味着什么?
产业逻辑有三层。 第一,降低表达成本就是提高 opt-out 的实际使用率——当一个反对意见要填三张不同的表才能生效时,多数人选择沉默;一行声明把沉默成本砍掉了。第二,这是三家在版权与舆论压力下的共同防御动作:与其被逐个诉讼、逐个立法约束,不如先共建一个'我们尊重拒绝'的行业叙事。第三,也是最容易被忽视的——谁定义这行声明的语法和语义,谁就掌握了未来谈判的基准线。标准从来不是免费的礼物,标准是议价工具。
用一张图看这条声明在链路上怎么走:
注意最后一环:这条声明只对'认账'的厂商有约束力。这就是为什么我说它是防御动作而非解决方案——它挡住的是体面人,挡不住不进场的玩家。
📊 760亿次月会话:搜索的对照系失效了
金句先放在这:当一个渠道大到没法和搜索引擎放在一起比,它就不再是'渠道',而是'环境'。
Graphite 于 2025 年 10 月发布的估算报告(《AI Assistant Usage in 2025》,链接:https://graphite.io/research/ai-assistant-usage-in-2025/)给出了一个量级:AI 助手每月会话数已达 760 亿次(76 billion monthly sessions),覆盖全球范围。但比数字本身更有信息量的,是报告作者的另一个动作——他们宣布不再可靠地对比 AI 使用与搜索引擎使用。
这很反常。做数据的人最不愿意做的事就是承认自己的对照组失效了,因为一旦放弃对比,意味着旧有的度量框架装不下新的现实。AI 助手的使用场景、会话结构、用户意图和搜索引擎差异太大:一次搜索是一次请求,一次 AI 会话可能是十几轮追问,两者简单相加或相除都会误导决策。
对营销人来说,这传递了一个务实信号:你的流量归因模型可能已经失真。 过去我们用'搜索量 vs 直访量'来分配预算,现在相当一部分用户旅程发生在大模型对话里——用户在对话中完成认知、比较甚至决策,而这部分在传统分析工具里几乎是暗的。
产业判断:度量体系的真空期,就是渠道话语权的争夺期。谁先建立 AI 会话的归因方法——哪怕粗糙——谁就能在下一轮预算分配讨论中占先。这也是为什么'数据与归因'这个话题,未来一年会比'怎么写 prompt'重要得多。
⚠️ 你的品牌故事,正在被别人讲
MarTech 最近一篇文章(《In the age of AI, your brand story is increasingly told by others》,2025 年发布,链接:https://martech.org/in-the-age-of-ai-your-brand-story-is-increasingly-told-by-others/)的点题话说得很直白:在 AI 时代,你的品牌故事越来越多地由别人来讲述——用户看到的品牌形象,来自 AI 的回答、搜索结果和第三方信息源,而不是你自己官网的 About 页。
把这和第一节的开头协议放在一起,你会看到一个结构性两难:
- 选择拒绝抓取:内容退出训练池,版权安全感上升,但你在 AI 回答里的存在感趋近于零——用户问'XX 类产品哪个好',模型里根本没有你的语料,你连被提及的资格都没有。
- 选择允许抓取:你获得了被 AI 引述的机会,但叙事的组织权交给了模型——它如何概括你、和谁并列、用什么形容词,都不由你决定。
这不是假设。任何做过 AI 回答监测的团队都知道,同一品牌在不同模型里的一句话画像可能天差地别,而这些画像正源源不断变成用户的'第一印象'。
产业逻辑:品牌管理的重心正在从'我说什么'转向'别人怎么复述我'。官网、官方账号是可控叙事;AI 回答、第三方评测、UGC 是半可控甚至不可控叙事。声誉工作必须从'内容发布'升级为'生态管理'——覆盖搜索、AI 与第三方信源三个战场,这正是 MarTech 那篇文章给出的方向。
把痛点和解法对应起来,一张图说清:
🧭 从'抓不抓'到'谁说了算'
这一节讲谈判结构。共享 opt-out 协议表面上是技术对接,实质上是三方博弈的重新洗牌:厂商要语料,站长要回报或至少要控制权,监管和舆论在旁边计时。
这里我要明确说明:以下是我个人的推断,不代表任何厂商的公开表态。我的判断是,这次三家的'联合表态'更像是在为更大的授权市场铺路——先把'拒绝'变成一个低成本、可执行的默认动作,才有可能谈'拒绝之外的付费合作'。逻辑很朴素:如果连说不都做不到,说是没有价格的。
我把站点当前可选的几种姿势放进一个四象限里,横轴是实施成本,纵轴是叙事控制力:
右下角的'躺平派'(完全开放)目前仍是大盘多数——不是因为他们想通了,而是因为没来得及表态。左上到右上的路径,就是未来两年内容方的主流迁移方向:先用一行声明拿回基本拒绝权(成本低、控制力中等),再根据内容资产的稀缺度决定是加技术封锁还是直接进入付费授权谈判。
判断:共享协议真正的价值,是让'拒绝'从技术工程变成了一个可以规模化谈判的标的。谈判标的一旦标准化,定价就会跟上——这是授权市场的前置条件。
🛠️ 站长与营销人的动作清单
最后落到执行。结合三份素材,我给出一个按优先级排序的清单:
1. 先审计,再表态。 检查现有 robots.txt 对各家 AI 爬虫的覆盖情况,梳理哪些内容资产进了谁的训练池。很多站点连自己'已经允许了什么'都不清楚,这是第一步要补的课。
2. 分层授权取代一刀切。 训练用途和检索引用用途分开处理。对多数内容站,'拒训练、留引用'是控制力和曝光之间的最优解。
3. 建立 AI 回答监测。 定期记录主流 AI 对品牌的描述、提及和竞品并列情况,把 AI 回答当作一个需要长期 SEO 式经营的新'搜索结果页'。
4. 经营第三方信源。 AI 的回答大量依赖第三方信息,权威平台上的品牌事实更新,会间接改写 AI 的画像。
5. 重做归因口径。 接受'搜索引擎对照系失效'的现实(Graphite 已经先认了),把 AI 会话单列为渠道,哪怕先上粗糙的估算模型。
配合一张表,把四种策略的代价和适用对象摆清楚:
| 策略 | 实施成本 | 叙事控制 | AI端曝光 | 适合谁 |
|---|---|---|---|---|
| 完全开放 | 极低 | 极低 | 最高 | 靠曝光变现的媒体 |
| 共享声明拒训练 | 低 | 中 | 中 | 多数内容站起步动作 |
| 技术封锁+授权谈判 | 高 | 高 | 低到中 | 高价值数据与垂类库 |
| 分层授权 | 中 | 中高 | 中高 | 品牌站与电商内容 |
一句话总结这个清单的逻辑:不要在'全开'和'全拒'之间二选一,把抓取拆成用途、把声誉拆成战场、把归因拆成渠道,分层处理才是 2026 年的正确姿势。
结语:一行代码解决不了叙事权
回到标题。一行 robots.txt 声明能让 Google、Microsoft、OpenAI 学会'敲门',这是重要的第一步——表达成本降下来了,规则基准线立起来了,巨头至少在姿态上承认了内容方的拒绝权。
但要清醒:协议管不住未进场的玩家,760 亿次月会话背后的归因黑洞还没人能填,品牌的 AI 画像依然由别人执笔。真正的战役不在'抓不抓',而在'谁说了算'——拒绝权的标准化只是议价的起点,授权定价、引用规范、回答可验证性,才是接下来的三张牌桌。
对营销人的建议只有一条:别等标准 fully 落地再动手。现在就开始审计、分层、监测——等所有细节都确定的那天,好的位置早就被先动手的人占完了。
📌 全文总结
最后用三句话收拢全文:
1. 规则表达权在向内容方倾斜:Google、Microsoft、OpenAI 认同共享 AI 训练 opt-out 声明,站长'说一次不'的成本大幅下降,但执行分散、未进场的玩家不受约束——它是谈判起点,不是解决方案。
2. 度量体系正在重构:Graphite 的 760 亿次月会话数据意味着 AI 已经大到不能用搜索的尺子去量,流量归因模型必须把 AI 会话当作独立渠道重建,谁先动手谁先掌握预算话语权。
3. 声誉管理进入'别人讲你'的时代:拒绝抓取可能被 AI 答案'除名',允许抓取则交出叙事组织权——出路是分层授权加生态管理,把搜索、AI、第三方信源三个战场一起经营。
一句话:2026 年的竞争,不再是'谁能被搜到',而是'谁能被准确地说出'。先把审计做了,把声明写上,把监测搭起来——位置是留给先动手的人的。
本文由本站 AI 辅助聚合生成,原始来源如下: