OpenAI、Google、Microsoft 与 Anthropic 四家 AI 公司于美国时间10月30日表示，将支持同一个“AI 训练退出”信号：网站只要在 robots.txt 加一行设定，就能告诉所有采用这个做法的 AI 公司，不要把网站内容拿去训练生成式 AI 模型。过去，网站要逐家、逐个爬虫写规则，现在有望一次过表态。

据法新社报道，各家的时间表并不一致：Microsoft 从2027年2月1日开始执行，Google 预计在2027年内跟进，OpenAI 表示会在未来几个月内支持，Anthropic 则称已经开始推行。Meta 发言人 Andy Stone 在 X 上表示支持这个方向，但据 SiliconANGLE 报道，Meta 尚未承诺落实。这个信号写在一份提交给国际互联网工程任务组（IETF）的个人草案里，作者是 Anthropic 的 Kevin Kelley，草案日期为10月30日，目前还不是正式通过的标准。

法新社也引述 Microsoft 的说明指出，这项设定只管未来的模型训练，不会阻止其他用途的爬取；网站若不主动更改设定，默认仍然允许 AI 公司抓取内容。

不给 AI 拿去训练，会不会连 AI 的回答里也看不到你的品牌？

据 Microsoft Bing 团队10月30日发布的说明，Microsoft 把“训练”和“回答引用”（grounding）分开处理：训练是用内容去调整模型本身，回答引用则是 AI 在回答用户问题时，临时参考网页内容。两者可以分开设定，例如拒绝训练、但仍然允许回答引用。Microsoft 也说明，如果网站选择禁止回答引用，品牌在 Copilot 等 AI 服务中的曝光会减少，但不影响网站在 Bing 传统搜索结果中的资格。

显然，对马来西亚企业来说，这不再只是技术人员改一行代码的事。很多企业官网上的产品介绍、常见问题、行业文章和案例分享，原本就是为了让潜在客户找到你而写的。现在顾客越来越多是直接问 AI，如果一刀切全部关掉，辛苦累积的知识内容可能从 AI 的回答里消失；如果完全不管，花钱请人做的研究报告和独家方法论，也可能在没有任何回报的情况下被拿去训练模型。

所以，从企业品牌和知识传播的角度来看，真正要做的决定，是哪些内容要让 AI 帮你传播，哪些内容是需要保护的核心资产。

如果你也是靠官网内容吸引客户的企业，你可以先做好这四件事：

• 先把你的网站内容分成两类：一类是希望被更多人看到的公开内容，例如产品说明、常见问题、品牌故事；另一类是代表你专业价值的内容，例如付费报告、独家方法论、客户案例细节。
• 请负责网站的同事检查现有的 robots.txt：看看你的网站目前对各家 AI 爬虫是开放还是封锁，避免过去随手加的规则，在你不知情的情况下把品牌挡在 AI 的回答之外。
• 分开决定“训练”和“回答引用”：需要保护的内容可以考虑拒绝训练，但想让客户在 AI 里找到你的公开内容，就保留回答引用。
• 在明年2月 Microsoft 开始执行之前定好公司立场：把决定写成一份简单的内部指引，以后新增网页时，同事就知道每一类内容应该怎样设定。

说到底，这一行设定考的不是技术，而是企业对自己内容的定位。企业先想清楚哪些知识是用来建立品牌的、哪些是用来赚钱的，才能在 AI 时代既让客户找得到你，也守住自己的专业价值。

关注我们，每天和你聊聊马来西亚老板的实时商业洞察。

资料来源

• Malay Mail（法新社）：After scraping the Internet, AI giants pledge ‘no scraping’ tool for publishers（2026年10月31日）
• Microsoft Bing Blog：Your content, your choice: clearer preferences for training and grounding（2026年10月30日）
• SiliconANGLE：Google, Anthropic and others to support new AI crawling opt-out standard（2026年10月30日）
• IETF Datatracker：Machine-Readable Training Preference Signal（个人草案，2026年10月30日）