Inspect

Google、OpenAI、Anthropic與微軟達成共識,一行程式碼禁止AI爬文訓練、保留搜尋曝光與SEO流量 - Mashdigi(2026-11-01)

1. 四大廠採納IETF草案,robots.txt一行即可統一禁止AI訓練用途 2. 訓練權限與搜尋爬取拆開,Disallow不影響Google/Bing索引與SEO 3. 時程不一且無溯及力,未簽署的小型實驗室不受拘束

發布 2026-11-01 01:30收集 2026-11-01 01:30
原始來源mashdigi.com

Google、OpenAI、Anthropic與微軟達成共識,一行程式碼禁止AI爬文訓練、保留搜尋曝光與SEO流量 - Mashdigi

  • 來源: mashdigi.com
  • 分類: SEO
  • Published: 2026-10-31T11:50:17+08:00
  • Source: https://mashdigi.com/usage-ai-training-robots-txt-google-openai-seo/

主要內容摘要

1. 四大廠採納IETF草案,robots.txt一行即可統一禁止AI訓練用途

2. 訓練權限與搜尋爬取拆開,Disallow不影響Google/Bing索引與SEO

3. 時程不一且無溯及力,未簽署的小型實驗室不受拘束

為何成為話題

站長長期怕擋錯爬蟲連帶失去搜尋流量;此共識直接牽動媒體授權、模型訓練資料來源與搜尋政策。

三個爭議點

1. 2027年才全面生效,等於給現有模型一段繼續吃舊資料的空窗

2. 自願遵守無法約束未簽約實驗室,內容保護可能只對大廠有效

3. Allow特定目錄放行訓練,是否變成大廠與媒體議價、小站無對等談判權