--- title: "OpenAI 支持 robots.txt 共用訓練偏好訊號，網站可一次過向多家 AI 表態" url: https://sammy.hk/openai-robots-training-signal/ author: Ethan published: 2026-10-31T20:44:00+08:00 modified: 2026-10-31T09:51:25+08:00 description: "OpenAI 宣佈，將遵循一個放在 robots.txt 的共用訊號，讓網站營運者一次向多家參與的 AI 供應商表達「內容是否可用作基礎模型訓練」，不必再逐家 AI 公司辨識 crawler、逐條嵌規則[1]。公司表示目標在未來數月實施，屆時會再交代具體細節，並強調新訊號不會取代現有的 crawler 控制[1]。從逐…" categories: [AI] tags: ["AI 訓練", IETF, OpenAI, robots.txt, "版權"] source: https://sammy.hk --- ![](https://sammy.hk/wp-content/uploads/2026/10/openrouter_google_gemini-3_1-flash-lite-image_20261031_095048_4746e891.jpg)OpenAI 宣佈，將遵循一個放在 robots.txt 的共用訊號，讓網站營運者一次向多家參與的 AI 供應商表達「內容是否可用作基礎模型訓練」，不必再逐家 AI 公司辨識 crawler、逐條嵌規則\[1\]。公司表示目標在未來數月實施，屆時會再交代具體細節，並強調新訊號不會取代現有的 crawler 控制\[1\]。 ## 從逐個 crawler 到一個共用訊號 現行做法之下，網站管理員要在 robots.txt 辨識每一家 AI 公司的抓取程式，為每個供應商分別絕護一條規則。OpenAI 在公告中承認，這種做法對網站營運者構成重複工作，而跨供應商的共用訊號正好減少這類負擔\[1\]。 這個訊號並非 OpenAI 單方設計，而是源自互聯網工程任務組（IETF）AI Preferences 工作組的討論。OpenAI 表示，這次是與工作組其他參與者一同公開，並認為這有助強化其在 IETF 標準討論中的參與\[1\]。公告又提到，新做法依賴工作組一條關於訊號偏好的互聯網草稿\[1\]。 ## 技術上如何運作 根據草稿編碼 draft-kelley-aipref-training-preference-signal-00 的草稿，機制不需要新增任何指令名稱，也不改動 robots.txt 的語法：路徑詞語、最長匹配優先規則與群組結構一律沿用原有定義，只是在 User-Agent 一行改用一個按用途劃分的政策標記\[2\]。草稿舉例的寫法是：在 robots.txt 寫入 `User-Agent: __usage_ai-training`，再配合 `Disallow: /` 與 `Allow: /press-kit/`，即表達除 /press-kit/ 路徑以外，全站不願內容被用於 AI 訓練，而謂路徑規則表示贊成\[2\]。 這種設計的好處是向後兼容。草稿指出，未實作此機制的解析器，會把政策標記群組當作不認識的 user agent 群組忽略，行為與以往一致；反之言之，網站加入這個訊號，不會意外改變原有的流量管理規則\[2\]。同時，偏好可以按路徑逐段設定，不限於全站一刀切\[2\]。 ## 自願性質與實際限制 OpenAI 明確表示，新訊號僅自願性質，不會取代現有的 robots.txt 控制；公司現有向網站提供的 crawler 控制將繼續適用並獲尊重\[1\]。公告又呼籲其他 AI 供應商一同遵循這個訊號\[1\]。 對出版商而言，這意味著多了一个集中表態的渠道，但約束力仍取決於各家供應商是否自願跟隨。訊號寫在 robots.txt，本身沒有法律強制力，實際效果要看參與名單有多廣、以及各家在訓練流程中如何處理。對中小型網站，甚至是無力逐家談判授權的出版方，一次設定即可向多家表態，操作成本明顯低於現時做法。 ## 參考資料 \[1\] [Making it easier for websites to express AI training preferences（2026-10-30）](https://openai.com/index/helping-websites-express-ai-training-preferences) \[2\] [Machine-Readable Training Preference Signal（2026-10-30）](https://datatracker.ietf.org/doc/draft-kelley-aipref-training-preference-signal/) ### 相關文章： 1. [美國政府出手：喺《紐約時報》告 OpenAI 版權案中撐 OpenAI，指 AI 訓練屬合理使用](https://sammy.hk/%e7%be%8e%e5%9c%8b%e6%94%bf%e5%ba%9c%e5%87%ba%e6%89%8b%ef%bc%9a%e5%96%ba%e3%80%8a%e7%b4%90%e7%b4%84%e6%99%82%e5%a0%b1%e3%80%8b%e5%91%8a-openai-%e7%89%88%e6%ac%8a%e6%a1%88%e4%b8%ad%e6%92%90-openai/ "美國政府出手：喺《紐約時報》告 OpenAI 版權案中撐 OpenAI，指 AI 訓練屬合理使用") 2. [OpenAI 報告揭盅:700 個「失控」AI 代理如何攻陷 Hugging Face,以及 116 間公司發起的集體網絡防禦](https://sammy.hk/openai-%e5%a0%b1%e5%91%8a%e6%8f%ad%e7%9b%85700-%e5%80%8b%e3%80%8c%e5%a4%b1%e6%8e%a7%e3%80%8dai-%e4%bb%a3%e7%90%86%e5%a6%82%e4%bd%95%e6%94%bb%e9%99%b7-hugging-face%e4%bb%a5%e5%8f%8a-116-%e9%96%93/ "OpenAI 報告揭盅:700 個「失控」AI 代理如何攻陷 Hugging Face,以及 116 間公司發起的集體網絡防禦") 3. [OpenAI 自家晶片 Jalapeño 首份跑分出爐：以每瓦效能挑戰 Nvidia 旗艦](https://sammy.hk/openai-%e8%87%aa%e5%ae%b6%e6%99%b6%e7%89%87-jalapeno-%e9%a6%96%e4%bb%bd%e8%b7%91%e5%88%86%e5%87%ba%e7%88%90%ef%bc%9a%e4%bb%a5%e6%af%8f%e7%93%a6%e6%95%88%e8%83%bd%e6%8c%91%e6%88%b0-nvidia-%e6%97%97/ "OpenAI 自家晶片 Jalapeño 首份跑分出爐：以每瓦效能挑戰 Nvidia 旗艦") 4. [OpenAI 於印度推出 ChatGPT 廣告：免費與 Go 方案用戶開始見到贊助內容](https://sammy.hk/openai-%e6%96%bc%e5%8d%b0%e5%ba%a6%e6%8e%a8%e5%87%ba-chatgpt-%e5%bb%a3%e5%91%8a%ef%bc%9a%e5%85%8d%e8%b2%bb%e8%88%87-go-%e6%96%b9%e6%a1%88%e7%94%a8%e6%88%b6%e9%96%8b%e5%a7%8b%e8%a6%8b%e5%88%b0%e8%b4%8a/ "OpenAI 於印度推出 ChatGPT 廣告：免費與 Go 方案用戶開始見到贊助內容")