GPTBot(GPTBot)
GPTBot 是 OpenAI 用於擴充 GPT 模型訓練資料的網路爬蟲;允許 GPTBot 不等於同意內容用於訓練,但封鎖會降低長期被 ChatGPT 認知的機率。
GPTBot 與 OAI-SearchBot(ChatGPT Search 即時抓取)、ChatGPT-User(用戶手動訪問)為三條獨立爬蟲。robots.txt 應分別管理。
為何重要
- 影響品牌是否被未來模型認知(LLMO)
- 封鎖 GPTBot 不等於封鎖 ChatGPT Search
實作要點
- robots.txt 開放 GPTBot 並允許 OAI-SearchBot
- 若有版權考量可僅開放 OAI-SearchBot
相關內容
- [glossary] AI 爬蟲 — AI 爬蟲是 OpenAI、Anthropic、Perplexity 等公司部署、抓取網頁內容供 LLM 訓練與即時搜尋使用的自動化機器人。
- [glossary] 大型語言模型優化 — LLMO 指針對 ChatGPT、Claude、Gemini 等大型語言模型訓練資料與即時抓取行為的內容優化策略,與 GEO 高度重疊但更聚焦於 LLM 本身。
- [blog] 2026 完整 GEO 指南:生成式搜尋引擎優化從定義、機制、執行到台灣品牌實戰 — 完整解析 2026 年生成式搜尋引擎優化(GEO):從定義、與 SEO 差異、AI 引用機制、七大內容類型、90 天落地路線、預算配比,到三個台灣品牌實戰案例。