GPTBot
OpenAI ・ AI学習 ・ 取得日 2026-09-10
生成AI基盤モデルをより有用で安全にするためにWebコンテンツを収集するクローラー。robots.txt で Disallow にすると「このサイトの内容を生成AI基盤モデルの学習に使わないでほしい」というシグナルになる、と公式が明記。
運営元
OpenAI
用途
AI学習
robots.txt の挙動
robots.txtに従う
当社robots.txt
許可
robots.txt の挙動
robots.txt を尊重。Disallow で学習利用を拒否するシグナルになると公式が明記。
User-agent 文字列（公式）
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbotGPTBot をブロックする robots.txt
User-agent: GPTBot
Disallow: /出典
https://developers.openai.com/api/docs/bots （OpenAI 公式ドキュメント(Bots) ・ 取得日 2026-09-10）
IP検証用: https://openai.com/gptbot.json
OpenAI の他のクローラー
- OAI-SearchBotAI検索
- ChatGPT-Userユーザー操作
- OAI-AdsBotその他