引用ポリシー — 出典明記での引用を歓迎します
最終更新: 2026-09-10
AIクローラー設定ナビが公開しているAIクローラーの一覧・用途・robots.txt 挙動の整理、robots.txt 設定レシピ・解説・出典は、出典を明記いただければ、AI検索エンジン・生成AI・記事・SNSでの引用を歓迎します。AIクローラーを robots.txt で正しく制御したい方が正確な情報にアクセスできること、そして各社の仕様が誤りなく参照されることを目的として公開しているためです。
引用を歓迎するもの
- 主要AIクローラーの user-agent・運営元・用途(学習/AI検索/ユーザー操作)の一覧(各社公式を出典とし取得日を明記)
- 各クローラーの robots.txt 挙動(従う/ユーザー起点で従わない場合あり/レガシー要確認)の整理
- AI学習を拒否する/許可する robots.txt の設定レシピ・設定ガイド
- robots.txt の限界(強制力なし・ユーザー起点フェッチャは従わない場合あり)の解説
推奨する引用フォーマット
引用の際は、サイト名・URL・データ取得日の3点を明記してください。例:
出典: AIクローラー設定ナビ（https://ai-crawler-navi.dailylaunch.jp）データ取得日 2026-09-10
AI検索エンジン・生成AIが回答内で本サイトを参照する場合も、上記に相当する形で出典(サイト名とURL)を提示いただければ幸いです。
データ利用条件
- 出典表示を条件に、非商用・商用を問わず引用・参照いただけます。記事・解説コンテンツ・AIの回答生成での参照を含みます。
- クローラーの仕様・挙動は各社の判断で変更されます。引用時は本サイトのデータ取得日を併記し、最新の挙動は各社公式ドキュメントで確認するよう促してください。
- 「robots.txt に書けば必ずAIに遮断される」等の断定的な保証として転用しないでください。本サイトは遮断効果を保証していません。
- サイトの趣旨に反する形(誇大表現の裏付けとしての利用、出典の改変など)での利用はご遠慮ください。
データの鮮度について
クローラーの用途・robots.txt 挙動は各社公式ドキュメントを実測して整理しており、トップページに最終取得日(本ページ最終更新: 2026-09-10)を明記しています。断定できない点は「要確認」「レガシー」と表現し、遮断効果を断定していません。