GoogleOther
Google ・ その他 ・ 取得日 2026-09-10
各プロダクトチームが公開コンテンツの取得に使う汎用クローラー。社内の研究開発向けの単発クロールなどに使われる、と公式が明記。特定プロダクトに紐づかない。
運営元
Google
用途
その他
robots.txt の挙動
robots.txtに従う
当社robots.txt
未記載
robots.txt の挙動
robots.txt のトークンは GoogleOther。個別に許可/拒否できる。
GoogleOther をブロックする robots.txt
User-agent: GoogleOther
Disallow: /出典
https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers （Google 検索セントラル(共通クローラー) ・ 取得日 2026-09-10）
Google の他のクローラー
- Google-ExtendedAI学習