# Googlebot

## In short

Googlebot は Google が運用する AI クローラーです。robots.txt のトークンは Googlebot で、2026-09-06 に取得したベンダーの文書がこのページのすべての記述の出典です。

| Fact | Value |
| --- | --- |
| robots トークン | Googlebot |
| ベンダー | Google |
| 目的 | search index |
| 文書化された検証方法 | 公開された IP レンジと逆引き DNS |
| ベンダー文書の最終確認 | 2026-09-06 |
| 読み取ったドメインのうち / を拒否する割合 | 0.8% of 131 |
| Last verified | 2026-09-06 |

## Googlebot は robots.txt に従いますか

https://developers.google.com/search/docs/crawling-indexing/googlebot にあるベンダーの文書は、Googlebot が robots.txt を尊重すると記載しています。私たちはそのページを取得し、2026-09-06 に確認しました。これはベンダーが文書化している内容の記録であり、個々のリクエストの動作ではありません。

## robots.txt で Googlebot を許可するにはどうしますか

ホストのルートにある robots.txt に次のグループを追加します: User-agent: Googlebot
Allow: /。RFC 9309 により、トークンは User Agent の部分文字列として大文字と小文字を区別せずに照合され、最も長く一致した規則が優先されます。

## robots.txt で Googlebot を拒否するにはどうしますか

ホストのルートにある robots.txt に次のグループを追加します: User-agent: Googlebot
Disallow: /。robots.txt の規則は行儀のよいクローラーが尊重する要請であり、アクセス制御ではありません。

## そのリクエストが本当に Googlebot から来たかをどう確認しますか

ベンダーは IP レンジのファイル (https://developers.google.com/static/search/apis/ipranges/googlebot.json) と逆引き DNS の規約の両方を公開しています。どちらの確認方法も文書化されています。リクエストを証明するのはアドレスであり、User Agent 文字列ではありません。

## 出典

- https://developers.google.com/search/docs/crawling-indexing/googlebot (HTTP 200, 確認日 2026-09-06)
- https://developers.google.com/search/docs/crawling-indexing/overview-google-crawlers (HTTP 200, 確認日 2026-09-06)

AEO Watch は独立した事実重視のモニターです。いかなるクローラー提供者とも提携しておらず、推奨も代弁もしません。すべての記述は、実施した日付と根拠となる生の証拠を伴う観測です。robots.txt の一行、HTTP ステータスコード、ヘッダーなどです。ここに点数、等級、判定はなく、このページのどの内容も助言ではありません。サイトはいつでも除外を求めることができ、その求めは自動的かつ恒久的に守られます。