meta-externalagent: robots トークン、検証方法、許可と拒否
このページは機械翻訳です。数値と証拠は保存された観測結果をそのまま表示しています。
meta-externalagent は Meta が運用する AI クローラーです。robots.txt のトークンは meta-externalagent で、2026-09-06 に取得したベンダーの文書がこのページのすべての記述の出典です。
| robots トークン | meta-externalagent |
|---|---|
| ベンダー | Meta |
| 目的 | training corpus, search index |
| 文書化された検証方法 | 公開なし |
| ベンダー文書の最終確認 | 2026-09-06 |
| 読み取ったドメインのうち / を拒否する割合 | 16.4% of 128 |
| Last verified |
識別情報
| robots トークン | meta-externalagent |
|---|---|
| 照合される文字列 | meta-externalagent |
| ベンダー | Meta |
| 目的 | training corpus, search index |
| 文書 | https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/ |
| 文書化された検証方法 | 公開なし |
The vendor page fetched on 2026-09-06 carries the exact snippet 'User-agent: meta-externalagent Allow: / # Allow everything Disallow: /private/ # Disallow a specific directory', asks for up to 24 hours for a robots.txt change to take effect, and notes that its integrity and security checks may not follow robots.txt.
許可または拒否
User-agent: meta-externalagent Allow: /
User-agent: meta-externalagent Disallow: /
robots.txt の規則は行儀のよいクローラーが尊重する要請です。アクセス制御ではなく、このページは何を選ぶべきかを誰にも指示しません。
よくある質問
meta-externalagent は robots.txt に従いますか
https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/ にあるベンダーの文書は、meta-externalagent が robots.txt を尊重すると記載しています。私たちはそのページを取得し、2026-09-06 に確認しました。これはベンダーが文書化している内容の記録であり、個々のリクエストの動作ではありません。
robots.txt で meta-externalagent を許可するにはどうしますか
ホストのルートにある robots.txt に次のグループを追加します: User-agent: meta-externalagent Allow: /。RFC 9309 により、トークンは User Agent の部分文字列として大文字と小文字を区別せずに照合され、最も長く一致した規則が優先されます。
robots.txt で meta-externalagent を拒否するにはどうしますか
ホストのルートにある robots.txt に次のグループを追加します: User-agent: meta-externalagent Disallow: /。robots.txt の規則は行儀のよいクローラーが尊重する要請であり、アクセス制御ではありません。
そのリクエストが本当に meta-externalagent から来たかをどう確認しますか
meta-externalagent について文書化された確認方法は見つかりませんでした。ベンダーは私たちが取得できる IP レンジのファイルも逆引き DNS の規約も公開していません。それがなければ User Agent 文字列は出所の証拠になりません。
計測している内容
robots.txt を読み取った 128 件の収録ドメインのうち、21 件が meta-externalagent に対して / を拒否し、107 件が許可しています。拒否は 16.4% です。2026-W37 週。件数のみで、ドメイン名は挙げません。
出典
| 出典 | 種類 | HTTP | 確認日 | 備考 |
|---|---|---|---|---|
| https://developers.facebook.com/docs/sharing/webmasters/web-crawlers/ | vendor | 200 | 2026-09-06 | served as text/markdown; 5 occurrences of meta-externalagent |
| https://darkvisitors.com/agents/meta-externalagent | aggregator | 200 | 2026-09-06 | corroboration only; volatile source: identical byte count but a different content hash on every fetch (verified twice on 2026-09-06), so the refresher compares byte counts for it, not hashes |
無料データ
AEO Watch は独立した事実重視のモニターです。いかなるクローラー提供者とも提携しておらず、推奨も代弁もしません。すべての記述は、実施した日付と根拠となる生の証拠を伴う観測です。robots.txt の一行、HTTP ステータスコード、ヘッダーなどです。ここに点数、等級、判定はなく、このページのどの内容も助言ではありません。サイトはいつでも除外を求めることができ、その求めは自動的かつ恒久的に守られます。