ホーム › SEO・AIOの用語とschema.orgの型・辞典 › クローラー
クローラーの分類一覧
クローラーの分類13件。schema.org の公式語彙ファイル・Google/各社の公式文書（2026年9月時点）。
AI・検索のクローラー一覧とrobots.txtの書き方｜出典つき
AI・検索のクローラー一覧とrobots.txtの書き方を12件まとめました。すべて公式文書に出典があります。
GPTBotとは？robots.txtで拒否する書き方
GPTBotはOpenAIのクローラーです。ChatGPTの学習に使うために読みに来ます。robots.txtでの断り方を公式文書からまとめ
OAI-SearchBotとは？robots.txtで拒否する書き方
OAI-SearchBotはOpenAIのクローラーです。ChatGPTの検索機能で、答えの元にするために読みに来ます。断ると答えに出にくく
ChatGPT-Userとは？robots.txtで拒否する書き方
ChatGPT-UserはOpenAIのクローラーです。利用者がChatGPTにURLを渡したときなど、その場で取りに来ます。robots.
ClaudeBotとは？robots.txtで拒否する書き方
ClaudeBotはAnthropicのクローラーです。Claudeのために読みに来ます。robots.txtでの断り方を公式文書からまとめ
PerplexityBotとは？robots.txtで拒否する書き方
PerplexityBotはPerplexityのクローラーです。Perplexityの検索結果に載せるために読みに来ます。robots.t
Googlebotとは？robots.txtで拒否する書き方
GooglebotはGoogleのクローラーです。Google検索の索引を作るために読みに来ます。断ると検索に出なくなります。robots.
Google-Extendedとは？robots.txtで拒否する書き方
Google-ExtendedはGoogleのクローラーです。GeminiなどのAIに使うかどうかの指定です。断っても検索順位には影響しない
Bingbotとは？robots.txtで拒否する書き方
BingbotはMicrosoftのクローラーです。Bing検索の索引を作るために読みに来ます。robots.txtでの断り方を公式文書から
Applebotとは？robots.txtで拒否する書き方
ApplebotはAppleのクローラーです。Siriやスポットライト検索のために読みに来ます。robots.txtでの断り方を公式文書から
Amazonbotとは？robots.txtで拒否する書き方
AmazonbotはAmazonのクローラーです。Alexaなどのために読みに来ます。robots.txtでの断り方を公式文書からまとめまし
CCBotとは？robots.txtで拒否する書き方
CCBotはCommon Crawlのクローラーです。誰でも使える公開データを作るために読みに来ます。多くのAIの学習データの元になっていま
meta-externalagentとは？robots.txtで拒否する書き方
meta-externalagentはMetaのクローラーです。MetaのAIのために読みに来ます。robots.txtでの断り方を公式文書
この記事と同じものを、あなたの会社のサイトに毎日2本。ことば選びから公開まで代行します。1日667円（税抜）から。
ほったらかし集客の料金はこちら →