GPTBot（ジーピーティーボット）
GPTBot
GPTBotとは、OpenAIが公開ウェブのコンテンツを取得し、生成AIモデルの改善や学習に利用する可能性のあるデータを収集するためのウェブクローラーである。
詳しく
検索表示用クローラーとは分けて制御する
GPTBotはモデル改善・学習に関係するクローラーであり、ChatGPT検索でページを発見・表示するOAI-SearchBotとは役割が異なる。サイト運営者はrobots.txtでUser-Agentごとに許可・拒否を指定できる。学習への利用は許可しない一方で検索結果への掲載は目指す場合、GPTBotとOAI-SearchBotを同じ規則で一括制御しないことが重要である。
関連用語
プラットフォーム・技術の他の用語
一覧を見るAI Overviews（エーアイオーバービューズ）
AI Overviews とは、Google 検索の検索結果上部に表示される AI 生成の要約である。従来の検索結果と並行して表示される。
AI Mode（エーアイモード）
AI Mode とは、Google が提供する対話型の AI 検索体験である。質問をサブトピックに分解して並列検索する query fan-out の仕組みを採用している。
llms.txt（エルエルエムズテキスト）
llms.txt とは、Web サイトの運営者が AI クローラー向けにサイト情報を提供するためのファイルであり、AI が効率的にサイトの内容を取得するためのガイドとして機能する。
OAI-SearchBot（オーエーアイサーチボット）
OAI-SearchBotとは、OpenAIがChatGPT検索でウェブページを発見し、回答内の要約、抜粋、出典リンクとして表示するために使用する検索用クローラーである。
Operator（オペレーター）
Operatorとは、OpenAIが2025年に研究プレビューとして提供した、専用ブラウザを操作して入力、クリック、スクロールなどのウェブ作業を実行するAIエージェントである。
ClaudeBot（クロードボット）
ClaudeBotとは、AnthropicがClaudeの生成AIモデルの有用性や安全性を改善する目的で、学習に利用される可能性のある公開ウェブコンテンツを収集するクローラーである。