ClaudeBotとは—Anthropicの3つのボットと実測ログで見えた巡回の仕組み
Anthropicのクローラーは3種類あり、それぞれ役割が異なります。ClaudeBot・Claude-User・Claude-SearchBotの違いと、AI観測ラボで観測した4,072件の実測ログから見えた巡回パターンと仕組みを整理します。
Anthropicのクローラーは3種類あり、それぞれ役割が異なります。ClaudeBot・Claude-User・Claude-SearchBotの違いと、AI観測ラボで観測した4,072件の実測ログから見えた巡回パターンと仕組みを整理します。
PerplexityがWebをどう巡回しているのか。3か月・1,194件のサーバーログから、波型巡回・月別推移・GPTBotとの違いなど、AI検索時代の巡回パターンを観測しました。
llms.txtとは何か。robots.txtとの違いやllms-full.txtとの使い分け、GPTBot・Googlebotが実際に取得したサーバーログまで、AI観測ラボの一次データをもとに整理します。
サーバーログに記録された謎のエージェント「AI-Observatory/1.0」が、llms.txt設置から6日後に巡回パターンを変えました。sitemap.xmlの変化・来訪頻度の増加・AWSバージニア北部IPの特徴を、実測ログベースで記録します。
AI観測ラボのサーバーログを調査したところ、AIクローラーが記事ページより先に運営者情報・著者ページ・llms.txtを確認しているような巡回パターンが見えてきました。各AIクローラーの実測をもとに、「サイト信頼性」を考察します。
ChatGPTはどのページを見に来ているのか。2026年5月上半期のサーバーログから、OAI-SearchBotとChatGPT-Userの取得プロセスを分析。robots.txt確認・内部リンク巡回・リアルタイム取得の流れを実測データで解説します。
同じ質問をChatGPT・Gemini・Perplexityに投げた実測結果。Geminiは創作し、Perplexityは歪めました。AIごとに異なる「壊れ方の構造」とサイト運営者へのリスクを解説します。
GoogleのAI Overviewで引用リンクが増えています。背景にあるのはCTR低下という現実かもしれません。リンク構造の変化を読み解き、サイト運営者が今見るべきポイントを整理します。
検索順位は変わらないのにアクセスだけが減っている—その背景には「ゼロクリック問題」があります。ChatGPT・Perplexity・Google AI Overview時代に起きている検索構造の変化を、サーバーログの実測データとともに整理します。
Perplexityに引用されるサイトには共通した設計があります。AI観測ラボの実測ログをもとに、robots.txtとsitemapの入口設計、読まれるページ構造、HTML設計、Perplexity-Userとの違いまで5つのポイントで整理します。