GPTBotはサイトマップばかり読む？サーバーログで見えた記事本文に到達しにくい理由
GPTBotは記事本文よりも、サイトマップ・トップページ・タグページを中心に巡回していた。2026年4月のサーバーログから、WordPressサイトでGPTBotがどのようにページを発見しているのかを実測ベースで整理します。
AI観測ラボ
GPTBotとは—仕組み・設定方法・許可すべきかをログで確かめた
GPTBotはOpenAIのAI学習用クローラーです。2026年の実測ログをもとに、仕組み・robots.txt設定・許可すべきかの判断基準を整理しました。
Clarity AI Bot Activity設定と実測データ—GA4に出ないAIクローラーを可視化する
Microsoft Clarity AI Bot ActivityでAIクローラーを可視化する方法を解説。WordPressプラグインでの設定手順と、AI観測ラボの実測データ（全リクエストの7.09%がAIボット）を公開します。
Googlebotとは—各Googleクローラーの役割と7日間156件の実測データ
GooglebotはGoogle検索専用のクローラーです。Googlebot・Google-Extended・Google-Agent・GoogleOtherの役割の違いと、AI観測ラボのサーバーログ7日間・156件の実測データをもとにAIクローラーとの比較・robots.txt設定まで解説します。
Applebotとは—AppleのAIを支えるクローラーの仕組みと実際の動き
Applebotとは何かをわかりやすく解説。Siri・Spotlight・Apple Intelligenceとの関係、Applebot-Extendedとの違い、サーバーログで観測した実際の挙動、robots.txtでの制御方法まで実測データで整理。
Web Bot Authとは—AIクローラーの『なりすまし』を暗号で解決する新技術
Web Bot Authは、AIクローラーが暗号署名で本物かどうかを証明できる新しい仕組みです。robots.txtの限界を補う技術として、IETFで標準化が進んでいます。サイト運営者が今知っておくべき内容をわかりやすく解説します。
AIボットは2種類じゃなかった—サーバーログで見えた3つの役割
GPTBot・ClaudeBot・ChatGPT-Userなど7種類のAIボットをサーバーログで実測。「学習用・検索用」だけでは説明できない3つの役割を、時間帯とアクセス挙動から明らかにします。
IndexNowとは？Bingbotは何分で来る？実測3記事【最短3分】
IndexNow導入後、AI観測ラボではBingbotが最短3分・平均約20分でクロールに来ることをサーバーログで確認しました。WordPressでの設定手順と、Copilotへの露出タイミングにどう影響する可能性があるのかを実測データで整理します。
Bing Webmaster ToolsのAI Performanceとは—登録手順と4つの指標の読み方
Bing Webmaster ToolsのAI Performanceを使うとCopilotやBingのAI生成回答で自分のサイトが引用されているか確認できます。登録手順・Total Citations・Grounding Queriesなど4つの指標の読み方と改善アクションを解説します。
GPTBotはサイトマップを3回確認してからクロールしていた【AI実験室 #15】
index.mdを設置したらGPTBotは来るのか？サーバーログで48時間追った結果、サイトマップ3回確認→llms.txt→index.md取得という動線が確認できました。OAI-SearchBotとの同時並行クロールも実測データで解説します。