AIクローラー観測レポート 2026年8月｜ClaudeBotのバーストと静かに変わるAI検索
2026年8月、AI検索をめぐる変化は検索結果の表面だけではありませんでした。
Googleはスパムアップデートを実施し、AI ModeのバックエンドモデルはGemini 3.7 Flashへ静かに切り替わりました。しかし、サーバーログに目を向けると、別の変化も見えてきます。ClaudeBotは特定の日に62件・66件と急増し、ChatGPT-Userは月間1,920件という観測史上最多水準を記録しました。
AI観測ラボが8月に注目するのは、スパムアップデートの内容そのものではありません。ログに現れたAIクローラーの動きと、その裏で静かに変わっていったAI検索の中身。その2つが同時に動いた月として、2026年8月を記録します。
この記事でわかること｜📖：約5分
- ClaudeBotは「眠って、目覚める」——8月に確認されたバーストの記録
- Gemini 3.7 FlashとAI Modeの静かな変化
- AI ModeのバックエンドモデルがGemini 3.7 Flashに静かに入れ替わった意味と、サイト運営者が知っておくべき変化
- Gemini-Deep-Researchの初観測など、8月に新たに姿を見せたAIクローラーの動き
- AIクローラーには正常なページを見せ、人間には別ページを表示する新たなマルウェアの仕組みとWordPressサイトへの影響
ClaudeBotは「眠って、目覚める」——8月に確認されたバーストの記録
AIクローラーは毎日コンスタントに来るものだと思われがちです。ところがClaudeBotは違う動き方をします。しばらく完全に姿を消したあと、突然大量のアクセスを記録する——AI観測ラボではこの現象を「バースト」と呼んでいます。
8月11日から8月23日まで、ClaudeBotのアクセスはゼロでした。13日間、1件も記録されていません。ところが8月24日に62件、翌25日に66件と突然急増し、26日以降は1日11〜15件程度の定常クロールに落ち着きました。7月末にも同じパターンが確認されており、「一定期間ゼロが続いたあとにバーストが起きる」という動きが2か月続けて観測されました。
バースト当日のアクセス先を確認すると、サイトマップ・タグページ・各記事と、サイト全体を広くスキャンしています。特定の記事を狙ったわけではなく、サイト全体を把握するような動きでした。26日以降はアクセス頻度が落ちて定常クロールへ移行しており、「まず全体を広く見てから、継続的に読む」という流れがログから読み取れます。
ClaudeBotはAnthropicが運営するクローラーで、AIモデルの開発・学習に利用される可能性のあるWebコンテンツを収集します。同じAnthropic系でも、検索結果の品質向上を目的にWebを巡回するClaude-SearchBotや、ユーザーの質問をきっかけにWebコンテンツを取得するClaude-Userとは役割が異なります。
Googleスパムアップデートと時系列が重なった
今回のバーストで記録しておきたいのは、前後の時系列です。Googleは8月18日にスパムアップデートを開始し、8月21日に完了しました。ClaudeBotのバーストはその3日後です。同じタイミングで、ChatGPT-Userのアクセス数も8月22日〜23日にかけて急落しています。
| 日付 | 出来事 |
|---|---|
| 8月18日 | Googleスパムアップデート開始 |
| 8月21日 | Googleスパムアップデート完了 |
| 8月22日〜23日 | ChatGPT-Userが41件→16件に急落 |
| 8月24日〜25日 | ClaudeBotが62件・66件バースト |
GoogleのアップデートとClaudeBotは独立したシステムで動いており、直接の因果関係を示す根拠はありません。ただし、スパムアップデートの完了・ChatGPT-Userの急落・ClaudeBotのバーストが数日の間に集中したこと自体は、観測事実として記録します。
AI ModeにGemini 3.7 Flashが追加——検索結果を作る「モデル」を選ぶ時代へ
2026年8月、Googleの検索結果に大きな見た目の変化はありませんでした。しかしAI Modeの内側では、検索の仕組みそのものに関わる変化が起きています。
Googleは8月13日にGemini 3.7 Flashを発表しました。その翌14日、Google AI Pro・Ultraのサブスクライバーを対象に、英語版AI ModeでGemini 3.7 Flashを選択できるようになりました。展開はグローバルですが、現時点では有料プラン・英語環境が対象です。
ここで重要なのは、AI Modeの既定モデルがすべてGemini 3.7 Flashへ置き換わったわけではない点です。Gemini 3.7 Flashはモデル選択肢のひとつとして追加され、ユーザーがAI Mode上で選べるようになりました。
AI Modeとは、Google検索上で会話形式の質問を続けながら情報を調べられるAI検索機能です。2026年5月には月間アクティブユーザーが10億人を突破しており、すでに一部の利用者だけが使う実験的な検索機能とは言いにくい規模まで成長しています。
サイト運営者にとって注目したいのは、同じGoogle検索でも、どのモデルが回答を生成するかによって、回答内容や参照されるページが変わる可能性があることです。
GoogleはGemini 3.7 Flashについて、指示への追従やユーザーの意図理解が向上していると説明しています。検索順位そのものだけではなく、「質問をどう理解し、どの情報を使って回答を組み立てるか」という生成側の性能も、AI検索では無視できない要素になっています。
これは従来のSEOとは少し違う変化です。Google検索で同じ順位を維持していても、AI Modeで使用されるモデルが異なれば、生成される回答や参照される情報源まで同じになるとは限りません。
💡 サイト運営者が知っておくべきこと
2026年8月31日、GoogleはSearch Consoleで生成AI検索への表示状況を確認できる新しいInsightsを世界展開しました。AI OverviewsやAI Modeなどで、どのページがAI回答に表示されたか、インプレッション数や国などを確認できるようになっています。一方で、モデルごとの回答や引用元の違いまですべて把握できるわけではありません。今後は従来の検索順位だけでなく、AI検索上で自社ページがどう使われているかを見る必要性も高まりそうです。
5月のGoogle I/O以降、AI Modeは機能追加だけでなく、回答を生成するモデルそのものを選択できる段階まで進みました。Google検索は「どのページが上位に並ぶか」だけを見るものから、「どのモデルが、どの情報を使って回答を作るか」まで観測する必要のある検索へ変わり始めています。
AI Mode全体の変化については、Googleの優先ソースの記事でも継続観測しています。
2026年3回目のスパムアップデート——8月18日開始、21日完了
Googleは2026年8月18日、スパムアップデートの開始をSearch Status Dashboardで公式に発表しました。ロールアウトは2日16時間で完了し、8月21日に終了しています。全言語・全地域が対象で、今回のアップデートに合わせた新しいスパムポリシーの発表はありませんでした。
スパムアップデートとは、Googleが検索スパムを検出する自動システムを大きく改善するアップデートです。Googleのスパムポリシーに違反していると判断されたサイトやページは、検索順位が下がったり、検索結果に表示されなくなったりする可能性があります。検索結果全体の品質を幅広く再評価するコアアップデートとは、役割が異なります。
8月の検索順位を見るうえでもうひとつ記録しておきたいのが、公式アップデート前から変動が続いていた点です。8月1日〜3日、5日〜6日、12日〜13日には、複数のランクトラッキングツールで通常より大きな順位変動が観測されました。Googleはこれらについて公式なアップデートとは確認していないため、8月18日に始まったスパムアップデートとの関係は不明です。
AI観測ラボのサーバーログでは、スパムアップデート完了後の8月22日〜23日にChatGPT-Userのアクセスが急落し、続く24日〜25日にはClaudeBotのバーストが発生しました。Googleのアップデートとの因果関係は確認できていませんが、複数のAIクローラーが同じ数日の間に動きを変えたこと自体は、観測事実として記録しておきます。
💡 8月の順位変動を読むときの注意点
8月18日〜21日はスパムアップデートのロールアウト期間です。この期間だけを切り出して順位や流入の増減を判断するのではなく、Search ConsoleやGA4ではアップデート前・ロールアウト中・完了後を分けて推移を見るのが安全です。特に単日や数日間の変動だけで原因を決めつけず、その後も変化が継続しているかを確認する必要があります。
Gemini-Deep-Researchを初観測——Deep Researchのアクセスがログに現れた
2026年8月7日、AI観測ラボのサーバーログに、これまで確認していなかったUser-Agentが1件記録されました。
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Gemini-Deep-Research; +https://gemini.google/overview/deep-research/) Chrome/135.0.0.0 Safari/537.36Gemini-Deep-Researchです。AI観測ラボでは今回が初観測となります。
Gemini Deep Researchとは、ユーザーが調べたいテーマを入力すると、AIが調査計画を立て、複数のWebサイトを検索・参照しながら情報を集め、最終的にレポートとしてまとめるGeminiのエージェント機能です。Googleによると、1回の調査で数百ものWebサイトを参照することもあります。
通常の検索エンジンクローラーが継続的にWebを巡回するのとは性格が異なり、Gemini-Deep-Researchは、ユーザーがDeep Researchを実行した調査セッションに伴ってWebページを取得しているとみられます。その意味では、ChatGPTのユーザー操作をきっかけにアクセスするChatGPT-Userに近い「ユーザー起点」のアクセスとして注目しています。
新しいUser-Agentが実際のサーバーログに現れたこと自体は記録しておく価値があり、ChatGPT-Userも観測開始当初は少数でした。Gemini-Deep-Researchについても、今後アクセスが継続するのか、どのようなページを取得するのかを引き続き観測します。
💡 Gemini-Deep-Researchとrobots.txtの関係
現時点で、Google公式のクローラー向け資料にはGemini-Deep-Research専用のrobots.txt設定や制御方法について明確な案内を確認できていません。User-Agent自体はログで確認できましたが、robots.txtをどのように扱うのかについては断定せず、今後のGoogle公式情報と実際のアクセス挙動を継続して確認します。
AIクローラーには「正常なページ」を見せる——マルウェア側もAIを識別し始めた
AIクローラーを観測するうえで、もうひとつ知っておきたい変化があります。それは、Webサイトを攻撃するマルウェア側もAIクローラーを識別し始めていることです。
WordPressサイトなどへの感染が確認されている「Parrot TDS」と呼ばれるマルウェアキャンペーンでは、近年の亜種がChatGPTやGoogle GeminiなどのAIクローラーを検出し、悪意のある動作を見せずに「クリーンなコンテンツ」を返すことが報告されています。
アクセスしてきた相手によって、見せるものを変える
Parrot TDSは「Traffic Direction System（TDS）」の名前どおり、アクセスしてきた相手を判別し、その条件によって異なるコンテンツや転送先を返します。
| アクセスしてきた相手 | 確認されている動き |
|---|---|
| 検索エンジンのクローラー | 検索順位を操作するためのスパムコンテンツを表示する場合がある |
| AIクローラー | 悪意のある動作を隠し、クリーンなコンテンツを返す |
| 人間のユーザー | フィッシングページや偽ショップなどへ誘導する場合がある |
| セキュリティスキャナー・サイト管理者 | 正常なサイトに見える場合がある |
つまり、同じURLにアクセスしていても、相手によって見えているページが同じとは限りません。サイト管理者やセキュリティツールには正常に見える一方で、一般ユーザーには悪意のあるページを表示することで、感染を発見しにくくする「クローキング」と呼ばれる仕組みです。
AIクローラー観測にとって何を意味するか
AI観測の視点で興味深いのは、「AIクローラーが取得したページ」と「人間が実際に見たページ」が一致しないケースが現実に存在することです。
たとえるとChatGPT-UserやGemini系のクローラーがあるURLへアクセスしたことはサーバーログから確認できます。しかしながら、ログだけでは、そのアクセスに対して実際にどのコンテンツが返されたのか、同じURLを訪れた人間にも同一のページが表示されていたのかまでは判断できません。
この事象は、AI検索やAI回答における情報源の信頼性を考えるうえでも無視できない問題です。AIクローラーを識別して別のコンテンツを返す技術が悪用されれば、「AIから見えるWeb」と「人間から見えるWeb」が異なる状態が生まれます。
AI観測ラボのサーバーログでも、8月にはセキュリティスキャナーとみられるアクセスが複数確認されています。.env.bakやterraform.tfstateといった機密ファイルを探索するリクエストも記録されており、こうしたスキャン自体は定常的に発生しています。AIクローラーを観測する一方で、サイト基盤そのもののセキュリティも継続して確認する必要があります。
💡 自分のサイトを確認するときのポイント
Parrot TDSのようなクローキング型マルウェアは、管理者がブラウザでサイトを確認するだけでは発見できない場合があります。WordPressのコア・テーマ・プラグインのファイル整合性確認、不審なJavaScriptやPHPファイルの有無、管理者アカウント、サーバーログなどを含めて確認することが重要です。管理画面上で正常に見えることだけを、感染していない根拠にはできません。
7月に取り上げたwp2shell脆弱性に続き、AI観測ラボではAIクローラーそのものだけでなく、それらを取り巻くWebサイト側のセキュリティ変化も月次で記録していきます。
まとめ：8月は「中身と動き方が変わった月」だった
2026年8月は、検索順位の変動だけでは捉えきれない変化が重なった月でした。Googleはスパムアップデートを実施し、AI ModeにはGemini 3.7 Flashが新たなモデルの選択肢として加わりました。その一方、サーバーログではClaudeBotが13日間の沈黙後に突然バーストし、Gemini-Deep-Researchという新しいUser-Agentも初めて姿を見せました。検索結果の表面だけを見ていては気づきにくい変化が、8月にはいくつも起きています。
- ✓ ClaudeBotが13日間ゼロのあと、8月24日〜25日に急増するバーストが発生。7月末に続き、2か月連続で同様のパターンが確認された
- ✓ Googleスパムアップデートの完了・ChatGPT-Userの急落・ClaudeBotのバーストが数日の間に集中した。因果関係は確認できないが、観測事実として記録した
- ✓ AI ModeにGemini 3.7 Flashが選択可能なモデルとして追加された。ランキングシステムの変更がなくても、回答を生成するモデルによって参照される情報が変わる可能性がある
- ✓ Gemini-Deep-ResearchのUser-Agentを初観測。現時点では1件のみで傾向を論じる段階ではないが、新たなユーザー起点アクセスとして記録した
- ✓ Parrot TDSがAIクローラーを識別し、クリーンなコンテンツを返す動きが報告されている。「AIから見えるWeb」と「人間から見えるWeb」が一致しないケースが現実に存在する
このうち、AI観測ラボのサーバーログで直接確認できたのは、ClaudeBotのバースト、ChatGPT-Userの急落、Gemini-Deep-Researchの初観測です。Gemini 3.7 FlashやParrot TDSはログの外側で起きている変化ですが、AIクローラーやAI検索の動きを観測するうえで無視できない動きとしてあわせて記録しました。
9月は、ClaudeBotのバーストパターンが3か月連続で繰り返されるのか、Gemini-Deep-Researchのアクセスが継続するのかを中心に観測します。単発の変化なのか、それとも新しい動き方として定着するのか。引き続きサーバーログから追っていきます。
関連記事
あなたのサイトは、
AIに見えていますか？
URLを入力するだけで30秒。8項目を自動診断し、優先度別の改善プランを提示します。完全無料・登録不要。
