サーバーログ
「サーバーログ」タグの観測記録一覧です。
robots.txt完全ガイド【2026年版】156件の実測ログで分かったAIクローラーの正しい制御方法
robots.txtは書けば安心ではありません。156件の実…
GA4でAI流入はどこまで見える?サーバーログでChatGPT・AIクローラーを補完する方法
GA4ではAIアシスタント経由の流入を確認しやすくなりました…
OAI-AdsBotはどんなときに動く?ChatGPT広告クローラーの発動条件とログでの見分け方
ChatGPT広告をめぐる話題が、少しずつ現実味を帯びてきま…
Googleスパムアップデート観測記|2026年6月、サーバーログに来た「偽AIクローラー」
Googleスパムアップデートの歴史と2026年6月の動きを…
Grokはサイトを読みに来るのか?ログに残った名乗らない並列アクセス
GrokにURLを読ませた直後、サーバーログに何が残るのかを…
ChatGPT-Userを名乗る偽クローラーをログで発見した|本物との見分け方
サーバーログにChatGPT-Userが出ても本物とは限りま…
Claude-Userとは?サーバーログに残る「誰かがClaudeに聞いた」アクセスの正体
Claude-Userとは、Claude利用中にWebページ…
llms.txtにGPTBotが来た—2026年3月~6月の変化をログで追った
2026年3月には確認できなかったllms.txt本体へのア…
Baiduspiderって何してるの?—292件のログで見えた通常版とrender版の動き
Baiduspiderの通常版82件とBaiduspider…
AIは記事だけを読んでいなかった—27秒・10URLで見えた「広く→狭く」の読み方
PerplexityBotが27秒で10URLを連続取得した…
meta-webindexerとは?Meta AI検索に関係するクローラーの正体と動き
meta-webindexerとは何か。Meta AI検索に…
Slackbotとは?Slack-ImgProxyのアクセスログが急増した理由を調べてみた
サーバーログに現れたSlackbot・Slack-ImgPr…
Googleのコアアップデートが終わった日、サイトの裏側では何が起きていたのか
2026年6月2日のGoogleコアアップデート完了日に、A…
Amazonbotとは—Alexaを支える3種類のクローラーと実測ログで見えた行動
AmazonbotはAlexa向けクローラーというだけではあ…
ClaudeBotとは—Anthropicの3つのボットと実測ログで見えた巡回の仕組み
Anthropicのクローラーは3種類あり、それぞれ役割が異…
サーチコンソールで見えるもの、見えないもの|AIクローラー時代に確認したい3つの指標
サーチコンソールに映らないOpenAIGPTBot・Anth…
また新しいAIクローラー?—AI-Observatory/1.0の奇妙な巡回をログで追った【AI実験室 #18】
サーバーログに見慣れないUser-Agentが現れました。1…
AIクローラーが一番アクセスするのはどこか—ログで見えた3つの入口と確認方法
複数サイトのサーバーログを集計したところ、AIクローラーのア…
GPTBotはサイトマップばかり読む?サーバーログで見えた記事本文に到達しにくい理由
GPTBotは記事本文よりも、サイトマップ・トップページ・タ…
GPTBotとは—仕組み・設定方法・許可すべきかをログで確かめた
GPTBotはOpenAIのAI学習用クローラーです。202…
Clarity AI Bot Activity設定と実測データ—GA4に出ないAIクローラーを可視化する
Microsoft Clarity AI Bot Activ…
AIボットは2種類じゃなかった—サーバーログで見えた3つの役割
GPTBot・ClaudeBot・ChatGPT-Userな…
AIエージェントのUser-Agentまとめ—識別できる4種・Chromeに化ける3種
Google-Agentが3/20追加。ログで拾えるAIエー…
XでシェアするたびにMetaのクローラーも来ていた—facebookexternalhitの正体【AI実験室 #14】
サーバーログに記録されるfacebookexternalhi…
ChatGPT AgentはGA4に来る—でも識別できない。実測でわかったステルス挙動
ChatGPT AgentはJSを実行しGA4にイベントが届…
BingbotはCopilotのために毎日来ていた—7日間353件の実測データで見えた挙動
BingbotはGPTBot・ClaudeBotと異なり、2…
XでシェアするたびにTwitterbotが大量に来ていた【AI実験室 #12】
Xに記事をシェアした直後、サーバーログに見慣れないアクセスが…
AIクローラーは全員違う動きをしていた—4社の行動パターンをサーバーログで比較した結果【AI実験室 #13】
AIクローラーは、どのサイトにも同じように来ているわけではあ…
モバイル対応はAI引用に関係するのか—サーバーログで実測した
「モバイル対応はSEOに必須」——昔口酸っぱく言われていたマ…
Metaの新AIクローラーがサイトに来ていた—実測データで正体を暴く
MetaのAI学習クローラー「Meta-ExternalAg…
タグをnoindexにしたら、GPTBotが来なくなった【AI実験室 #07】
「タグページはnoindexにするのが正解」——そう信じてあ…
AIクローラーはIPで判定するな—User-Agentを使うべき理由
AIクローラーの判定にIPアドレスを使うのは構造的に無理があ…
誰かがChatGPTにURLを貼った—サーバーログで見えた正体【AI実験室 #11】
サーバーログを眺めていたら、見慣れないユーザーエージェント(…
AmazonbotがREST APIを叩いていた—サーバーログで見えた新事実【AI実験室 #05】
サーバーログを眺めていたら、見慣れないアクセスが目に入りまし…
サーバーログを見たら、AIクローラーが404を踏み続けていた
サーバーログを見て、驚いた。 クローラーが404を踏み続けて…
llms.txtを設置し7日間のサーバーログを見たが、AIクローラーは誰も読んでいなかった【AI実験室 #04】
冨島 基宏 Motohiro Tomishima AI実験室…