Observatory Log — Tag Archive

サーバーログ

「サーバーログ」タグの観測記録一覧です。

36 TOTAL LOGS
TAG / サーバーログ — J2026.0
robots.txt完全ガイド——AIクローラーをどう制御するか、実測ログで見えた設計の正解
LOG-001
実装・技術解説
2026.07.24 46 min

robots.txt完全ガイド【2026年版】156件の実測ログで分かったAIクローラーの正しい制御方法

robots.txtは書けば安心ではありません。156件の実…

Read Log →
GA4に出ないAI流入をサーバーログで可視化する方法を解説した記事のサムネイル
LOG-002
実装・技術解説
2026.07.09 20 min

GA4でAI流入はどこまで見える?サーバーログでChatGPT・AIクローラーを補完する方法

GA4ではAIアシスタント経由の流入を確認しやすくなりました…

Read Log →
OAI-AdsBotはどんなときに動く?
LOG-003
実装・技術解説
2026.07.09 17 min

OAI-AdsBotはどんなときに動く?ChatGPT広告クローラーの発動条件とログでの見分け方

ChatGPT広告をめぐる話題が、少しずつ現実味を帯びてきま…

Read Log →
Googleスパムアップデート観測記、2026年6月にサーバーログで見つかった偽AIクローラーのイメージ図
LOG-004
AI検索トレンド
2026.07.04 12 min

Googleスパムアップデート観測記|2026年6月、サーバーログに来た「偽AIクローラー」

Googleスパムアップデートの歴史と2026年6月の動きを…

Read Log →
GrokにURLを読ませた直後のサーバーログに複数IPからの並列アクセスが記録された実験結果を示すサムネイル
LOG-005
AI実験室
2026.06.30 17 min

Grokはサイトを読みに来るのか?ログに残った名乗らない並列アクセス

GrokにURLを読ませた直後、サーバーログに何が残るのかを…

Read Log →
ChatGPT-Userを名乗る偽クローラーをログで発見した記事のサムネイル
LOG-006
AI実験室
2026.06.25 10 min

ChatGPT-Userを名乗る偽クローラーをログで発見した|本物との見分け方

サーバーログにChatGPT-Userが出ても本物とは限りま…

Read Log →
Claude-Userとは何かを解説する記事のサムネイル
LOG-007
AI実験室
2026.06.25 17 min

Claude-Userとは?サーバーログに残る「誰かがClaudeに聞いた」アクセスの正体

Claude-Userとは、Claude利用中にWebページ…

Read Log →
llms.txtにGPTBotが来るようになった—2026年3月と6月のサーバーログ比較を示すサムネイル
LOG-008
AI実験室
2026.06.15 13 min

llms.txtにGPTBotが来た—2026年3月~6月の変化をログで追った

2026年3月には確認できなかったllms.txt本体へのア…

Read Log →
Baiduspiderは暴走型じゃなかった記事サムネ
LOG-009
実装・技術解説
2026.06.13 16 min

Baiduspiderって何してるの?—292件のログで見えた通常版とrender版の動き

Baiduspiderの通常版82件とBaiduspider…

Read Log →
タグページがAIクローラーの目次として機能する可能性をPerplexityBotの実測ログで解説した記事のサムネイル
LOG-010
実装・技術解説
2026.06.13 12 min

AIは記事だけを読んでいなかった—27秒・10URLで見えた「広く→狭く」の読み方

PerplexityBotが27秒で10URLを連続取得した…

Read Log →
meta-webindexerとはMeta AI検索に関係するクローラーであることを解説する記事のサムネイル
LOG-011
実装・技術解説
2026.06.11 11 min

meta-webindexerとは?Meta AI検索に関係するクローラーの正体と動き

meta-webindexerとは何か。Meta AI検索に…

Read Log →
Slackbot・Slack-ImgProxy・Slackbot-LinkExpandingのアクセスログ実測204件を解説する記事のサムネイル
LOG-012
AI実験室
2026.06.10 11 min

Slackbotとは?Slack-ImgProxyのアクセスログが急増した理由を調べてみた

サーバーログに現れたSlackbot・Slack-ImgPr…

Read Log →
Googleのコアアップデートが終わった日、サイトの裏側では何が起きていたのか記事サムネ
LOG-013
AI検索トレンド
2026.06.03 8 min

Googleのコアアップデートが終わった日、サイトの裏側では何が起きていたのか

2026年6月2日のGoogleコアアップデート完了日に、A…

Read Log →
AmazobotをAIクローラーの種類ごとに解説した記事のサムネイル画像
LOG-014
実装・技術解説
2026.05.21 13 min

Amazonbotとは—Alexaを支える3種類のクローラーと実測ログで見えた行動

AmazonbotはAlexa向けクローラーというだけではあ…

Read Log →
ClaudeBotとは——AnthropicのAIクローラーの役割と巡回の仕組みを解説するサムネイル
LOG-015
実装・技術解説
2026.05.19 14 min

ClaudeBotとは—Anthropicの3つのボットと実測ログで見えた巡回の仕組み

Anthropicのクローラーは3種類あり、それぞれ役割が異…

Read Log →
サーチコンソールで見えるもの見えないもの|AIクローラー時代に確認したい3つの指標のサムネイル画像
LOG-016
実践ガイド・ツール活用
2026.05.06 11 min

サーチコンソールで見えるもの、見えないもの|AIクローラー時代に確認したい3つの指標

サーチコンソールに映らないOpenAIGPTBot・Anth…

Read Log →
謎のクローラーAI-Observatory/1.0の巡回をログで追った【AI実験室 #18】
LOG-017
AI実験室
2026.04.28 13 min

また新しいAIクローラー?—AI-Observatory/1.0の奇妙な巡回をログで追った【AI実験室 #18】

サーバーログに見慣れないUser-Agentが現れました。1…

Read Log →
robots.txt・sitemap・llms.txtの3つのファイルアイコンが並んだサムネイル画像
LOG-018
実践ガイド・ツール活用
2026.04.27 7 min

AIクローラーが一番アクセスするのはどこか—ログで見えた3つの入口と確認方法

複数サイトのサーバーログを集計したところ、AIクローラーのア…

Read Log →
GPTBotはなぜ記事本文を読まないのか
LOG-019
実装・技術解説
2026.04.26 12 min

GPTBotはサイトマップばかり読む?サーバーログで見えた記事本文に到達しにくい理由

GPTBotは記事本文よりも、サイトマップ・トップページ・タ…

Read Log →
GPTBotとは—仕組み・設定方法・許可すべきかをログで確かめた
LOG-020
実装・技術解説
2026.04.24 16 min

GPTBotとは—仕組み・設定方法・許可すべきかをログで確かめた

GPTBotはOpenAIのAI学習用クローラーです。202…

Read Log →
clarity-ai-bot-activity-hero
LOG-021
実践ガイド・ツール活用
2026.04.24 13 min

Clarity AI Bot Activity設定と実測データ—GA4に出ないAIクローラーを可視化する

Microsoft Clarity AI Bot Activ…

Read Log →
AIボットは2種類じゃなかった—学習用・検索インデックス用・人間由来フェッチの3種類をサーバーログで確認したことを示すサムネイル画像
LOG-022
実装・技術解説
2026.04.21 9 min

AIボットは2種類じゃなかった—サーバーログで見えた3つの役割

GPTBot・ClaudeBot・ChatGPT-Userな…

Read Log →
AIエージェントの識別可否をUser-Agentで分類した図解——識別できる4種類と識別できない3種類
LOG-023
実装・技術解説
2026.04.14 13 min

AIエージェントのUser-Agentまとめ—識別できる4種・Chromeに化ける3種

Google-Agentが3/20追加。ログで拾えるAIエー…

Read Log →
AI実験室14回目の記事サムネイル。facebookexternalhitの正体をサーバーログで調べた結果をまとめた記事。
LOG-024
AI実験室
2026.04.13 14 min

XでシェアするたびにMetaのクローラーも来ていた—facebookexternalhitの正体【AI実験室 #14】

サーバーログに記録されるfacebookexternalhi…

Read Log →
ChatGPT AgentはGA4に来る—でも識別できない
LOG-025
実装・技術解説
2026.04.09 22 min

ChatGPT AgentはGA4に来る—でも識別できない。実測でわかったステルス挙動

ChatGPT AgentはJSを実行しGA4にイベントが届…

Read Log →
BingbotはCopilotのために毎日来ていた——7日間353件の実測データで見えた挙動のサムネイル画像
LOG-026
実装・技術解説
2026.04.09 14 min

BingbotはCopilotのために毎日来ていた—7日間353件の実測データで見えた挙動

BingbotはGPTBot・ClaudeBotと異なり、2…

Read Log →
XでシェアするたびにTwitterbotが大量に来ていた
LOG-027
AI実験室
2026.04.07 11 min

XでシェアするたびにTwitterbotが大量に来ていた【AI実験室 #12】

Xに記事をシェアした直後、サーバーログに見慣れないアクセスが…

Read Log →
AIクローラーは全員違う動きをしていた——4社の行動パターンをサーバーログで比較した結果
LOG-028
AI実験室
2026.04.06 17 min

AIクローラーは全員違う動きをしていた—4社の行動パターンをサーバーログで比較した結果【AI実験室 #13】

AIクローラーは、どのサイトにも同じように来ているわけではあ…

Read Log →
AIクローラーのUser-Agentにモバイル文字列が含まれないことを示すサムネイル画像
LOG-029
実装・技術解説
2026.04.03 15 min

モバイル対応はAI引用に関係するのか—サーバーログで実測した

「モバイル対応はSEOに必須」——昔口酸っぱく言われていたマ…

Read Log →
MetaのAIクローラー「Meta-ExternalAgent」の実測データ解説記事のサムネイル
LOG-030
実装・技術解説
2026.03.29 15 min

Metaの新AIクローラーがサイトに来ていた—実測データで正体を暴く

MetaのAI学習クローラー「Meta-ExternalAg…

Read Log →
タグをnoindexにしたらGPTBotが来なくなった実験結果を示すAI実験室#07のサムネイル
LOG-031
AI実験室
2026.03.28 9 min

タグをnoindexにしたら、GPTBotが来なくなった【AI実験室 #07】

「タグページはnoindexにするのが正解」——そう信じてあ…

Read Log →
AIクローラーの判定にIPではなくUser-Agentを使うべき理由を解説する図
LOG-032
実装・技術解説
2026.03.25 9 min

AIクローラーはIPで判定するな—User-Agentを使うべき理由

AIクローラーの判定にIPアドレスを使うのは構造的に無理があ…

Read Log →
誰かがChatGPTにURLを貼った
LOG-033
AI実験室
2026.03.24 11 min

誰かがChatGPTにURLを貼った—サーバーログで見えた正体【AI実験室 #11】

サーバーログを眺めていたら、見慣れないユーザーエージェント(…

Read Log →
AI実験室#05サムネイル:AmazonbotがREST APIを叩いていた
LOG-034
AI実験室
2026.03.23 15 min

AmazonbotがREST APIを叩いていた—サーバーログで見えた新事実【AI実験室 #05】

サーバーログを眺めていたら、見慣れないアクセスが目に入りまし…

Read Log →
サーバーログで見つかったクローラーの404問題と修正フロー(WordPress実践ガイド)
LOG-035
実装・技術解説
2026.03.14 14 min

サーバーログを見たら、AIクローラーが404を踏み続けていた

サーバーログを見て、驚いた。 クローラーが404を踏み続けて…

Read Log →
AI実験室#04サムネイル:llms.txtは誰も読んでいなかった
LOG-036
AI実験室
2026.03.12 18 min

llms.txtを設置し7日間のサーバーログを見たが、AIクローラーは誰も読んでいなかった【AI実験室 #04】

冨島 基宏 Motohiro Tomishima AI実験室…

Read Log →