# AI観測ラボ ブログ|AIと検索の変化を、観測し記録するブログ > AIクローラーの動向、AI検索時代のSEO対策、トラフィック変化の分析、AI時代のWeb戦略について発信しています。実験・一次データを重視した記事を発信するブログメディアです。 ## 固定ページ - [Blog toppage](https://www.blog.ai-kansoku.com/) - [AI対策スタートガイド|ロードマップで始める5ステップ](https://www.blog.ai-kansoku.com/start-guide/) - [観測結果ガイド](https://www.blog.ai-kansoku.com/diagnosis-guide/) - [AI検索・SEO用語集](https://www.blog.ai-kansoku.com/glossary/) - [プライバシーポリシー](https://www.blog.ai-kansoku.com/プライバシーポリシー/) ## 投稿 ### AIクローラー基礎 - [AIクローラーとは?引用されるサイト設計の基本と対策](https://www.blog.ai-kansoku.com/ai-crawler/) - [robots.txtでAIクローラーを制御する—コピペで使える設定例つき](https://www.blog.ai-kansoku.com/robots-txt-ai-crawler-guide/) - [llms.txtの書き方【テンプレコピペOK】ChatGPT・Perplexity対応の設置手順](https://www.blog.ai-kansoku.com/llms-txt-guide/) - [AGENTS.mdって何?llms.txtとどう違?を簡潔に整理してみた](https://www.blog.ai-kansoku.com/agents-md-guide/) - [JSON-LDとは?AIに読まれる構造化データの種類と実装方法【コピペOK】](https://www.blog.ai-kansoku.com/structured-data-guide/) - [AIに引用されるメタタグの条件—ChatGPT・Claude・Perplexityが参照する設定項目を整理する](https://www.blog.ai-kansoku.com/metatag-ai-crawler-guide/) - [AIはdivが苦手?セマンティックHTMLがAI引用の土台になる理由](https://www.blog.ai-kansoku.com/semantic-html-ai-guide/) - [AIはなぜMarkdownを好むのか|HTMLより効率的な理由](https://www.blog.ai-kansoku.com/markdown-ai-crawler-guide/) - [AIクローラーを拒否する前に知っておくべきこと](https://www.blog.ai-kansoku.com/ai-crawler-block-or-allow/) - [robots.txt誕生の歴史とAIクローラー時代の現実](https://www.blog.ai-kansoku.com/robots-txt-history-ai-crawler/) - [AIクローラーはIPで判定するな—User-Agentを使うべき理由](https://www.blog.ai-kansoku.com/ai-crawler-user-agent/) - [noindex・nofollowはAIクローラーに効くのか—robots.txtとの違いも含めて整理する](https://www.blog.ai-kansoku.com/noindex-nofollow-ai-crawler/) - [AIはHTMLよりMarkdownを好む—サイトにmdファイルを置くとどうなるか](https://www.blog.ai-kansoku.com/markdown-ai-server/) - [AIに引用されるサイト・されないサイトの境界線—10の実験でわかったこと](https://www.blog.ai-kansoku.com/ai-citation-boundary/) - [AIエージェントのUser-Agentまとめ—識別できる4種・Chromeに化ける3種](https://www.blog.ai-kansoku.com/ai-agent-user-agent-identification/) ### AIクローラー別解説 - [AIクローラーの種類と目的を比べてみた—実測データで見えた各ボットの動き方](https://www.blog.ai-kansoku.com/gptbot-oai-searchbot-robots-txt-guide/) - [ChatGPTに引用されるサイトの条件—GPTBotの実測データから見えた5つの特徴](https://www.blog.ai-kansoku.com/chatgpt-citation-guide/) - [ChatGPTはあなたの質問を勝手に増やして検索している【query fan-out解説】](https://www.blog.ai-kansoku.com/query-fan-out-chatgpt-search/) - [Claudeに引用されるサイトの作り方—3種類のボットの役割と今日からできる対策](https://www.blog.ai-kansoku.com/claude-citation-guide/) - [Claude-SearchBotとは?ClaudeBot・Claude-Userとの違いとrobots.txt設定](https://www.blog.ai-kansoku.com/claude-searchbot/) - [Perplexityにサイトを読まれるには—クロール実測でわかったこと](https://www.blog.ai-kansoku.com/perplexity-crawler-guide/) - [Metaの新AIクローラーがサイトに来ていた—実測データで正体を暴く](https://www.blog.ai-kansoku.com/meta-externalagent/) - [BingbotはCopilotのために毎日来ていた—7日間353件の実測データで見えた挙動](https://www.blog.ai-kansoku.com/bingbot-copilot-crawler/) - [ByteSpiderとは?世界最多リクエストのAIクローラーをログで調べた](https://www.blog.ai-kansoku.com/bytespider-crawler-guide/) - [OAI-SearchBotとは?GPTBotと何が違うのかをまとめました](https://www.blog.ai-kansoku.com/oai-searchbot-guide/) - [iOS 27でSiriが変わる—Applebotの動き方と今後の展開](https://www.blog.ai-kansoku.com/siri-ios27-applebot-future/) - [Google-Agentとは—Googlebotとは別の、ユーザーの代わりに動くフェッチャー](https://www.blog.ai-kansoku.com/google-agent-fetcher/) - [ChatGPT AgentはGA4に来る—でも識別できない。実測でわかったステルス挙動](https://www.blog.ai-kansoku.com/chatgpt-agent-ga4-stealth/) ### AI検索・ゼロクリック - [AI検索とは?「答えが返ってくる検索」があなたのサイトに起こすこと](https://www.blog.ai-kansoku.com/ai-search/) - [AEO・GEO・LLMO・AIO——結局どれが同じで何が違うのか](https://www.blog.ai-kansoku.com/aeo-geo-llmo-aio-difference/) - [AIOとは?ChatGPTに回答で引用されるための情報設計【SEOとの違いも解説】](https://www.blog.ai-kansoku.com/aio-ai-optimization/) - [検索の常識が変わる。GoogleはAIで答える側へ](https://www.blog.ai-kansoku.com/google-ai-search-shift/) - [いつの時代も早く動いた人が勝った—検索30年史とAIの今](https://www.blog.ai-kansoku.com/search-history-30years/) - [Z世代はGoogleをやめてAIで検索している—サイト運営者がいま知るべき検索行動の変化](https://www.blog.ai-kansoku.com/search-shift-genz/) - [検索1位なのにアクセスが来ない—AI Overview時代のゼロクリック問題と対策](https://www.blog.ai-kansoku.com/zero-click-search-guide/) - [GA4に出ない流入がある—ゼロクリック時代の計測の死角](https://www.blog.ai-kansoku.com/zero-click-ga4-blind-spot/) - [ゼロクリックで広告費が溶けている—AI Overview時代のGoogle広告の現実](https://www.blog.ai-kansoku.com/zero-click-google-ads-ai-overview/) - [記事を書いても引用枠はGoogleが取る—AI Modeの自己引用問題と、外部サイトの生存戦略](https://www.blog.ai-kansoku.com/google-ai-mode-self-citation/) - [SNSをいくら頑張ってもAIには引用されない—86,000件の分析でわかった現実](https://www.blog.ai-kansoku.com/sns-ai-citation-zero/) - [AIのハルシネーションとは?ChatGPT・Gemini・Perplexityで実測してわかった精度の差](https://www.blog.ai-kansoku.com/why-ai-makes-mistakes-chatgpt-perplexity-gemini/) - [ChatGPTに広告が入ると、AI引用の価値は下がるのか?](https://www.blog.ai-kansoku.com/chatgpt-ads-organic-citation/) ### AI引用・最適化 - [AIに引用されるサイト、基本設定8項目チェックリスト【実装記事つき】](https://www.blog.ai-kansoku.com/ai-site-settings-checklist/) - [E-E-A-TをAI時代に最適化する実践ガイド【既存サイト向け】](https://www.blog.ai-kansoku.com/eeat-ai-optimization-guide/) - [「なんとなく設定した」OGPがAIの評価を左右していた](https://www.blog.ai-kansoku.com/ogp-ai-optimization-guide/) - [AIはなぜそのページを引用しないのか—RAGが嫌うサイト設計の正体](https://www.blog.ai-kansoku.com/rag-good-source-site-design/) - [日本語データが少ない業界ほどAIに引用される理由](https://www.blog.ai-kansoku.com/japanese-content-ai-citation-advantage/) - [AIが客になる時代 — Agentic CommerceがECの常識を覆す理由](https://www.blog.ai-kansoku.com/agentic-commerce-ec-guide/) ### 技術・実装 - [計測してわかったAI時代のページ速度の現実【Core Web Vitals入門】](https://www.blog.ai-kansoku.com/core-web-vitals-ai-guide/) - [AIクローラーは深夜に動く—GPTBot・ClaudeBotの時間帯別クロール数を実測比較](https://www.blog.ai-kansoku.com/ai-crawler-timing-analysis/) - [コンテンツ改善したのにGA4が悪化?実は成功してるかもしれません【2026年最新】](https://www.blog.ai-kansoku.com/ga4-decline-ai-traffic/) - [WordPressのsitemapはAIクローラーに届いているか | 実測ログで見えた3つのパターン](https://www.blog.ai-kansoku.com/ai-crawler-sitemap-optimization/) - [サーバーログを見たら、AIクローラーが404を踏み続けていた](https://www.blog.ai-kansoku.com/crawler-404-guide/) - [GA4だけではAI流入は計測できない—サーバーログで補完する方法](https://www.blog.ai-kansoku.com/ga4-server-log-ai-traffic/) - [ノーコードツールで作ったサイト、AIに読まれていますか?—SPA問題とツール別の対応状況を調べた](https://www.blog.ai-kansoku.com/nocode-ai-crawler-spa/) - [Studioで作ったサイト、AIに読まれていますか?—ノーコードツール別の確認手順と代替策](https://www.blog.ai-kansoku.com/studio-nocode-ai-crawler/) - [モバイル対応はAI引用に関係するのか—サーバーログで実測した](https://www.blog.ai-kansoku.com/ai-crawler-mobile-viewport/) - [AIクローラーは何階層まで潜るのか—GPTBot・PerplexityBot・Googlebot実測比較](https://www.blog.ai-kansoku.com/ai-crawler-crawl-depth/) - [XもInstagramもAIに読まれていない—SNS4社のHTMLソースを比べてみた【AI実験室 #08】](https://www.blog.ai-kansoku.com/sns-ai-html-source-compare/) ### DCTAフレームワーク - [人がAIを使うとき、実は4つの目的がある](https://www.blog.ai-kansoku.com/dcta-model/) - [AIに発見される前に、人はどうやってAIにたどり着くのか|DCTAフロー・Discoverフェーズ解説](https://www.blog.ai-kansoku.com/dcta-discover-phase/) - [AIはどうやってあなたのサイトを比べて引用先を決めるのか|DCTAフロー・Compareフェーズ解説](https://www.blog.ai-kansoku.com/ai-citation-compare-phase/) - [AIはなぜあなたのサイトを信頼できると判断するのか|DCTAフロー Trustフェーズ](https://www.blog.ai-kansoku.com/dcta-trust-phase/) - [AIの推薦は「聞き方」で変わる|DCTAフロー Actフェーズ](https://www.blog.ai-kansoku.com/dcta-act-phase/) ### ツール・実践ガイド - [AI観測ラボのツールでできること—スコア診断からAI訪問の観測まで](https://www.blog.ai-kansoku.com/ai-kansoku-tool/) ### AI実験室 - [ノイズだらけのHTMLをAIに読ませたら、どこまで正確に理解できるのか?【AI実験室 #01】](https://www.blog.ai-kansoku.com/noisy-html-ai-reading-test/) - [12サイトのAI可視性を計測してわかったこと【AI実験室 #02】](https://www.blog.ai-kansoku.com/ai-visibility-score-research-02/) - [記事公開からAI引用まで何時間?GoogleとPerplexityを同時計測した【AI実験室 #03】](https://www.blog.ai-kansoku.com/ai-crawl-timing-research-03/) - [llms.txtを設置し7日間のサーバーログを見たが、AIクローラーは誰も読んでいなかった【AI実験室 #04】](https://www.blog.ai-kansoku.com/ai-lab-04-llms-txt-verification/) - [AmazonbotがREST APIを叩いていた—サーバーログで見えた新事実【AI実験室 #05】](https://www.blog.ai-kansoku.com/amazonbot-rest-api-crawler/) - [誰かがChatGPTにURLを貼った—サーバーログで見えた正体【AI実験室 #11】](https://www.blog.ai-kansoku.com/chatgpt-user-realtime-fetch/) - [XもInstagramもAIに読まれていない—SNS4社のHTMLソースを比べてみた【AI実験室 #08】](https://www.blog.ai-kansoku.com/sns-ai-html-source-compare/) - [AIに引用されたいのに、設定が抜けていた—10サイトのrobots metaを実際に調べてわかったこと【AI実験室 #06】](https://www.blog.ai-kansoku.com/robots-meta-ai-check/) - [タグをnoindexにしたら、GPTBotが来なくなった【AI実験室 #07】](https://www.blog.ai-kansoku.com/tag-noindex-gptbot-crawl-stopped/) - [公開2週間のサイト、AIは誤って紹介するのか?—4大AIで検証【AI実験室 #09】](https://www.blog.ai-kansoku.com/ai-new-site-recognition-experiment/) - [AIクローラーはHTMLしか読まない—ただApplebotだけは違った【AI実験室 #10】](https://www.blog.ai-kansoku.com/applebot-rendering-crawler/) - [AIクローラーは全員違う動きをしていた—4社の行動パターンをサーバーログで比較した結果【AI実験室 #13】](https://www.blog.ai-kansoku.com/ai-crawler-pattern-comparison/) - [XでシェアするたびにTwitterbotが大量に来ていた【AI実験室 #12】](https://www.blog.ai-kansoku.com/twitterbot-ogp-fetch-server-log/) - [XでシェアするたびにMetaのクローラーも来ていた—facebookexternalhitの正体【AI実験室 #14】](https://www.blog.ai-kansoku.com/facebookexternalhit/) ## カテゴリー - [AI最適化](https://www.blog.ai-kansoku.com/category/ai-optimization/) - [AI検索トレンド](https://www.blog.ai-kansoku.com/category/ai-search-trends/) - [実装・技術解説](https://www.blog.ai-kansoku.com/category/implementation/) - [AI実験室](https://www.blog.ai-kansoku.com/category/ai-lab/) ## Optional - [Sitemap index](https://www.blog.ai-kansoku.com/sitemap_index.xml) - [AI観測ラボ Markdown版](https://www.blog.ai-kansoku.com/index.md)