YandexBotとは—Yandexのクローラーの役割と大量クロールの実測ログを解説
YandexBotはロシアの検索エンジン Yandex が運営するクローラーです。AI観測ラボのサーバーログ実測をもとに、毎日の定点巡回パターン、72件の大規模クロール、robots.txtでの制御方法までわかりやすく解説します。
YandexBotはロシアの検索エンジン Yandex が運営するクローラーです。AI観測ラボのサーバーログ実測をもとに、毎日の定点巡回パターン、72件の大規模クロール、robots.txtでの制御方法までわかりやすく解説します。
traffic-adviceとは何か。サーバーログに記録された37件の404アクセスをもとに、Google(66.249.82.x)が /.well-known/traffic-advice を確認しに来る理由を考察。robots.txt・llms.txtとの違い、WordPressでの設置方法まで整理しました。
サーチコンソールに映らないOpenAIGPTBot・AnthropicClaudeBot・Perplexity AIPerplexityBotは毎日巡回しています。表示回数・CTR・平均順位の正しい読み方と、サーバーログを第二の計測器として使う考え方を、実測データをもとに解説します。
OAI-SearchBot・GPTBot・PerplexityBotがお問い合わせページを訪問していた実測ログを公開。プライバシーポリシーの設置、スパム対策、wp-jsonの公開設定の見直しなど、WordPressで最低限そろえたい3つの設定を解説します。
Yoast SEOでカテゴリーページのタイトル・メタディスクリプションを設定する手順と、タグページをnoindexにする方法を画面付きで解説。設定後に観測されたAIクローラーの巡回傾向の変化についても紹介します。
WordPressのパーマリンク設定は「投稿名」の1択です。初期設定の手順、記事ごとのスラッグの決め方、日本語URLを避ける理由、GoogleにもAIにも伝わるURL設計まで初心者向けに解説します。
GA4を導入したものの、数字が多くてどこを見ればいいかわからない—そんな初心者ブロガー向けに、最初に確認したい3つの数字をわかりやすく解説。GA4では見えにくいAI関連アクセスについても触れます。
大型連休前に確認したいWordPressのセキュリティ設定7項目を、初心者向けにわかりやすく解説。AI観測ラボのサーバーログで観測した不審なbotアクセスも交えながら、無料プラグインでできる基本対策を紹介します。