llms.txtにGPTBotが来た—2026年3月～6月の変化をログで追った
llms.txtはSEOに効くのか。
この問いに対しては、すでに多くの記事が「Google検索やAI Overviewsには不要」と説明しています。
ですが、AI観測ラボで見たいのは、そこではありません。
知りたいのは、AIクローラーが実際に /llms.txt を取りに来ているのかどうかです。
2026年3月の観測では、観測対象としていたAIクローラーによる /llms.txt 本体へのアクセスは確認できませんでした。ところが、2026年6月のログを確認したところ、GPTBotが /llms.txt を直接取得していました。
3月から6月にかけて、ログ上ではどのような変化があったのか。サーバーログをもとに整理します。
この記事でわかること｜📖：約5分
- 2026年3月時点でllms.txt本体へのAIクローラーアクセスが確認できなかった経緯
- 6月にGPTBotがllms.txt本体を直接取得していたログの詳細
- llms.txt関連記事に巡回してきたAIクローラーの種類と動き
- GPTBotがllms.txt取得後にindex.mdへアクセスしていた時系列
3月時点では、llms.txt本体へのアクセスは確認できなかった
AI観測ラボでは2026年1月末にllms.txtを設置しました。設置後、AIクローラーが実際に読みに来るのかを観測するため、サーバーログを7日間記録したのが2026年3月の実験です。
結果は「確認できなかった」でした。
GPTBot・ClaudeBot・PerplexityBotといった主要なAIクローラーは、llms.txtに関連する記事ページには来ていました。しかし、/llms.txt というファイル本体を直接取得したログは、7日間で1件も記録されませんでした。
当時の観測結果は以下の記事にまとめています。
→ llms.txtを設置し7日間のサーバーログを見たが、AIクローラーは誰も読んでいなかった【AI実験室 #04】
当時のログだけを見ると、「少なくともこの期間は、主要なAIクローラーがllms.txt本体を読みに来ていたとは言えない」という結論でした。
とはいえ、上記あくまで2026年3月時点の観測結果です。
では、それから約3ヶ月後の6月はどうだったのか。
6月にはGPTBotがllms.txt本体を取得していた
2026年6月のログでは、3月時点では確認できなかった /llms.txt 本体へのアクセスが確認できました。
| 日付 | クローラー | アクセス先 |
|---|---|---|
| 6月6日 | GPTBot | /llms.txt |
| 6月7日 | Baiduspider | /llms.txt |
| 6月8日 | Amazonbot | /llms.txt |
この中でも注目したいのが、6月6日のGPTBotによるアクセスです。GPTBotは /llms.txt を取得した直後に、別のMarkdownファイルである /index.md にもアクセスしていました。
その前に、llms.txt本体だけでなく関連記事への巡回状況も確認しておきます。
llms.txt関連記事にも複数のAIクローラーが来ていた
llms.txt本体だけでなく、AI観測ラボのllms.txt関連記事にも複数のAIクローラーが巡回していました。2026年6月4日〜11日のログから、AIクローラーと判断できるアクセスを抽出しました。
| 日付 | クローラー | アクセスしたURL |
|---|---|---|
| 6月5日 | ChatGPT-User | /llms-txt/ |
| 6月6日 | OAI-SearchBot | /llms-txt/ |
| 6月6日 | Applebot | /llms-txt-guide/ |
| 6月6日 | bingbot | /llms-txt/ |
| 6月7日 | CCBot | /llms-txt/ |
| 6月8日 | PerplexityBot | /llms-txt-guide/ |
| 6月9日 | bingbot | /ai-lab-04-llms-txt-verification/ |
| 6月10日 | ChatGPT-User | /llms-txt/ |
| 6月10日 | ClaudeBot | /llms-txt/ |
| 6月10日 | bingbot | /ai-lab-04-llms-txt-verification/ |
ChatGPT-User・OAI-SearchBot・ClaudeBotなど、生成AIやAI検索に関連するクローラーが、llms.txtの解説記事を取得していました。
ですが、記事ページへの巡回とllms.txt本体の取得は別の話です。記事を読みに来たからといって、llms.txtの内容が検索結果やAIの回答に反映されているとは言えません。
言えるのは、llms.txtというトピックに関連するページへ、複数のAI関連クローラーがアクセスしていたということです。
ただ、llms.txtが評価されたとは断定できない
ここまでのログで確認できたのは、以下の2点です。
- GPTBotが
/llms.txt本体を取得した - 複数のAIクローラーがllms.txt関連記事に巡回した
「取得した」と「評価した」は別の話です。
サーバーログで分かるのは、クローラーがファイルをリクエストしてサーバーが応答したという事実までです。取得したファイルの内容をどのように解釈しているのか、AI検索の回答に反映しているのか、robots.txtのように巡回動作を変えているのかは、ログからは判断できません。
llms.txtは、2024年にAnswer.AIのJeremy Howard氏が提案した仕様です。Webサイト側がLLM向けに重要な情報や関連リンクを整理して提示するためのファイルですが、現時点でWeb標準として正式に標準化されているわけではありません。
また、Google検索やAI Overviewsに表示されるために、llms.txtが必要だとは説明されていません。主要なAIシステムが一律でllms.txtに対応しているとも言えません。
なので、「GPTBotが取りに来た＝llms.txtが効いている」という結論は、現時点のログだけでは出せません。観測できたのは、あくまで「アクセスがあった」という事実です。
GPTBotはllms.txtの2秒後にindex.mdへアクセスしていた
「アクセスがあった!」だけでは納得できないですよね？今回のログで、もう一つ気になる動きがありました。
6月6日、GPTBotがllms.txtを取得した直後のアクセス順序を時系列で並べると、こうなっています。
12:39:27 GET /llms.txt
12:39:29 GET /index.md/llms.txt を取得してから、わずか2秒後に /index.md へアクセスしています。
AI観測ラボのllms.txtには、/index.md は記載していません。にもかかわらず、GPTBotは /llms.txt を取得した直後に /index.md へアクセスしていました。
※/index.md は、サイトの概要や構造をMarkdown形式でまとめたファイルです。llms.txtと同じく、AIがサイトの内容を把握しやすくするために設置するファイルの一つです。
もっと詳しくMarkdownファイルを知りたい方は下記より参照ください。
→ AIはHTMLよりMarkdownを好む—サイトにmdファイルを置くとどうなるか
上記の動きから、GPTBotがllms.txtやMarkdown形式の情報を確認する流れの中で、関連しそうなMarkdownファイルを探していた可能性はあります。
ログで分かるのは「取得した順序」まで。llms.txtの内容を解析して次のファイルを判断しているのか、単なる巡回パターンの一つなのかは断定できません。
今回言えるのは、3月の観測では確認できなかった /llms.txt 本体へのアクセスに加えて、その直後に /index.md へのアクセスも確認できた、ということです。
「テキスト（llms.txt）ファイルからテキスト（index.md）ファイル」に？記事にはいってないのか？と感じたのでもう少し掘り下げました。
GPTBotはllms.txtを読んだあとに記事へたどり着いたのか
llms.txtとindex.mdを続けて取得したGPTBot。その後、実際に記事本文を取りに来たのかが気になるところです。
6月6日のGPTBotのアクセスを、画像ファイルへのアクセスを除いて時系列で整理すると、全体の流れはこうなっていました。
08:55:04 /sitemap_index.xml（サイトマップへアクセス）
〜約3時間44分後〜
12:39:16 /claude/（記事本文を取得）
12:39:23 /duckassistbot/（記事本文を取得）
12:39:27 /llms.txt（llms.txtを取得）
12:39:29 /index.md（index.mdを取得）
12:39:36 /tag/duckassistbot/（タグページへアクセス）
12:39:36 /tag/duckduckgo/（タグページへアクセス）
結論からいうと、記事本文の取得はllms.txtより前でした。/claude/ と /duckassistbot/ は、どちらも /llms.txt より前に取得されています。
つまり、このログだけを見る限り、「llms.txtを読んでから記事本文を取りに来た」という順序ではありません。
むしろ、記事本文を巡回している流れの中で、途中で /llms.txt と /index.md も確認していた、という順序です。
これまでのllms.txtアクセスからのログの順序を全体で見ると、GPTBotの動きは大きく4つのフェーズに分かれていたように見えます。
まず①朝8時台にサイトマップへアクセスし、サイト全体のURL一覧を確認しています。約3時間44分後、/claude/ と /duckassistbot/ の②記事本文を取得します。その直後に ③/llms.txt と /index.md を確認し、最後に ④/tag/duckassistbot/ と /tag/duckduckgo/ のタグページへアクセスしています。
この順序だけを見ると、「①サイトマップを見る → ②記事本文を読む → ③テキストファイルでサイト情報を補う → ④タグページで関連コンテンツをたどる」という流れにも見えます。上記URL以外にも同様の取得パターンがみられました。
無論、ログの時系列から読み取れる範囲での仮説です。GPTBotが実際にどのような判断で /llms.txt や /index.md を取得したのかは、サーバーログだけでは分かりません。
もしllms.txtが「入口」ではなく「巡回中にサイト構造を補うファイル」として扱われることがあるなら、設置する意味は「読まれるかどうか」だけではなく、「AIクローラーがサイトを見に来たときに、どんな補助情報を渡せるか」という視点で考えた方がよさそうです。
まとめ：llms.txtは”効く”より先に、まず観測対象として面白くなってきた
今回のログから確認できたことを整理します。
- 3月時点では確認できなかった
/llms.txt本体へのアクセスが、6月にはGPTBotを含む複数のクローラーで確認できた - ChatGPT-User・OAI-SearchBot・ClaudeBot・Applebot・bingbot・PerplexityBot・CCBotなどがllms.txt関連記事に巡回していた
- GPTBotはllms.txtを取得した2秒後に
/index.mdへアクセスしていた - 記事本文の取得はllms.txtより前であり、llms.txtが巡回の出発点だったとは言えない
「llms.txtを設置すればAI検索に反映される」とは、今回のログからは言えません。新発見として、3月には見えていなかった動きが6月には確認できました。
今回のログを見る限り、llms.txtはAIクローラーを呼び込む入口というより、巡回の途中で確認される補助ファイルの一つだった可能性があります。
llms.txtがAIにどう扱われているかは、まだ分からない部分が多いです。だからこそ、設置して終わりではなく、実際に誰が読みに来ているのか、取得前後にどんなページへアクセスしているのかをログで見続ける価値があります。
AI観測ラボでは、今後も llms.txt へのアクセスとAIクローラーの巡回変化を継続して観測していきます。
→ llms.txtとは？robots.txtとの違いとAIクローラーへの影響
あなたのサイトは、
AIに見えていますか？
URLを入力するだけで30秒。8項目を自動診断し、優先度別の改善プランを提示します。完全無料・登録不要。
