ChatGPT と Gemini に 20 件のリンクを貼り付けました。どちらの検索クローラーも 1 件もたどりませんでした

予想していたこと

近道があるかもしれないと考えていました。ユーザーに頼まれて ChatGPT がページを開けば、OpenAI はその URL を知ることになります。そうであれば、同社の検索クローラーである OAI-SearchBot が後から訪れるかもしれません。Gemini と Googlebot も同様です。これが成り立つなら、何人かがアプリにリンクを貼り付けるだけで、ページがクローラーの地図に載ることになります。

最初の実行の前に、シナリオと合否の閾値を書き留めて固定しました。数字を見た後でゴールを動かせないようにするためです。

朝の実行

pw.migurei.ai に新しいパスを作成しました。どのページからもリンクされておらず、サイトマップにも含まれていません。東京時間の 10:20 から 10:50 ごろにかけて、ラボのマシンで 24 セッションを実行しました。ChatGPT 用に 10 パス、Gemini 用に 10 パス、対照として DeepSeek 用に 4 パスです。さらにいくつかのパスは、同じく対照として、どこにも貼り付けませんでした。

どのアプリも実際にページを取得しました。ログには 24 件のリクエストがすべて残っており、それぞれにセッションのマーカーが付いています。

それから 3 日間待ちました。

誰も来なかった

観測期間は 10 月 16 日に終わりました。ChatGPT が OAI-SearchBot を呼び寄せたのは 10 パス中 0 件、Gemini が Googlebot を呼び寄せたのは 10 件中 0 件、DeepSeek は 4 件中 0 件でした。対照のパスにも何も来ませんでした。セッション中の ChatGPT 自身の取得を除き、どの企業の検証済みクローラーもこれらのパスをリクエストしませんでした。

クローラーが休んでいたわけではありません。同じ 72 時間に、Googlebot はサイトに 20 の URL にわたって 110 件のリクエストを送りました。Bingbot は 41 件です。ただ、新しいパスには一度も近づかなかったのです。

OAI-SearchBot が送ったリクエストはちょうど 4 件で、すべて /robots.txt 宛て、約 16 時間おきと、テスト前と同じリズムでした。最も近いものは、最後の ChatGPT の取得から 11 時間 33 分後でした。robots.txt を読んで、そのまま去っていきました。

あなたにとっての意味

顧客があなたのリンクを ChatGPT や Gemini に貼り付けると、アプリはページを読み、その回答に使うことができます。しかし、それでページが検索クローラーの目に留まるわけではありません。そのためには、これまでどおりの経路が必要です。

1. クローラーがすでに取得しているページから、新しいページにリンクする。
2. サイトマップに載せる。
3. Google の場合は Search Console を使う。

ユーザーの貼り付けによって発見されることを当てにしないでください。

これが証明しないこと

この主張はラボでの測定によって否定されましたが、サンプルは小さいです。

• 10 件中 0 件で否定できるのは、アプリごとの追随率がおよそ 26% を超える場合だけです。それより低い率である可能性は残ります。
• アプリごとに 1 アカウント、1 台のマシン、ある朝の 30 分間、1 つのホスト、同じ質問です。10 セッションは互いに独立していません。
• これは pw にのみ当てはまります。OAI-SearchBot が robots.txt しか読んだことのない新しいサブドメインで、貼り付けた URL には追加のパラメーターが付いていました。クローラーはホスト全体で判断している可能性があり、すでにクロールされているサイトでは異なる挙動になるかもしれません。
• Claude は測定していません。
• 10 月 15 日以降、私たち自身のツールがこれらのパスを再び取得したため、10 月 20 日までの後半の期間は正確に読み取れません。72 時間の結果には影響しません。
• これらはオリジンのログです。Cloudflare のエッジでブロックされたクローラーは記録に現れません。
• そもそも、クローラーがページを取得しても、インデックスされるとは限りません。今回は、どのクローラーも取得しませんでした。

全データは pw の調査ページにあります。