Grokのクローラーが名乗らない件。自分のサイトを見てもらったのにアクセス解析ログが見つからない・・・

こんにちは。麗です。

先日、Grok（X の AI）に urara.dev のチェックをお願いしてみました。

そのあと、いつものように自作のアクセス解析を開いてみたんです。

Grokチャット上では少なくとも60件はアクセスがあるはずなのに、アクセス解析のAIクローラーの欄を見ても Grok の名前がどこにもないんですね。

今回は、「Grok はどこへ消えたのか」 を調べてみた話です。

ChatGPT は名乗ってくれる

普段、AIにリサーチをするとアクセス解析には必ずその痕跡が現れます。

たとえば、ChatGPTにurara.devの解析をお願いすると、ChatGPT-User というクローラーからのアクセスがあるのです。

3番目のChatGPT-User がそうです。

たとえば、こんなときにアクセスがあります。

• ChatGPTに「urara.dev」について調べてと依頼したとき
• ChatGPTに「非エンジニアの個人開発者が運営しているサイトを調べて」などの依頼をした時

とにかく、ChatGPTにurara.devについて質問するとChatGPT-Userからのアクセスがあるわけです。

Claudeでも同様にClaude-Userからのアクセスがあります。

なので、Grok にお願いすれば、Grok-User みたいな名前を名乗るクローラーからのアクセスが記録されるものだと思っていたのです。

Grokからのアクセス履歴

しかし、私自身がアクセス解析のダッシュボードを見たところ、私がGrokに「urara.devの解析をしてください」と依頼した時間帯に、Grokらしきアクセス履歴はひとつも見つかりませんでした。

Grokはもちろん、xAIの名前でも見つからないのです。

過去の履歴をさかのぼると、「GrokBot」「xAI-Grok」を名乗るアクセスが24件ほど見つかりました。

しかし、IPアドレスやその他の情報と照合してみたところ、本物のGrok関連ではなくて、単なるなりすましbotということが分かりました。

Grokクローラーはどこに消えたのか

AI（ClaudeCode）に手伝ってもらって、アクセス解析の記録を1件ずつ調べてもらいました。

ちなみに、私がGrok にサイト解析を依頼したのは、9月13日のお昼ごろです。

その時間の記録を見てみると、

こうに分かりました。

ブログ記事、作品ページ、About、お問い合わせ、プライバシーポリシー・・・と、ほぼ全ページを読んでいます。

こういう動きをするのは、URLを渡して点検や解析を頼んだときです。

普通の検索や学習クローラーは、ここまで全ページを読むことはまずありません。目的のページ数件を取得しておわりなんですよね。

なので、このアクセス記録がGrokでほぼ確定と思われるのですが、Grokという名前はありませんでした。

Grokクローラーはどう名乗っていたか

では、Grokではなく、どのように名乗っていたかと言いますと、これがびっくりなんですが、

といった、私たちが普段使っているブラウザと同じでした。

しかも、ほぼ1件ごとに、

から来ていたんです。

アクセス解析から見ると、「世界中のいろんな人が、同じ2分間にたまたまサイトを見に来た」ようにしか見えるわけです。

その結果、私のアクセス解析では、Grokのアクセスと思われる記録は、こんなふうにバラバラに分類されていました。

アクセス解析での分類	件数
判定できない	91
データセンターからの巡回	153
その他のロボット	48
訪問者（人間）	3
AIクローラー	0

AIクローラーの欄を探しても、見つからないわけです。

GrokクローラーとGooglebotの関係

大手企業のクローラーが名乗らない？？？そんなことある？？？

そう思ったので、もうひとつCloudflareのアナリティクスを確認してみました。

Cloudflare には、AIクローラーの種類ごとにアクセス数を見られる画面があるのです。

すると、ちょうど同じくらいの時間帯に 「Googlebot」のアクセスが37件 急に増えていました。

この37件来ていたGooglebotを、自作のアクセス解析ログと照合してみました。

すると、その Googlebotと名乗るクローラーは、Google本体から来たものではなく、Google Cloud（誰でも借りられるサーバー）から来ていることがわかりました。

自作のアクセス解析では、そういった出どころがはっきりしないクローラーは「なりすましの疑い」として扱っています。なので、「その他のロボット」という分類がされており、一見するとわからなかったのです。

この Googlebot を名乗ったアクセスが、Grok の一部だったのかどうかは現時点では分かりません。

もしかすると、Grokがサイトを分析しているのと同じ時刻にたまたま自称Googlebotが来ていた可能性があるからです。

断定するにはもう何度か検証を重ねていく必要がありそうです。

「GrokBot」を名乗るクローラーの正体

これまでは、私自身がGrokにサイト解析を依頼した「時間」をもとにクローラーを探してきました。

次は過去の履歴も含めてGrok関連クローラーを探してみました。

アクセスの記録を「Grok」で検索してみると、

という名前を名乗るクローラーからのアクセスが24件見つかりました。

「なんだ、Grokいるじゃん」と思ったのですが、ログの中身を見てみると、

といったページにアクセスをしようとしており、秘密の設定ファイルを探して盗もうとしていました。

さらには、同じ時間帯に、GPTBot や ClaudeBot など、いろいろな AI の名前を次々と名乗りながら、存在しないファイルを探していたんです。

つまり、本物の Grok ではなく、Grokの名前を名乗っている不審なアクセスでした。

名乗っていないのが本物Grokで、名乗っているのが偽物Grok（笑）

という、ちょっと笑ってしまうオチになりました。

Grokの名乗りはバラバラ！？ここまでのまとめ

私がGrokに「urara.devを見て分析して」と依頼してアクセスログを調べてみたら、下記のことが分かりました。

GrokクローラーがChromeやSafariを名乗ってアクセスしている可能性は、他の複数の人たちの独自検証でも指摘されていました。

xAI公式の情報ではありませんが、ほぼ確定とみて良さそうですね。

また、今回のクローラーは「名乗らない」ものでしたが、Grokbotであることを名乗るGrokクローラーもいるようです。

但し、実ログでは名乗らないパターンの方が圧倒的に多いのだとか。

ここまでわかってくると、どうしても疑問が浮かび上がります。

「名乗らないってことはAIによる学習拒否をできないのでは？？」

この疑問に関する記事はまた後日改めてまとめていこうと思います。