すべての無料ツール
技術的な可視性

Googleクローラシミュレータ

Googlebot風のリクエストを実行し、アクセス権、robotsルール、noindexシグナル、テキスト、ヘッダー、HTMLを検証します。

無料で使用可能 サインイン不要取得問題とコンテンツ問題を分ける
この作業を Surpasso で継続しますか?Surpassoはクローラーによって見える変更をモニタリングし、発見に影響を与える前にそれを防ぎます。

1回のクロールをシミュレート

クローラーがサーバーから実際に取得するものを確認します。

01
クローラーの種類
これはGooglebot風のHTTPリクエストです。JavaScriptを実行したり、Googleがページをインデックス化したことを確認する機能はありません。

Googlebot風のリクエストをシミュレートする準備ができました

公開ページのURLを入力して、Googlebotが受け取るものを確認します。

このツールについて

Googlebot風のHTTPリクエストを送信し、サーバーが返す内容を検査します:アクセスステータス、ロボットポリシー、インデックス指示、応答ヘッダー、表示テキスト、およびソースHTML。これにより、取得問題とコンテンツ問題を迅速に区別できます。

得られる内容

明確で使いやすい結果

  • 最終URL、ステータス、コンテンツタイプ、応答ヘッダー、リダイレクト、およびリクエスト時間。
  • クローラー風リクエストに返されるrobots.txtの許可権限とページレベルのnoindexシグナルを確認します。
  • 読みやすいサーバーが返すテキストと、ページを保存せずに診断に使用できる制限されたHTMLスニペット。
結果の読み方

取得成功

公開サーバーがこのクローラー風リクエストに応答しました。ユーザーが見ているテキストとメタデータを比較して、レンダリングや個別化のギャップを検出します。

アクセス拒否または挑戦

401、403、429エラー、挑戦ページ、または繰り返しリダイレクトが信頼できるクローリングを阻害する可能性があります。CDN、WAF、元サーバー、およびレート制限ログを一括して確認します。

サーバーからの薄い応答

もし重要なコンテンツがクライアントのレンダリング後に出現する場合、ソース応答は空っぽに見えてしまうことがあります。変更前にGoogleの独自の検査ツールで確認してください。

制限事項と参照元
  • これはGoogleのインフラストラクチャではありませんし、Googleが取得、レンダリング、インデクシングした内容を完全に証明するものではありません。
  • これはHTTP応答を検査しますが、全ブラウザJavaScriptレンダリングパイプラインを実行しません。
  • ボット管理者は、検証済みのGooglebot IP範囲とは異なる方法でこのリクエストを扱う可能性があります。
このツールに関する質問

なぜ私のブラウザではページが正常に動作するのに、ここでは失敗するのでしょうか?

ブラウザはクッキーを保持し、スクリプトを実行し、インタラクティブな挑戦を通過する可能性があります。クローラーはより信頼できるサーバー応答と一貫性のあるボットポリシーに依存します。

GooglebotユーザーエージェントだけがGoogleを模倣できるのでしょうか?

いいえ。これは一つのリクエスト特性を再現するだけで、Googleの認証されたネットワークアイデンティティ、レンダリングシステム、クロール履歴、またはインデクシング決定を再現するものではありません。