本文へスキップ
mavirank

robots.txt チェッカー

robots.txt は、サイトのどの部分を取得してよいかをクローラーに伝えます。ツールはファイルを読み込んでルールを評価し、入力したアドレスが許可されているかを示します。

当社サーバーがチェック、無料・アカウント不要

ツールを読み込んでいます …

ツールがチェックする内容

  • robots.txt にアクセスできるかと、含まれるルール。
  • 入力したアドレスが許可されているかと、記載されたサイトマップ。

仕組み

  1. アドレスを入力します。標準ポート上の公開ウェブアドレスのみ受け付けます。
  2. 当社サーバーが独自の正直なボット名で、チェックに必要なものを一度だけ取得して評価します。
  3. 評価された値と短い説明が表示されます。ページの内容は保存されません。
すべてのツール

ページ全体を一度の監査で

監査は 50 を超えるテストを実行し、重大度で重み付けして一つのスコアにまとめます。ウェブサイトはスケジュールに従って再チェックされます。