robots.txt解析ツール

robots.txt解析ツールは、任意のウェブサーバの「robots.txt」（検索エンジンなどのロボットに対し、そのサーバ上での振る舞いを指定するファイル）の内容をオンラインから簡単に検証することができます。

解析するサーバのURLを入力して、「解析」ボタンを押してください。ファイル名「robots.txt」はURLに記述しなくても、サーバに存在すれば自動的に検知します。