Translations:Manual:Robots.txt/1/ja

robots.txtファイルはRobots Exclusion Standardに含まれ、$1（検索エンジン最適化）を補助します. インターネットボットにサイトのインデックス作成 (index, crawl) の方法を指示します. robots.txtファイルは必ずドメインのwebルートに置きます.