Translations:Manual:Robots.txt/1/ja

robots.txtファイルはRobots Exclusion Standardに含まれ、（検索エンジン最適化）を補助します. インターネットボットにサイトのインデックス作成 (index, crawl) の方法を指示します. robots.txtファイルは必ずドメインのwebルートに置きます.