Translations:Manual:Robots.txt/9/ja

もしウィキペディアに似た形式の短縮URLを採用していると、記事ではないページにスパイダーのインデックス作成を防止するのは難しくありません. 記事は/wiki/Some_title経由でアクセスし、その他は$query可能だとした場合: