Translations:Manual:Robots.txt/9/pt-br

É fácil evitar que aranhas indexem páginas que não são artigos se você estiver usando URLs curtas ao estilo Wikipédia. Supondo que artigos são acessíveis através de /wiki/Some_title e qualquer outra coisa está disponível através de /w/index.php?title=Some_title&someoption=blah :