Translations:Manual:Robots.txt/7/fr

MediaWiki génère de nombreuses pages qui ne sont utiles que pour les humains vivants: les anciennes versions et les diffs tendent à dupliquer le contenu trouvé dans les articles. Les pages d'édition et la plupart des pages spéciales sont générées de manière dynamique, ce qui les rend utiles uniquement pour les éditeurs humains et relativement coûteuses à diffuser. S'ils ne sont pas canalisés par ailleurs, les fouineurs peuvent essayer d’indexer des milliers de pages similaires, en surchargeant le serveur Web.