Translations:Manual:Robots.txt/20/ja

インターネットアーカイブにraw pages加工していないページを索引付けさせて、ページの生のウィキテキストを永遠に記録しようと考えることでしょう. この方法だと、ウィキがアクセス不能に陥った場合も別のウィキに簡単にコンテンツを載せることができます. その場合の処理は: