Translations:Manual:Robots.txt/1/tr

robots.txt dosyaları Robot Hariç Tutma Standardı'nın bir parçasıdır ve konusunda yardımcı olabilir. web robotlarına bir sitenin nasıl taranacağını söylerler. Bir etki alanının web köküne bir robots.txt dosyası yerleştirilmelidir.