Robots.txt dosyası, arama motoru tarayıcılarına sitenizdeki hangi URL'lere erişebileceklerini bildirir. Robots.txt Dosya İçeriği makalesi için tıklayınız.>