Anasayfa » Etiket Arşivi: Robots.txt Dosyası Nerede

Etiket Arşivi: Robots.txt Dosyası Nerede

Robots.txt Dosyası Oluşturma ve Önemi

Google botları tarafından çok önemsenen Robots.txt dosyasının olmaması halinde, sayfanız indekslenmeme riski ile karşı karşıya kalabilir. Robots.txt dosyası, arama motorundaki robotları yönlendiren, hangi sayfaların indekslenmesi gerektiğini komutlar ile robotlara bildiren bir text dosyasıdır. Kullandığınız Hostingde robots.txt dosyasının bulunmaması halinde robotlar hangi sayfaları inceleyeceğini bilemeyeceğinden siteyi indekslemeyebilir. Bu da site sahibi açısından gereksiz yere can sıkıcı bir durum oluşturur. Eğer sitenizde bir ...

Devamını Oku »