robots.txt

robots.txt, sitenin kök dizininde duran ve botlara hangi adresleri tarayıp hangilerini taramayacaklarını söyleyen düz metin dosyasıdır. Taramayı yönetir, dizine eklenmeyi tek başına engellemez: taraması kapatılan bir adres, başka sitelerden bağlantı alıyorsa içeriği okunmadan yine de sonuçlarda görünebilir. Dizinden çıkarmak için noindex kullanılır.

Alan
SEO
İngilizcesi
robots.txt

Neden önemli

Tek bir yanlış satır tüm siteyi taramaya kapatabilir. Test ortamından canlıya geçişte kalan bir engelleme en sık görülen hatalardır. Dosya gizlilik aracı da değildir: herkes okuyabilir. Bu yüzden önemli bilgiyi saklamak için değil, taramayı yönlendirmek için kullanılır.

Örnek

Bir firma yeni siteyi yayına alırken test dönemindeki “tüm siteyi engelle” satırını silmeyi unutur. İki hafta sonra organik ziyaret sıfıra yakın düşer. Satır silindikten sonra botlar siteye geri döner ve sayfalar günler içinde yeniden taranır.

Benzer terimler

Tanımlar genel bilgi içindir. Bir tanımı eksik ya da yanlış bulduysanız yazın, bir iş günü içinde dönelim. Bize yazın

Yazılarımız

SEO üzerine yazdıklarımızdan; terimin işte nasıl karşınıza çıktığını anlatır.

Projenizi
anlatın.

Formu doldurun ya da doğrudan yazın; görüşme gününü birlikte belirleriz.

İlk görüşmeyi Detmore’un kurucusu Deniz Sezer yapar.

İlk görüşme ücretsiz · Bir iş gününde yanıt · 2 ila 3 günde yazılı teklif · NDA hazır

Neye ihtiyacınız var? birden fazla seçebilirsiniz

Ad, e-posta ve telefon zorunludur.

İletişim

Bir iş günü içinde dönüyoruz.