Tag: robots.txt


Robots.txt Dosyası Nedir? Ne İşe Yarıyor?

Robots.txt Dosyası Nedir? Ne İşe Yarıyor?

Belki de şuan sitenizde barındırdığınız robots.txt dosyası hakkında hiçbir bilginiz yok. Veya şuanda sitenizde bile bulunmuyor. Çoğu web sitenin robots.txt dosyası elbette bulunuyor ancak bu dosyanın ne işe yaradığı hakkında hiç kimsenin bir bildiği yok. Bu dosya sadece sizin izininizle oluşmuyor. Aynı zamanda yüklediğiniz...

Yazıyı Gör

Robots meta FI

Robots Meta Yönergeleri

Robots Meta Yönergeleri Robots meta direktifleri (bazen “meta etiketleri” olarak adlandırılır), tarayıcılara web sayfası içeriğini tarama veya dizine ekleme talimatlarını sağlayan kod parçalarıdır. Robots.txt dosya yönergeleri, bir web sitesinin sayfalarını nasıl tarayacağınıza dair bot önerilerinde bulunurken , robots meta yönergeleri, bir sayfanın içeriğini tarama ve dizine ekleme konusunda...

Yazıyı Gör