Robots.txt 2.0
5 saniye içinde indirebilirsiniz.
Hakkı -nda Robots.txt
Robotlar.txt Robot Dışlama Dosyaları ve bir log analyzer yazılımı için görsel bir editördür. Bir kullanıcıhızlı ve kolay bir şekilde robotlar oluşturmak için izin verir.txt dosyaları arama motoru örümcekleri, hangi Web sitesinin parçaları indekslenmiş ve genel Web kamu tarafından aranabilir yapılmaması ve daha sonra örümcekler tanımlamak için değil talimat motoru örümcekler talimat için gerekli bu talimatlara uymak değil. Program, kullanıcıya FTP veya yerel ağ sunucusunda oturum açmave ardından aranabilir yapılmayacak belgeleri ve dizinleri seçmenin bir yolunu sağlar. Bu program sayesinde görsel endüstri standardı robotlar.txt dosyaları oluşturmak mümkün olacak; kötü niyetli ve istenmeyen örümcekleri tespit edin ve bunları sitenizden yasaklayın; çok dilli siteler için uygun sayfalara doğrudan arama motoru tarayıcıları; kapı sayfası yönetimi için robotlar.txt dosyaları kullanmak; Örümcekleri Web sitenizin hassas ve özel alanlarından uzak tutun; doğru biçimlendirilmiş robot.txt dosyalarını doğrudan FTP sunucunuza yükleyin, Robotlar.txt Editörü'nden geçiş yapmayın; parça örümcek ziyaretleri; HTML, Microsoft Excel CSV ve XML formatlarında ve daha fazlası içinde örümcek ziyaret raporları oluşturun. Ücretsiz programın güncellemeleri ve yükseltmeleri zaman içinde sınırsız; çalışmak için web sitelerinin sınırsız sayıda