Loona Automation logosuLoona Geliştirici Araçları
Ana Sayfa › Geliştirici Araçları › Robots.txt Test Aracı

Robots.txt Test Aracı - İzinli veya Engelli ve Tam Olarak Neden

Kısacası: Robots.txt Test Aracı, gerçek eşleştirme kurallarını uygular - en belirli user-agent grubu, sonra en uzun eşleşen yol kuralı, Allow berabere kalırsa kazanır - ve kararı artı ona karar veren tam kuralı gösterir.

Bir robots.txt dosyasını yazmak kolay, hakkında akıl yürütmek zordur. Bu test aracı, belirli bir tarayıcı ve URL için önemli olan tek soruyu yanıtlar.

Tasarım gereği gizli: bu araçtaki her şey, JavaScript ile tarayıcınızda %100 gerçekleşir. Girdiniz asla bir sunucuya yüklenmez, asla saklanmaz ve bizim tarafımızdan asla görülmez - sekmeyi kapatın ve her şey gitmiştir.

Robots.txt Test Aracı Nasıl Kullanılır

  1. robots.txt içeriklerinizi yapıştırın.
  2. Test edilecek tam URL adresini ve kullanıcı aracısı adını girin (Googlebot, GPTBot, *).
  3. Bu URL adresini test et düğmesine tıklayın.
  4. Kararı ve onu üreten eşleşen kuralı okuyun.

Nasıl çalışır

Eşleştirme standardı izler (RFC 9309, Google değerinin uyguladığı gibi): önce tarayıcının grubu seçilir - en belirli eşleşen user-agent belirtecini adlandıran grup, * grubunu yener - sonra, o grubun içinde, yolu URL yoluna uyan ve en uzun olan kural kazanır; berabere kalırsa, Allow, Disallow değerini yener. Kalıplar, * değerini joker olarak ve sondaki $ değerini bir bitiş çapası olarak destekler. Boş bir Disallow hiçbir şeyle eşleşmez, bu yüzden 'Disallow:' tek başına her şeye izin verir.

Sık Sorulan Sorular

Bu test aracı ücretsiz mi?

Evet - tamamen ücretsiz, kayıt yok.

Hangi eşleştirme kurallarını izler?

RFC 9309 / Google uygulaması: en belirli aracı grubu, en uzun eşleşen kural, Allow berabere kalırsa kazanır, * ve $ kalıp desteği.

URL değerim burada engelli ama Google değerinde dizine eklenmiş - neden?

Robots, dizine eklemeyi değil, taramayı engeller. Engellenmiş bir sayfa, bağlantılardan yine de dizine eklenebilir, bir açıklama olmadan gösterilir.

Canlı robots.txt dosyamı getirir mi?

Hayır - içeriği yapıştırın. Tarayıcılar, rastgele sitelerin dosyalarını getiremez (CORS) ve yapıştırmak, yayımlamadan önce bir taslağı test etmenize de olanak verir.

Bir şey yükleniyor mu?

Hayır. Test, tarayıcınızda çalışır.

İlgili Geliştirici Araçları

Bu aracı web sitenize gömün — ücretsiz

Bu aracı kendi web sitenize veya blogunuza ekleyin — tamamen ücretsizdir, kayıt gerektirmez ve her zaman en son sürümü gösterir. Aşağıdaki kodu kopyalayın ve aracın görünmesini istediğiniz yere sayfanıza yapıştırın. Gömülü öğenin altında küçük “Powered by Loona Automation” kredi satırını tutmak, bu aracın ücretsiz kalmasına yardımcı olur — ama onu biçimlendirmekte veya kaldırmakta özgürsünüz; araç her iki durumda da çalışır.