SEO Araçları
Robots.txt & Sitemap Denetleyici
Bir alan adı gir; robots.txt dosyasındaki tarama kurallarını ve sitemap.xml dosyalarını saniyeler içinde denetle. İstemeden konmuş tarama engellerini, eksik Sitemap bildirimlerini ve sitemap kayıt sayılarını gör. Ücretsiz, kayıt gerektirmez.
Robots.txt ve sitemap neden önemli?
robots.txt ve sitemap.xml, bir sitenin arama motorlarıyla iletişim kurduğu iki temel dosyadır. robots.txt botlara nereye girip giremeyeceklerini söylerken, sitemap taranması istenen sayfaların listesini sunar. Bu dosyalardaki küçük bir hata — örneğin yanlış bir Disallow kuralı — koca bir sitenin dizinden düşmesine neden olabilir.
Bu araç, her iki dosyayı tek seferde çekip ayrıştırır; kritik engelleri, eksik bildirimleri ve erişilemeyen sitemap'leri öne çıkararak hızlı bir teknik SEO sağlık kontrolü sunar.
Diğer SEO Araçları
Sıkça Sorulan Sorular
robots.txt nedir ve ne işe yarar?
robots.txt, sitenin kök dizininde bulunan ve arama motoru botlarına hangi bölümleri tarayabileceklerini söyleyen bir metin dosyasıdır. User-agent grupları altında Allow/Disallow kurallarıyla tarama davranışını yönlendirir.
"Disallow: /" ne anlama gelir?
Tüm botlar (User-agent: *) için "Disallow: /" kuralı, sitenin tamamının taranmasını engeller. Bu kural istemeden bırakıldıysa sitenin arama sonuçlarından kaybolmasına yol açabilir; araç bunu kritik hata olarak işaretler.
Sitemap robots.txt'e neden eklenmeli?
robots.txt içine "Sitemap: https://site.com/sitemap.xml" satırı eklemek, arama motorlarının sitemap'ini otomatik bulmasını sağlar. Bu araç hem robots.txt'teki bildirimi hem de sitemap'in erişilebilirliğini ve kayıt sayısını kontrol eder.
Sitemap dizini (sitemapindex) nedir?
Büyük siteler tek sitemap yerine, birden çok sitemap'e işaret eden bir sitemap dizini (sitemapindex) kullanır. Araç, denetlediği dosyanın normal sitemap (urlset) mi yoksa dizin mi olduğunu ve kaç kayıt içerdiğini gösterir.