Penguji Robots.txt
Penguji Robots.txt Tempelkan file robots.txt Anda dan uji apakah URL tertentu diizinkan atau diblokir untuk perayap mana pun. Memvalidasi sintaks terhadap RFC 9309, menyoroti kesalahan, dan mengekstrak referensi sitemap. Cara Penggunaan Tempelkan konten robots.txt Anda ke dalam kolom input, masukkan path URL untuk diuji, dan pilih User-agent. Alat ini segera menunjukkan apakah ...
Coba Alat »