Probador de Robots.txt
Probador de Robots.txt. Pegue su archivo robots.txt y pruebe si las URL específicas están permitidas o bloqueadas para cualquier rastreador. Valida la sintaxis según RFC 9309, resalta errores y extrae referencias de sitemap. Cómo usar. Pegue el contenido de su robots.txt en el campo de entrada, ingrese una ruta de URL para probar y seleccione un User-agent. La herramienta muestra instantáneamente si ...
Pruebe la herramienta »