Guía del producto
Cómo funciona
Comprueba qué URLs puede rastrear cada bot, descubre la regla exacta que decide el acceso y descarga un robots.txt corregido antes de publicarlo.
Método
- 01
Separa grupos de user-agent y reglas Allow/Disallow.
- 02
Selecciona el grupo más específico y aplica la coincidencia de ruta más larga.
- 03
Muestra la regla ganadora, avisos y un robots.txt normalizado descargable.
Alcance responsable
Fuentes y alcance
robots.txt no es autenticación, seguridad ni una orden de desindexación. El simulador implementa un subconjunto práctico de RFC 9309 y no consulta URLs remotas.