Comprobador de robots.txt y meta robots
Compruebe si cualquier URL se puede rastrear e indexar para un rastreador concreto y obtenga una explicación en lenguaje sencillo de cada directiva de robots.txt, meta robots y X-Robots-Tag.
Cómo se utiliza
1
Pega tu archivo robots.txt
Cópielo de yoursite.com/robots.txt e ingrese la URL que desea probar.
2
Agregue cualquier etiqueta de robots
Opcionalmente, pegue la etiqueta meta robots de la página y el encabezado X-Robots-Tag para verificar también la indexabilidad.
3
leer el veredicto
Vea si la URL es rastreable e indexable, qué regla se aplicó y qué significa cada directiva.
Resultado
rastreable
—
Ingrese una URL y su robots.txt.
Indexable
—
Directivas explicadas
- Las directivas que ingrese se explicarán aquí.
Qué hace esta herramienta
- Obtiene el robots.txt en vivo de su sitio (o acepta uno pegado) y evalúa una URL concreta frente a él para un rastreador elegido —Googlebot, Googlebot-Image, Bingbot o cualquiera (*)—, mostrando exactamente qué regla prevalece y por qué.
- Combina ese resultado de rastreabilidad con cualquier etiqueta meta robots o cabecera X-Robots-Tag que añada, para ofrecer un veredicto único de indexabilidad, no solo de rastreo.
- Explica cada directiva encontrada en lenguaje sencillo, incluidas las menos habituales como
noarchive,max-snippetyunavailable_after.
Herramientas relacionadas
- Auditor de acceso de rastreadores de IA — La misma lógica de robots.txt, aplicada específicamente a 11 rastreadores de IA con nombre propio
- Generador y validador de llms.txt — robots.txt controla el rastreo; llms.txt es un archivo independiente y complementario para el descubrimiento por IA
- Vista previa del snippet en el SERP — Una vez confirmado que una página se puede rastrear e indexar, compruebe cómo aparecerá realmente en los resultados
Última actualización: 19 de agosto de 2026 · Creado por el equipo de PPC de CWA Europe.