Comprobador de robots.txt y etiquetas meta robots
Compruebe si una URL se puede rastrear e indexar para un robot de rastreo concreto, y obtenga una explicación clara de cada directiva de robots.txt, meta robots y X-Robots-Tag.
Cómo se utiliza
1
Pega tu archivo robots.txt
Cópielo de yoursite.com/robots.txt e ingrese la URL que desea probar.
2
Agregue cualquier etiqueta de robots
Opcionalmente, pegue la etiqueta meta robots de la página y el encabezado X-Robots-Tag para verificar también la indexabilidad.
3
leer el veredicto
Vea si la URL es rastreable e indexable, qué regla se aplicó y qué significa cada directiva.
Resultado
rastreable
—
Ingrese una URL y su robots.txt.
Indexable
—
Directivas explicadas
- Las directivas que ingrese se explicarán aquí.
Qué hace esta herramienta
- Obtiene el robots.txt en línea de su sitio (o acepta un archivo pegado) y evalúa una URL concreta frente a ese archivo para un robot de rastreo seleccionado —Googlebot, Googlebot-Image, Bingbot o todos (*)—, mostrando exactamente qué regla prevalece y por qué.
- Combina este resultado de rastreabilidad con cualquier etiqueta meta robots o encabezado X-Robots-Tag que añada, para ofrecer un veredicto único sobre la indexabilidad, y no solo sobre el rastreo.
- Explica cada directiva encontrada en lenguaje claro, incluidas las menos habituales como
noarchive,max-snippetyunavailable_after.
Herramientas relacionadas
- Auditor de acceso de robots de IA — La misma lógica de robots.txt, aplicada específicamente a 11 robots de IA con nombre
- Generador + validador de llms.txt — robots.txt controla el rastreo; llms.txt es un archivo distinto y complementario de descubrimiento por IA
- Vista previa del fragmento en la SERP — Una vez confirmado que una página se puede rastrear e indexar, compruebe cómo aparecerá realmente en los resultados
Última actualización: 19 de agosto de 2026 · Desarrollado por el equipo de PPC de CWA Europe.