Provador de robots.txt i llocmap
Introduïu qualsevol URL de la pàgina web. Trobarem els seus robots. txt i llocmap. xml del nostre servidor, us mostrarà les directives de spojogins i llocs web declarats, i la bandera els URL de la cadena de pàgines web de consulta que causen les emocions duplicades de continguts.
Com provar un robots.txt i llocmap. xml
Quatre passes, sense signar. La comprovació completa executa el servidor.
Enganxa l' URL del lloc
Enter any site's homepage URL. You don't need the full path to robots.txt, because we derive it from the host.
Recuperarem del nostre servidor
El nostre servidor sol· licita robots. txt i tots els llocs web declarats. xml, per tant, la prova no està bloquejada pel vostre navegador o al vostre propi cau.
Llegiu les directives i els mapes de lloc
Revisa els grups d' agent analitzats per l' usuari, desactivats i la llista dels mapes de lloc declarats, amb una mostra URL de cadascun.
Arreglar el que s'ha marcat
Resol qualsevol URL de la cadena de la consulta o conflictes bloquejats abans que un motor de cerca desemmociona els duplicats.
Comprovar aquest test
El mateix guardarails que hem executat internament abans de publicar una sola pàgina.
Exploreu directives
Analitza cada grup agent d' usuari i les seves regles Permet / Permet a les que podreu veure exactament el que està bloquejat.
Declarada els mapes de lloc
Llista cada llocmap referenciat en robots. txt, recupera cada un i informa del seu tipus i el seu comptador d' URL.
Bloc de corda
Indicadors d' URL de la cadena de continguts que es troben a prop de les pàgines de sembrat i desencadenen de les emocions duplicades del contingut.
Obtén la salut
Catches sitemaps declared in robots.txt that error, redirect, or return non-XML. These are silent crawl killers.
Preguntes més freqüents
Executa-ho en la teva canonada
This tester runs entirely server-side. You submit a URL, our backend fetches and parses robots.txt and the declared sitemaps, then re-renders this page with the results. A programmatic REST API for CI/CD and bulk auditing is available on the paid managed plans. Mireu els plans →
Usa- lo programantàticment
Every tool is available through one authenticated REST API on the Pro and API plans. Wire it into your CI, CMS, or dashboards.