& Mapiau Safle
Rhowch URL unrhyw safle. Rydym yn cael robots.txt a sitemap.xml o'r gweinydd, yn dangos i chi'r cyfarwyddiadau crawlio a'r mapiau safleoedd a ddatganwyd, a'r LAU map safleoedd llinyn-gwestiynau sy'n achosi gostyngiadau cynnwys dyblyg.
Sut i brofi robots.txt a sitemap.xml
Pedwar cam, dim mewngofnodi. Mae'r gwiriad cyfan yn rhedeg ar ochr y gweinydd.
Gludo URL y safle
Enter any site's homepage URL. You don't need the full path to robots.txt, because we derive it from the host.
Ni wnaethom gael o'n gweinydd
Mae ein gweinydd yn gofyn am robots.txt a phob sitemap.xml a ddatganir, felly nid yw'r prawf yn cael ei atal gan eich porwr na'ch storfa eich hun.
Darllen y cyfarwyddiadau a'r mapiau safwe
Adolygu'r grwpiau defnyddiwr-agent wedi'u dosrannu, rheolau gwrthod caniatâd a'r rhestr o fapiau safleoedd wedi'u datgan, gyda LAU sampl o bob un.
Cywiro beth sydd wedi'i farcio
Datrys unrhyw LAU map safwe llinyn-gwestiynau neu wrthdaro blocio-ond-mynegeio cyn i beiriant chwilio ostwng y dyblygiadau.
Beth mae'r arbrofiwr hwn yn ei wirio
Y rhai yr un gwarchodfeydd yr ydym yn rhedeg yn fewnol cyn cyhoeddi tudalen sengl.
Cyfarwyddiadau Crawl
Darlunio pob grŵp defnyddiwr- asiant a'i reolau Caniatáu / Caniatáu fel y gallwch weld yn union beth sydd wedi'i atal.
Mapiau Safle
Rhestru pob map safwe a gyfeirir ato yn robots.txt, yn nôl pob un, ac yn adrodd ei fath a'i nifer URL.
Llinyn Ymholiad
Bandio LAU map-safwe llinyn-gwestiynau sy'n plannu tudalennau sy'n debyg i ddyblygu a chychwyn gostyngiadau cynnwys dyblyg.
Nôl cyflwr
Catches sitemaps declared in robots.txt that error, redirect, or return non-XML. These are silent crawl killers.
Cwestiynau a ofynnir yn aml
Rhedeg yn eich pibellau
This tester runs entirely server-side. You submit a URL, our backend fetches and parses robots.txt and the declared sitemaps, then re-renders this page with the results. A programmatic REST API for CI/CD and bulk auditing is available on the paid managed plans. Gweld cynlluniau →
Defnyddio' r rhaglen
Every tool is available through one authenticated REST API on the Pro and API plans. Wire it into your CI, CMS, or dashboards.