& Mynegai

& Mapiau Safle

Rhowch URL unrhyw safle. Rydym yn cael robots.txt a sitemap.xml o'r gweinydd, yn dangos i chi'r cyfarwyddiadau crawlio a'r mapiau safleoedd a ddatganwyd, a'r LAU map safleoedd llinyn-gwestiynau sy'n achosi gostyngiadau cynnwys dyblyg.

Sut i brofi robots.txt a sitemap.xml

Pedwar cam, dim mewngofnodi. Mae'r gwiriad cyfan yn rhedeg ar ochr y gweinydd.

1

Gludo URL y safle

Enter any site's homepage URL. You don't need the full path to robots.txt, because we derive it from the host.

2

Ni wnaethom gael o'n gweinydd

Mae ein gweinydd yn gofyn am robots.txt a phob sitemap.xml a ddatganir, felly nid yw'r prawf yn cael ei atal gan eich porwr na'ch storfa eich hun.

3

Darllen y cyfarwyddiadau a'r mapiau safwe

Adolygu'r grwpiau defnyddiwr-agent wedi'u dosrannu, rheolau gwrthod caniatâd a'r rhestr o fapiau safleoedd wedi'u datgan, gyda LAU sampl o bob un.

4

Cywiro beth sydd wedi'i farcio

Datrys unrhyw LAU map safwe llinyn-gwestiynau neu wrthdaro blocio-ond-mynegeio cyn i beiriant chwilio ostwng y dyblygiadau.

Beth mae'r arbrofiwr hwn yn ei wirio

Y rhai yr un gwarchodfeydd yr ydym yn rhedeg yn fewnol cyn cyhoeddi tudalen sengl.

📜

Cyfarwyddiadau Crawl

Darlunio pob grŵp defnyddiwr- asiant a'i reolau Caniatáu / Caniatáu fel y gallwch weld yn union beth sydd wedi'i atal.

🗺️

Mapiau Safle

Rhestru pob map safwe a gyfeirir ato yn robots.txt, yn nôl pob un, ac yn adrodd ei fath a'i nifer URL.

⚠️

Llinyn Ymholiad

Bandio LAU map-safwe llinyn-gwestiynau sy'n plannu tudalennau sy'n debyg i ddyblygu a chychwyn gostyngiadau cynnwys dyblyg.

🔗

Nôl cyflwr

Catches sitemaps declared in robots.txt that error, redirect, or return non-XML. These are silent crawl killers.

Cwestiynau a ofynnir yn aml

Gall URL llinyn-gwestiynau sengl mewn map safwe gynhyrchu miloedd o dudalennau sy'n debyg i ddyblygu. Mae peiriannau chwilio yn eu pori, yn canfod yr un cynnwys o dan wahanol baramedrau, ac yn gostwng y clwstwr cyfan am gynnwys dyblyg. Mae'r arbrofiwr yma yn eu baneri cyn i hynny ddigwydd.
Na. Mae robots.txt ar goll neu gwag yn caniatáu pob pori. Y risg yw'r gwrthwyneb: gwaharddiad rhy eang sy'n blocio tudalennau rydych chi am eu mynegai, neu map safwe a ddatganir yn robots.txt sy'n dychwelyd gwall.
Na. Rydym yn cael robots.txt a'r saitmaps mae'n eu datgan, yna'n darllen sampl o URLau o bob un. Ni wnawn ni chwilio pob tudalen yn ail-ddigwyddiadol, felly mae'r prawf yn gyflym ac ni fydd yn llwytho eich gweinydd.
Ydy, mae'r arbrofiwr yn rhad ac am ddim heb gofrestru. Mae mynediad rhaglennol drwy API REST ar gael ar y cynlluniau rheoli a thaliadau.
Ar gyfer datblygwyr

Rhedeg yn eich pibellau

This tester runs entirely server-side. You submit a URL, our backend fetches and parses robots.txt and the declared sitemaps, then re-renders this page with the results. A programmatic REST API for CI/CD and bulk auditing is available on the paid managed plans. Gweld cynlluniau →

API Datblygwr

Defnyddio' r rhaglen

Every tool is available through one authenticated REST API on the Pro and API plans. Wire it into your CI, CMS, or dashboards.

curl -X POST https://seo.bike/api/v1/robots-check \ -H "Authorization: Bearer sk_live_yourkey" \ -H "Content-Type: application/json" \ -d '{"url": "https://example.com/"}'
200 OK
{ "ok": true, "result": { ... } }
Nôl allwedd API → Mesuredig, pris am alwad. Lefel am ddim ar gyfer yr offeryn rhyngweithiol uchod.
Check every page of your site, not one at a time
Pro connects Google Search Console, fetches every page Google skipped, every broken page and every page that ranks low, and writes what to fix on each one.
See how Pro works