🤖 Rale dosye

Robots.txt & Sitemap Tester

Nou fèmen robots.txt li yo ak sitemap.xml soti nan sèvè nou an, montre w direktiv crawl ak sitemaps deklare, epi flage URLs sitemap kesyon-string ki lakòz degreman kontni doub.

Ki jan yo teste yon robots.txt ak sitemap.xml

Kat etap, pa gen enskripsyon. Tout tès la kouri sou bò serveurs.

1

Kole URL sit la

Ou pa bezwen konnen wout konplè pou robots.txt — nou jwenn li nan sit la ki bay lòd la.

2

Nou jwenn li nan sèvè nou an

Sèvis nou an mande robots.txt ak chak deklare sitemap.xml, se konsa ke tès la pa bloke pa navigatè ou a oswa cache ou a.

3

Li direktiv yo ak sitemaps

Revizyon nan analize group-ajans itilizatè, pa pèmèt règleman yo ak lis la nan sitemaps deklare, ak yon URL echantiyon soti nan chak.

4

Koreksyon sa ki flage

Rezoud nenpòt ki URLs sitemap kesyonè-string oswa konfli bloke-men-indise anvan yon motè rechèch degrade doublons yo.

Ki sa teste a tcheke

Se menm kalite pwoteksyon nou itilize anndan anvan nou pibliye yon paj.

📜

Dirèksyon

Analize chak gwoup ajans itilizatè ak règleman Permèt/ Dezaktive li yo pou ou ka wè egzakteman sa ki bloke.

🗺️

Sitemaps deklare

Liy chak sitemap refere nan robots.txt, fèmen chak, ak rapòte kalite li yo ak kantite URL.

⚠️

Query-string bloat

Flags query-string sitemap URLs that seed near-duplicate pages and trigger duplicate-content demotions.

🔗

Rekipere sante

Captures sitemaps deklare nan robots.txt ke erè, redirije, oswa tounen non-XML - silendrik crawl killers.

Kesyon ki poze souvan

Yon sèl URL kesyon-string nan yon sitemap ka plante milye de paj ki prèske duplikat. Motè rechèch yo crawl yo, jwenn menm kontni an anba paramèt diferan, ak degrade tout klas la pou kontni duplikat. Sa a testeur flage yo anvan sa rive.
Pa gen. Yon robots.txt ki manke oswa vid sèlman pèmèt tout crawling. Risk la se opoze a: yon over-wide disable ki bloke paj ou vle endike, oswa yon sitemap deklare nan robots.txt ki retounen yon erè.
Nou fèmen robots.txt ak sitemaps li deklare, Lè sa a, li yon echantiyon nan URLs soti nan chak. Nou pa rekursif itilizasyon chak paj, se konsa tès la se vit ak pa pral chaje serveurs ou.
Wi, teste a se gratis san yo pa enskripsyon. Aksesib programatik via yon API REST se disponib sou plan yo manadjè peye.
⚙️ Pou pwogramè

Ekran

Testeur sa a kouri konplètman sou bò sèvè a - ou voye yon URL, backend nou an fèmen ak analiz robots.txt ak sitemaps deklare, Lè sa a, re-renderpage paj sak rezilta yo. Yon REST API programatik pou CI / CD ak enspeksyon gwo kantite se disponib sou plan yo ki peye ki jere. Gade plan yo →