robots.txt און סייטמאַפּע טעסטער
אַרײַנשרײַבן אַ וועבזייַטל URL. מיר אַרײַנשטעלן זײַן robots.txt און sitemap.xml פֿון אונדזער סערװירער, װײַזן אײַך די װײַזונגען און דערקלערט סײַטמאַפּס, און פֿלאַגירן די פֿראַגע־פֿאַרבײַט־סײַטמאַפּס URLס װאָס װײַזן אױף דופּליקאַט־אינפֿאָרמאַציע
ווי צו פּרובירן אַ robots.txt און סאַטעליט מאַפּע.xml
פֿיר שריט, ניט קיין צושטימען. דער װײַטער דורכקוק פֿאָרט זיך אױף דער סערװירער־סײַט
קלײַב אַלץ אױסselect-action
Enter any site's homepage URL. You don't need the full path to robots.txt, because we derive it from the host.
מיר אַרײַנשטעלן פֿון אונדזער סערװירער
אונדזער סערװירער װעט פֿרעגן robots.txt און װעלכע סײטמאַפּ.קסל, אַזוי דער דורכקוק איז ניט פֿאַרבינדן מיט אייער בלעטערער אָדער אייער אייגענעם קײן
לייענען די דירעקטיװן און סאָרטמאַפּס
איבערזעצן די פֿאַרקערטע ניצער־אַגענט גרופּעס, ניט צושרײַבן כּללים און דער רשימה פֿון דערקלערט סײַטמאַפּס, מיט אַ URL־פֿאָרעם פֿון װײַל
קלײַב אַלץ אױסselect-action
קלײַב אַלץ אױסQuery-string sitemap URLs or blocked-but-indexed conflicts before a search engine degrades the duplicates
װאָס דער טעסטער װײַזט
די זעלבע װירד־רײלן װאָס מיר לײגן אינערלעכערליכע איידער מיר װײַזן אײן בלעטער.
קלײַב אַלץ אױס
Parses each user-agent group and its Allow / Disallow rules so you can see exactly what's blocked.
סעלעקציע
קלײַב אַלץ אױסrobots.txt, אַרײַנשטעלן װידער און דערקלערן זײַן צײכן און URL װיפֿל
שריפֿטצײכן־פֿאַרבײדיקונג
פֿלאַגערן פֿראַגע־װירע סײַטמאַפּע URLס װאָס װײַזן אױס די דופּליקאַציע־װײַז און װײַזן אױס די דופּליקאַציע־אינפֿאָרמאַציע
װײַז פֿאָרױסװײַז
Catches sitemaps declared in robots.txt that error, redirect, or return non-XML. These are silent crawl killers.
פֿראַגעס
קלײַב אַלץ אױסundo-type
This tester runs entirely server-side. You submit a URL, our backend fetches and parses robots.txt and the declared sitemaps, then re-renders this page with the results. A programmatic REST API for CI/CD and bulk auditing is available on the paid managed plans. װײַז פּלאָמבירן →
ניצן עס פּראָגראַממירט
Every tool is available through one authenticated REST API on the Pro and API plans. Wire it into your CI, CMS, or dashboards.