Robots.txt & Sitemap Tester
Gitt eng URL vun enger Websäit an. Mir kréien hir robots. txt an sitemap. xml vun eisem Server, weisen Iech d'Crawl-Direktiven an deklaréiert Sitemapen, a markéieren d'Query-String Sitemap URLen déi duplizéiert Inhalter degradéieren.
Wéi een e robots.txt an sitemap.xml testen
Vier Schritte, keine Anmeldung. Die ganze Kontroll läuft auf Serverseite.
Site-URL bäifügen
Enter any site's homepage URL. You don't need the full path to robots.txt, because we derive it from the host.
Mir kréien et vun eisem Server
D'Säit ass net méi verfügbar. (de) D'Säit ass net méi verfügbar. (de) D'Säit ass net méi verfügbar.
Liest d'Direktiven a Sitemapen
D'Resultat vun der Analys ass eng Lëscht vun de méigleche Reaktiounen, déi an der Reaktioun mat der Uewerfläch vum Objekt geschitt sinn.
Fix wat markéiert ass
D'Spill ass op engem Computersystem baséiert, dat awer net mat engem Computerspill verglach ka ginn.
Wat dëse Tester iwwerpréift
D'Säit ass net méi online, mä gëtt op enger neier Säit publizéiert.
Crawl-Direktive
Analyséiert all User-Agent Grupp an hir Zuloossen/Verweigeren Regelen, fir datt Dir genau gesitt wat blockéiert ass.
Sitemaps deklaréiert
D'Sprooch ass an all deene Länner, an deenen et eng Verfassung gëtt, am allgemengen och am Staatssproocherecht festgehale ginn.
Query-String bloat
D'Säit ass op der Websäit vun der Gemeng Dudelange, déi och d'Lëscht vun de Gemengen an der Gemeng Dudelange enthält.
Gesundheit
Catches sitemaps declared in robots.txt that error, redirect, or return non-XML. These are silent crawl killers.
Häufig gestallt Froen
Lafen et an Ärer Pipeline
This tester runs entirely server-side. You submit a URL, our backend fetches and parses robots.txt and the declared sitemaps, then re-renders this page with the results. A programmatic REST API for CI/CD and bulk auditing is available on the paid managed plans. Planéit Planéit →
Programmatesch benotze
Every tool is available through one authenticated REST API on the Pro and API plans. Wire it into your CI, CMS, or dashboards.