robots.txt & Sitemap Tester
Unesite bilo koji URL stranice. Mi ćemo preuzeti robots.txt i sitemap.xml sa našeg servera, pokazati vam crawl direktive i deklarirane sitemaps, i označiti URL sitemap string upita koji uzrokuju duplikat sadržaja degradacije.
Robots.txt i sitemap.xml
Četiri koraka, bez registracije, cijela provjera se vrši na serveru.
Zalijepi URL stranice
Unesite URL početne stranice bilo koje stranice. Ne treba vam puni put do robots.txt, jer ga dobijamo od domaćina.
Dobili smo sa servera
Naš server traži robots.txt i svaki deklarirani sitemap.xml, tako da test nije blokiran od strane vašeg preglednika ili vašeg vlastitog cachea.
Pročitaj direktive i mape stranica
Pregledaj analizirane grupe korisnika-agenata, zabrani pravila i listu deklariranih sitemap-a, sa URL uzorkom iz svakog.
Popravi šta je označeno
Resolve any query-string sitemap URLs or blocked-but-indexed conflicts before a search engine degrades the duplicates.
Šta ovaj tester provjerava
Istim zaštitnim rukohvatima koje koristimo interno prije objavljivanja jedne stranice.
Direktive za crawl
Analizira svaku grupu korisničkih agenata i njena pravila dozvole/nedozvole tako da možete tačno vidjeti šta je blokirano.
Deklaracije
Popis svih sitemap referencirani u robots.txt, dohvaća svakizvještava o svojoj vrsti i URL broj.
Upit-string napuhavanje
Flags query-string sitemap URLs that seed near-duplicate pages and trigger duplicate-content demotions.
Dovedi zdravlje
Uhvatiti sitemaps deklarirane u robots.txt koji grešku, preusmjeravanje, ili vratiti non-XML. Ovo su tiho crawl ubice.
Često postavljana pitanja
Pokrenite ga u vašoj cijevi
Ovaj tester radi u potpunosti na strani servera. Pošaljete URL, naš backend dohvaća i analizira robots.txt i deklarirane sitemaps, zatim ponovno renderuje ovu stranicu sa rezultatima. Programski REST API za CI/CD i masovno auditiranje dostupno je na plaćenim upravljanim planovima. Vidi planove →
Koristi ga programski
Svaki alat je dostupan preko jednog autentificiranog REST API-ja na Pro i API planovima. Ožičite ga u vaš CI, CMS ili dashboard.