robots.txt & Sitemap testas
Įveskite bet kokį svetainės URL. Mes gauname savo robotus.txt ir sitemap.xml iš mūsų serverio, parodyti jums ropling direktyvų ir deklaruoti Sitemap, ir vėliavos užklausų-streing Sitemap URL, kurie sukelia dvigubą turinį demotions.
Kaip išbandyti robots.txt ir sitemap.xml
Keturi žingsniai, be užregistravimo. Visas patikrinimas vykdomas serverio pusėje.
Įdėti tinklalapio URL
Įveskite bet kurios svetainės tinklalapio URL. Jums nereikia pilno kelio į robots.txt, nes mes jį išeiname iš šeimininko.
Mes gauname iš mūsų serverio
Mūsų serveris reikalauja robots.txt ir kiekvieną deklaruotą Sitemap.xml, todėl testas nėra užblokuotas jūsų naršyklė ar savo talpykla.
Skaityti direktyvas ir sitemap
Peržiūrėkite apie dorotas naudotojo ir agento grupes, neleidimo taisykles ir deklaruotų Sitemap sąrašą, su URL mėginį iš kiekvieno.
Pataisyti tai, kas pažymėta
Išspręsti bet užklausų eilėje Sitemap URL arba užblokuoti-bet-index konfliktų prieš paieškos sistema demotes dublikatus.
Ką šis testeris tikrina
Tą patį, prieš išleisdami vieną puslapį, bėgame viduje.
Vėjo laužo direktyvos
Aptinka kiekvieną vartotojų agentų grupę ir jos Leisti / Atleisti taisykles, kad jūs galite pamatyti tiksliai, kas yra užblokuota.
Deklaruoti tinklalapiai
Sąrašą kiekvieną svetalapis nuoroda į robots.txt, gauna kiekvieną, ir praneša jo tipą ir URL skaičių.
Užklausos eilinis kloatas
Žymos užklausos-styginių tinklalapių URL, kad sėkla beveik dubliuoti puslapius ir sukelti dvigubą turinį demotions.
Atvežimo sveikata
Sugavimo sitemap deklaruotas robots.txt kad klaida, nukreipimas, arba grąžinti ne XML. Tai tylūs roplių žudikai.
Dažnai užduodami klausimai
Paleiskite jį į dujotiekį
Šis testavimas veikia visiškai serverio pusėje. Jūs pateikiate URL, mūsų programinė sąsaja gauna ir parses robots.txt ir deklaruoti Sitemaps, tada vėl įspėjama šį puslapį su rezultatais. Programinė REST API CI / CD ir didelio audito yra mokamas valdomi planus. Žr. planus →
Naudoti jį programiškai
Kiekvienas įrankis yra prieinamas per vieną autentišką REST API Pro ir API planus. Įjunkite jį į savo CI, CMS, ar prietaisų skydelius.