roboty.txt & Mapa strony Tester
Wprowadź dowolne URL strony. Pobieramy jego roboty.txt i sitemap.xml z naszego serwera, pokazujemy ci dyrektywy wiozło i deklarowane mapy stron, a także znajdujemy URL-y listy stron witryn, które powodują democjację podwójnego zawartości.
Jak testować roboty.txt i sitemap.xml
Cztery kroki, bez rejestracji, cały czek jest na stronie serwera.
Wklej URL strony
Wpisz adres strony głównej dowolnej witryny. Nie potrzebujesz pełnej ścieżki do robots.txt, bo wyprowadzamy ją z hosta.
Pobieramy z naszego serwera
Nasz serwer wymaga robotów.txt i każdego zgłoszonego mapy strony.xml, więc test nie jest zablokowany przez przeglądarkę lub własne klawiatury.
Przeczytaj dyrektywy i mapy stron
Przeglądaj analizowane grupy agentów użytkownika, nie dopuszczaj zasad i listę deklarowanych map stron, z próbką URL z każdej.
Naprawić to, co jest pod kontrolą
Rozwiązać wszelkie URL-y strony w wierszu zapytania lub zablokowane- but-indeksowane konflikty, zanim wyszukiwarka demoluje kopie.
Co sprawdza ten tester
Te same trasy, które prowadzimy wewnętrznie przed wydaniem jednej strony.
Dyrektywy dotyczące przepływu
Analizuje każdą grupę agentów użytkownika i jej zasady Pozwolenie / Wykluczenie, aby móc zobaczyć dokładnie co jest zablokowane.
Ogłoszenia mapy stron
Wyświetla każdą mapę stron powołaną w robotach.txt, pobiera każdy z nich i zgłasza liczbę adresów.
Bloat zapytania-string
Flaga zapytanie-string mapy adresów URL, które nasadzają strony niedaleko-duplikacyjne i wywołują demolację zawartości dwustrukowych.
Pobierz zdrowie
Wychwytuje sitemapy zadeklarowane w robots.txt, które zwracają błąd, przekierowują lub zwracają coś innego niż XML. To ciche zabójcy skanowania.
Często zadawane pytania
Zajmij się tym.
Ten tester działa w całości po stronie serwera. Podajesz adres URL, nasz backend pobiera i analizuje robots.txt oraz zadeklarowane sitemapy, a potem ponownie renderuje tę stronę z wynikami. Programowe REST API dla CI/CD i audytów hurtowych jest dostępne w płatnych planach Managed. Zob. plany →
Użyj programu
Każde narzędzie jest dostępne przez jedno uwierzytelnione REST API w planach Pro i API. Podłącz je do swojego CI, CMS lub paneli.