ρομπότ.txt & Sitemap Tester
Εισάγετε οποιοδήποτε URL site. Φέρνουμε τα ρομπότ.txt και sitemap.xml από τον διακομιστή μας, σας δείχνουν τις οδηγίες crawl και δήλωσε sitemaps, και σημαία το query-string sitemap URLs που προκαλούν δύο φορές-περιεχομένου demotions.
Πώς να δοκιμάσετε ένα ρομπότ.txt και sitemap.xml
Τέσσερα βήματα, χωρίς εγγραφή.
Επικόλληση URL ιστοσελίδας
Εισάγετε το URL της αρχικής σελίδας του site. Δεν χρειάζεσαι όλο το μονοπάτι για τα ρομπότ.txt, γιατί το αντλεί από τον ξενιστή.
Παίρνουμε από τον σέρβερ μας.
Ο διακομιστής μας ζητά ρομπότ.txt και κάθε δηλωμένο sitemap.xml, έτσι το τεστ δεν μπλοκάρεται από το πρόγραμμα περιήγησης ή τη δική σας κρύπτη.
Διαβάστε τις οδηγίες και sitemaps
Αναθεωρήστε τις ομάδες χρηστών-πράκτορα, τους κανόνες απαγόρευσης και τον κατάλογο των δηλούμενων sitemaps, με ένα δείγμα URL από κάθε μία.
Φτιάξε αυτό που σημαδεύεις.
Λύστε οποιαδήποτε αναζήτηση-χορδή ιστοσελίδα URLs ή μπλοκαρισμένες-αλλά-δείκτης συγκρούσεις πριν από μια μηχανή αναζήτησης υποβιβαστεί τα αντίγραφα.
Τι ελέγχει αυτός ο ελεγκτής
Τα ίδια φύλακας που τρέχουμε εσωτερικά πριν δημοσιεύσουμε μια μόνο σελίδα.
Οδηγίες για την εφαρμογή των οδηγιών
Παριστάνει κάθε ομάδα χρηστών-πράκτορα και τους κανόνες της για να μπορείτε να δείτε ακριβώς τι είναι μπλοκαρισμένο.
Δηλώθηκε sitemaps
Καταγράφει κάθε χάρτη ιστοχώρου που αναφέρεται σε ρομπότ.txt, φετίχ το καθένα, και αναφέρει τον τύπο και την μέτρηση URL του.
Ερωτηματολόγια με κορδόνια
Σημαίες-string sitemap URLs που σπέρνουν κοντά-αντιγράψτε σελίδες και να ενεργοποιήσετε δύο-περιεχομένου demotions.
Φέρτε υγεία
Τα αλιεύματα sitemap που δηλώθηκαν σε ρομπότ.txt ότι το σφάλμα, ανακατευθύνσεις, ή επιστροφή μη-XML. Αυτοί είναι σιωπηλοί δολοφόνοι.
Συχνές ερωτήσεις
Τρέξε το στον αγωγό σου.
Αυτός ο ελεγκτής τρέχει εξ ολοκλήρου στο server-side. Υποβάλλετε ένα URL, τα φέιζερ μας πίσω και τις παπαριές ρομπότ.txt και τα δηλωθέντα sitemaps, στη συνέχεια ξαναδιανέμει αυτή τη σελίδα με τα αποτελέσματα. Ένα πρόγραμμα REST API για CI/CD και έλεγχο χύδην είναι διαθέσιμο στα πληρωμένα σχέδια διαχείρισης. Βλέπε σχέδια →
Χρησιμοποιήστε το προγραμματισμένα
Κάθε εργαλείο είναι διαθέσιμο μέσω ενός επικυρωμένου REST API στα σχέδια Pro και API. Συνδέστε το με το CI, CMS ή ταμπλό σας.