robots. txt & साईटमाप तपासणीकर्ता
कोणत्याही साइट URL प्रविष्ट करा. आम्ही आपल्या सर्वर पासून त्याचे robots.txt आणि sitemap.xml मिळवा, तुम्हाला क्रॉल निर्देश आणि घोषित sitemaps दाखवा, आणि डुप्लिकेट-संदर्भ demotions कारणीभूत होणाऱ्या प्रश्न-स्ट्रिंग sitemap URLs ला फ्लॅग करा.
robots.txt आणि sitemap.xml चाचणी कशी करावी
चार चरण, नोंदणी नाही. सर्व चाचणी सर्वर- साइडवर चालते.
साइट URL चिकटवा
कुठल्याही स्थळाचे मुख्य पान URL प्रविष्ट करा. robots. txt करीता पूर्ण मार्गाची तुम्हाला आवश्यकता नाही, कारण ते यजमान पासून प्राप्त केले जाते.
सर्वर पासून प्राप्त करा
या यंत्रात यंत्राच्या प्रत्येक भागाला यंत्राच्या यंत्रणेशी जोडलेले असते, म्हणजेच यंत्राच्या प्रत्येक भागाला यंत्राच्या यंत्रणेशी जोडलेले असते.
निर्देशिका व साईटमाप वाचा
Review the parsed user-agent groups, disallow rules and the list of declared sitemaps, with a URL sample from each.
झेंडाबद्ध केलेले निश्चित करा
या यंत्रात यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, यंत्राच्या गतीचा अंदाज घेऊन, इ.
या तपासणीकर्ताने काय तपासले
या वृत्तपत्रात त्यांनी एकच पान प्रकाशित करून स्वतःला प्रसिद्ध केले.
क्रॉल निर्देशिका
प्रत्येक वापरकर्ता- प्रतिनिधी गट व त्याचे परवानगी द्या / परवानगी द्या नियम पारस करतो जेणेकरून तुम्ही नेमके काय प्रतिबंधित केले आहे ते पाहू शकता.
घोषित साईटमाप
प्रत्येक यंत्रावर एक यंत्रचालक असतो, ज्याला यंत्रचालक म्हणतात, आणि यंत्रावरील सर्व यंत्रे यंत्रचालक म्हणून ओळखली जातात.
क्वेरी- स्ट्रिंग ब्लॉट
गूगल प्ले स्टोअरवर उपलब्ध असलेल्या अनेक अॅप्समध्ये गूगल प्ले स्टोअर हे एकमेव अॅप आहे जे गूगल प्ले स्टोअरवर उपलब्ध आहे.
आरोग्य प्राप्त करा
robots.txt मध्ये घोषित केलेले साईटमाप कळवा जे चूक, पुनर्निर्देशन, किंवा XML न असलेली परत करते. हे शांत क्रॉल किलर आहेत.
वारंवार विचारले जाणारे प्रश्न
तुमच्या पाइपलाइन मध्ये चालवा
हे तपासणी पूर्णपणे सर्वर-बाजूने चालते. आपण URL सादर, आमचे बॅकएंड फेकते आणि robots.txt आणि घोषित साईटमाप विश्लेषण, मग परिणामांसह हे पान पुन्हा-रेंडर्स. CI / CD आणि बॅच ऑडिटिंगसाठी एक प्रोग्रामेटिक REST API मोफत व्यवस्थापित योजना उपलब्ध आहे. योजना →
प्रोग्रामद्वारे वापरा
प्रत्येक साधन प्रो आणि API योजनांवर एक प्रमाणित REST API द्वारे उपलब्ध आहे. आपल्या CI, CMS किंवा डॅशबोर्डमध्ये वायर करा.