Roboti.txt & Sitemap Tesper
Tunaingia katika eneo lolote la URL. tunaokota roboti zake na tovuti ya ektamp.xml kutoka kwa kampuni yetu, tunawaonyesha miongozo ya kutambaa na kutangaza tovuti za wavuti, na tunaweka bendera kwenye tovuti inayoweza kushindilia URU za namna ya uume na hisia.
Jinsi ya kupima roboti.tksap na Webml
Hatua nne, hakuna ishara.
Pasha hapo
Ingiza ukurasa wowote wa nyumbani wa tovuti hiyo. Huhitaji njia kamili ya kuelekea roboti.txt Étupple kutoka kwa mkaribishaji.
Tunakaribishwa kutoka kwa mhudumu wetu
Mfanyakazi wetu anaomba roboti.tksketi na kila kifaa kinachotangazwa kuwa cha kompyuta, kwa hiyo mtihani huo si kizuizi kwa kifaa chako cha kuchezea au mahali ulipohifadhi.
Soma mielekezo na picha za vituo
Pitia tena kikundi cha watumiaji wa mtandao, ondoa sheria na orodha ya tovuti zilizotangazwa, zenye sampuli ya URUL kutoka kwa kila kundi.
Fix kilichochongoka
Andaa mgogoro wowote unaozuia upigaji picha kabla ya injini ya utafutaji kufuta nakala.
Kile ambacho mtahini huyu huchunguza
Nasi huvuka mipaka hiyo kabla ya kuchapisha ukurasa mmoja.
Maagizo ya Crawl
Kila kundi la watumiaji na sheria zake na vipengele vyake vya ruhusa / Dlave ili uweze kuona kile hasa kilichozuiwa.
Tovuti zilizotangazwa
Orodha za kila kituo cha kompyuta kinachotajwa katika roboti.txt, huokota kila moja, na huripoti aina na kiwango chake.
Kigae - Chenye Kuning'inia
Bendera zinazoitwa query-stap URLs ambazo hu mbegu zinazokaribia kurasa zilizokatwa na kutokeza njia za kuondoa hisia.
Afya ya Fetch
Kwenye mashine, wanasaji walitangaza kuwa kuna makosa, wanaelekeza, au kurudi kwa wauaji wa kutambaa kimya - kimya wasio waXML.
Maswali yaliyoulizwa mara nyingi
Kimbieni ndani ya bomba lako
This tester runs entirely server-side — you submit a URL, our backend fetches and parses robots.txt and the declared sitemaps, then re-renders this page with the results. A programmatic REST API for CI/CD and bulk auditing is available on the paid managed plans. Ona mipango →
Litumie kwa kufuata utaratibu
Kila kifaa kinapatikana kupitia ndege moja ya Pro Pro na API inayotengeneza proni inayoiunganisha na PI, CMS, au bodibodi.