መዝገብ ቤትን ክፈት

robots.txt እና የጣቢያ ካርታ

ማንኛውንም ጣቢያ URL ያስገቡ. እኛ robots.txt እና sitemap.xml ከ ሰርቨርችን ጋር ማግኘት, የእርስዎን ክሮል መመሪያዎች እና የተገለጸው sitemaps, እና ምልክት የጠየቀ-ስዕል sitemap URLs ተመሳሳይ-ምስጢር demotions ምክንያት.

robots.txt እና sitemap.xml እንዴት እንደሚፈተሽ

አራት ደረጃዎች, ምንም መመዝገብ. ሁሉንም ማረጋገጫ ሰርቨር-በኩል ይሮጣል.

1

የጣቢያው URL

የጣቢያውን የቤት ገጽ URL ያስገቡ። ወደ robots.txt የሙሉ መንገድ አትፈልጉም ምክንያቱም ከሆስቴቱ እንወስዳለን።

2

ከሰርቨርችን ማግኘት እንችላለን

ሰርቨራችን robots.txt እና ሁሉ የተገለጸ sitemap.xml ይጠይቃል, ስለዚህ ሙከራ በእርስዎ መቃኛ ወይም የራስዎን ካሽ ውስጥ ተይዟል አይደለም.

3

የድረ ገጽ መተላለፊያ

የፈተነው ተጠቃሚ-አጋጣሚ ቡድኖች, ደንቦችን እና የታወቀው የጣቢያ መተግበሪያዎች ዝርዝር, ከእያንዳንዱ URL ምሳሌ ጋር ማየት.

4

የፊደል ቅርጽ፦ (_F)

የፍለጋ ፕሮግራም ተመሳሳይ ፊደሎችን ከመቀነስ በፊት ማንኛውንም የጠየቅ-ስዕል የጣቢያ ካርታ URLs ወይም የተከለከሉ-ግን-የተዘረዘሩ ግጭቶች መፍታት.

ይህ ምርመራ ምን እንደሚያረጋግጥ

አንድ ገጽ ከመፃፍ በፊት በውስጣችን የምናደርጋቸው ተመሳሳይ የደህንነት እርምጃዎች አሉን፡፡

📜

የቀን/ሰዓት ደንቦች

የእያንዳንዱን ተጠቃሚ-አጋጣሚ ቡድን እና የፈቀደ / ያልፈቀደ ደንቦችን ያጠናክር ስለዚህ ምን እንደተከለከለ በትክክል ማየት ይችላሉ።

🗺️

የጣቢያው መነሻ

robots.txt ውስጥ የተጠቀሰው የጣቢያ ካርታ ሁሉ ዝርዝር, ሁሉንም ማግኘት, እና ዓይነት እና URL ቁጥር ሪፖርት.

⚠️

የጥያቄ-ስዕል

የጣቢያው መተላለፊያ URLs ቅርንጫፎችን ተመሳሳይ ያደርጋሉ እና ተመሳሳይ-ምግብ ማስቀመጫዎችን ያነሳሳሉ

🔗

የጤና ሁኔታ

robots.txt ውስጥ የተገለጸ ስፍራ ማሳያ ይይዛል ስህተት, ወደ ሌላ ቦታ, ወይም XML ያልሆነ ይመለሳል. እነዚህ የሙቀት crawl killer ናቸው.

የሚጠየቁ ጥያቄዎች

አንድ ሴክሽን-ስዕል URL በአንድ ጣቢያ ማውጫ ውስጥ ሺዎች የቅርብ-የተጣራ ገጾች ሊተላለፍ ይችላል. የፍለጋ ማሽን ማግኘት, በተለያዩ ፓራሜትሮች ውስጥ ተመሳሳይ ይዘት ማግኘት, እና ተመሳሳይ ይዘት ሙሉ ክለሳ ዝቅ. ይህ ፈተና ይህ ከመድረሱ በፊት ፊርማዎች እነርሱ.
አይደለም. አንድ የሌለ ወይም ባዶ robots.txt በፍጥነት ሁሉ crawling ያስችላል. አደጋው የቀደመው ነው: አንድ ረጅም-በስፋት የማይፈቅድ ያ ገጾች መዝገብ ቤት ውስጥ ይፈልጋሉ ወይም ስህተት ይመለሳል robots.txt ውስጥ የተገለጸው የጣቢያ ካርታ.
አይደለም. እኛ robots.txt እና የጣቢያ ካርታዎች ያሳውቃል ማግኘት, ከዚያም ከእያንዳንዱ URLs ምሳሌ ማንበብ. እኛ recursively ገጽ ሁሉ አይጎተቱም, ስለዚህ ሙከራ ፈጣን ነው እና ሰርቨርዎን አይጫንም.
አዎ, የሙከራ ነጻ ነው ያለ ምዝገባ. በ REST API በኩል ፕሮግራም መዳረሻ በተቀመጠው የተስተዳደሩ ዕቅዶች ላይ ይገኛል.
ለተጠቃሚዎች

በፓይፕሊንዎ ውስጥ ይጫኑት

ይህ ፈተና በሙሉ ሰርቨር-በኩል ይሠራል. ዩአርኤል ይላኩ, የእኛ backend ማግኘት እና robots.txt እና የተገለጸው sitemaps, ከዚያም ውጤቶች ጋር ይህን ገጽ ይቀየራል. ለ CI / CD እና ብዛት ማረጋገጫ ፕሮግራም REST API በተቀመጠው የተስተዳደሩ ዕቅዶች ላይ ይገኛል. ዕቅድ →

የዳታ ፋይል

ፕሮግራም

ሁሉም መሣሪያዎች በፕሮ እና በፒአይፒ ፕሮግራሞች ላይ በአንድ የተረጋገጠ REST API ውስጥ ይገኛሉ. CI, CMS ወይም ዳሽቦርዶች ውስጥ ይጫኑት.

curl -X POST https://seo.bike/api/v1/robots-check \ -H "Authorization: Bearer sk_live_yourkey" \ -H "Content-Type: application/json" \ -d '{"url": "https://example.com/"}'
ትክክል
{ "ok": true, "result": { ... } }
የAPI ቁልፍ ማግኘት → የሜትር, በየጥሪው ዋጋ. ነጻ ደረጃ ለላይ ተለዋዋጭ መሣሪያ.
የጣቢያዎትን ገጽ ሁሉ ይመልከቱ፣ በአንድ ጊዜ አይደለም
Pro የጉግል ፈልግ ኮንሶል ይገናኛል፣ የጉግል የተሸሸገውን ገጽ ሁሉ፣ የተበላሸውን ገጽ ሁሉ እና ዝቅተኛ ደረጃ ያለውን ገጽ ሁሉ ይወስዳል፣ እና በእያንዳንዱ ላይ ምን መፍትሔ እንደሚያስፈልግ ይጽፋል.
Pro እንዴት እንደሚሰራ ይመልከቱ