🤖 Ընտրեք...

robots.txt & Sitemap փորձարկիչ

Ընտրեք ցանկացած կայքի URL- ը։ Մենք վերցնում ենք դրա robots.txt և sitemap.xml ֆայլերը մեր սերվերից, ցույց ենք տալիս ձեզ մուտքագրման հրահանգները և հայտարարված կայքի քարտեզները, և նշում ենք հարցման տողերի կայքի քարտեզների URL- ները, որոնք պատճառ են դառնում կրկնօրինակ բովանդակության նվազեցման։

Ինչպես ստուգել robots.txt եւ sitemap.xml

Չորս քայլ, առանց գրանցման։ Ամեն ինչ ստուգվում է սերվերի կողմից։

1

Տեղադրել կայքի URL- ը

Ընտրեք ցանկացած կայքի էջը: Դուք չեք կարող ընտրել robots.txt-ի ամբողջական ուղին, քանի որ այն ստանալու համար պետք է մուտքագրեք սերվերի ուղին:

2

Մենք վերցնում ենք մեր սերվերից

Մեր սերվերը պահանջում է robots.txt և յուրաքանչյուր հայտարարված sitemap.xml, այնպես որ թեստը չի արգելափակվում ձեր բրաուզերի կամ ձեր սեփական քեշի կողմից։

3

Կարդալ հրահանգները և կայքի քարտեզները

Հետազոտել ընթերցված օգտվողի- գործակալի խմբերը, թույլ չտալ կանոնները և հայտարարված կայքի քարտեզների ցանկը, յուրաքանչյուրից URL օրինակով։

4

Փոխել նշվածը

Հաղթահարել ցանկացած հարցման-շարունակական sitemap URL-ներ կամ արգելափակված-բայց-ինդեքսիֆիկացված հակասություններ, մինչև որոնման համակարգը նվազեցնի կրկնօրինակները։

Ի՞նչ է ստուգում այս թեստավորիչը

Այն նույն արգելափակումները, որ մենք գործում ենք ներսում, մինչև որևէ էջ հրապարակելը։

📜

Ընտրեք դասավորությունը

Պարզաբանում է յուրաքանչյուր օգտատիրոջ- գործակալի խումբը և նրա թույլատրել/ արգելափակել կանոնները, որպեսզի դուք կարողանաք ճիշտ տեսնել, թե ինչն է արգելափակված։

🗺️

Ցուցադրել էջերի քարտեզները

Ստեղծում է robots.txt-ում նշված յուրաքանչյուր կայքի քարտեզը, վերցնում է յուրաքանչյուրը և հայտնում դրա տեսակը և URL-ի քանակը։

⚠️

Հարցման տողերի բազմացում

Ցույց է տալիս հարցման-շարունակական sitemap URL-ները, որոնք սերմանում են մոտավորապես կրկնվող էջեր և հանգեցնում կրկնվող բովանդակության նվազեցմանը։

🔗

Վերցրեք առողջությունը

Robots.txt-ում նշված ստեղնաշարերը, որոնք սխալ են, վերադառնում են կամ վերադարձնում են ոչ-XML-ը, անձայն crawl killers են։

Հաճախակի տրվող հարցեր

Սիթի քարտեզում մեկ հարցման տողով URL- ը կարող է հազարավոր մոտավորապես կրկնվող էջեր ստեղծել։ Փնտրումային համակարգերը որոնում են դրանք, գտնում նույն բովանդակությունը տարբեր պարամետրերի ներքո և իջեցնում ամբողջ խմբակը կրկնվող բովանդակության համար։ Այս թեստավորողը նշում է դրանք, մինչև դա տեղի ունենա։
Ոչ։ robots.txt-ի բացակայությունը կամ դատարկ լինելը թույլ է տալիս բոլոր էջերի որոնումը։ Հակառակ դեպքում վտանգավոր է՝ չափից շատ լայն disable-ը արգելափակում է էջերը, որոնք ցանկանում եք ինդեքսավորել, կամ robots.txt-ում հայտարարված կայքի քարտեզը, որը ետ է տալիս սխալ։
Ոչ։ Մենք ստանում ենք robots.txt-ը և կայքի քարտեզները, ապա կարդում ենք URL-ների օրինակը յուրաքանչյուրից։ Մենք չենք վերադարձնում յուրաքանչյուր էջը, այնպես որ թեստը արագ է և չի բեռնի ձեր սերվերը։
Այո, թեստավորողը անվճար է և գրանցում չի պահանջում։ REST API-ի միջոցով ծրագրային մուտք գործելը հասանելի է վճարովի կառավարվող պլանների դեպքում։
⚙️ Հեղինակների համար

Ձեր ջրատարում այն գործարկեք

Այս թեստավորողը ամբողջությամբ աշխատում է սերվերի կողմից, դուք ուղարկում եք URL, մեր backend-ը ստանում է և վերլուծում robots.txt-ը և հայտարարված sitemap-ները, ապա նորից ցուցադրում է այս էջը արդյունքներով։ CI/CD-ի և բազմաթիվ վերահսկողությունների համար ծրագրային REST API-ն հասանելի է վճարովի կառավարվող պլաններում։ Ցուցադրել պլանները →