robots.txt আৰু সাইটমেপ পৰীক্ষাকাৰী
যিকোনো সাইটৰ URL লিখক। আমি আমাৰ চাৰ্ভাৰৰ পৰা ইয়াৰ robots.txt আৰু sitemap.xml লওঁ, আপুনি ক্ৰাউল নিৰ্দেশ আৰু ঘোষণা কৰা সাইটমেপ দেখুৱাওঁ, আৰু দ্বৈত-সমল নিম্নগামীতা সৃষ্টি কৰা প্ৰশ্ন-স্ট্ৰিং সাইটমেপ URLসমূহ ফ্ল্যাগ কৰোঁ।
robots.txt আৰু sitemap.xml কেনেকৈ পৰীক্ষা কৰা হয়
চাৰিটা পদক্ষেপ, কোনো নিবন্ধন নাই। সম্পূৰ্ণ পৰীক্ষা সেৱক-পৃষ্ঠত চলোৱা হয়।
সাইট URL পেইস্ট কৰক
যিকোনো সাইটৰ ঘৰ পৃষ্ঠা URL সুমুৱাওক। robots.txt ৰ সম্পূৰ্ণ পথৰ প্ৰয়োজন নাই - আমি ইয়াক হস্টৰ পৰা উদ্ভূত কৰোঁ।
আমাৰ চাৰ্ভাৰৰ পৰা আমি প্ৰাপ্ত কৰোঁ
আমাৰ চাৰ্ভাৰে robots.txt আৰু প্ৰতিটো ঘোষণা কৰা sitemap.xml অনুৰোধ কৰে, গতিকে পৰীক্ষা আপোনাৰ ব্ৰাউছাৰ বা আপোনাৰ নিজস্ব ক্যাশ দ্বাৰা বন্ধ কৰা নহয়।
নিৰ্দেশনা আৰু সাইটমেপ পঢ়ক
বিশ্লেষণ কৰা ব্যৱহাৰকাৰী-এজেন্ট দলসমূহ, নিষেধ নিয়মসমূহ আৰু ঘোষণা কৰা সাইটমেপৰ তালিকা, প্ৰত্যেকৰ পৰা এটা URL নমুনা সহযোগে পৰিদৰ্শন কৰক।
ফ্ল্যাগ কৰা বস্তু ঠিক কৰক
কোনো অনুসন্ধান ইঞ্জিনে নকলসমূহক নিম্নতৰ অৱস্থালৈ নিয়াৰ পূৰ্বে যিকোনো প্ৰশ্ন-স্ট্ৰিং সাইটমেপ URL অথবা ব্ৰেক কৰা-কিন্তু-সূচীভুক্ত দ্বন্দ্ব সমাধান কৰক।
এই পৰীক্ষাকাৰীয়ে কি পৰীক্ষা কৰে
এক পৃষ্ঠা প্ৰকাশ কৰাৰ আগতে আমি অভ্যন্তৰীণভাৱেও একে ধৰণৰ নিৰাপত্তাৰ ব্যৱস্থা ল’ব লাগিব।
ক্ৰাউল নিৰ্দেশনাসমূহ
প্ৰতিটো ব্যৱহাৰকাৰী-এজেন্ট দল আৰু ইয়াৰ অনুমতি / নিষেধ নিয়ম বিশ্লেষণ কৰে যাতে আপুনি সঠিকভাৱে কি নিৰোধিত হৈছে সেয়া চাব পাৰে।
ঘোষণা কৰা সাইটমেপসমূহ
robots.txt ত উল্লিখিত প্ৰতিটো সাইটমেপ তালিকাভুক্ত কৰে, প্ৰতিটো ফেচ কৰে, আৰু ইয়াৰ ধৰণ আৰু URL গণনা প্ৰতিবেদন কৰে।
প্ৰশ্ন-পংক্তি বিশাল
নিকট-নকল পৃষ্ঠাৰ বীজ আৰু নকল-সমগ্ৰৰ নিম্নতৰকৰণ ট্ৰিগাৰ কৰা query-string sitemap URLs ফ্লেগ কৰে।
স্বাস্থ্য প্ৰাপ্ত কৰক
robots.txt ত ঘোষণা কৰা সাইটমেপসমূহ ত্ৰুটি, পুনঃনিৰ্দেশ, অথবা নন-XML - নিঃশব্দ ক্ৰাউল কিলাৰসমূহ প্ৰাপ্ত কৰে।
প্ৰায়শঃ জিজ্ঞাসিত প্ৰশ্নসমূহ
আপোনাৰ পাইপলাইনত ইয়াক চলাওক
এই পৰীক্ষাকাৰী সম্পূৰ্ণ চাৰ্ভাৰৰ-পাৰ্শ্বত চলায় — আপুনি এটা URL দাখিল কৰে, আমাৰ বেকএন্ড robots.txt আৰু ঘোষণা কৰা সাইটমেপসমূহ ফেচ আৰু পাৰ্চ কৰে, তাৰ পিছত ফলাফলসমূহৰ সৈতে এই পৃষ্ঠা পুনৰ-ৰেণ্ডাৰ কৰে। CI/CD আৰু ব্যাপক অডিটিংৰ বাবে এটা প্ৰগ্ৰামিক REST API পৰিচালিত পৰিচালিত পৰিকল্পনাসমূহত উপলব্ধ। পৰিকল্পনাসমূহ চাওক →