التحليل والفهرسة

مختبر robots.txt وخريطة الموقع

نحن نحصل على robots.txt و sitemap.xml من خادمنا، ونعرض عليك توجيهات البحث وخرائط المواقع المعلنة، ونشير إلى عناوين خرائط المواقع التي تسبب تخفيضات المحتوى المزدوج.

كيف يمكن اختبار robots.txt و sitemap.xml

أربع خطوات، لا تسجيل، التحقق كله يجري على جانب الخادم.

1

لصق عنوان الموقع

أدخل عنوان URL للصفحة الرئيسية لأي موقع. لا تحتاج إلى المسار الكامل لـ robots.txt، فنحن نستنتجه من المضيف.

2

نحن نحصل من خادمنا

خادمنا يطلب robots.txt و كل إعلان sitemap.xml، لذلك الاختبار لا يمنع من قبل متصفحك أو مخزنك الخاص.

3

قراءة التوجيهات وخرائط المواقع

استعراض مجموعات وكلاء المستخدمين المحللة، وقواعد عدم السماح وقائمة خرائط المواقع المعلنة، مع عينة من عنوان URL من كل منها.

4

إصلاح ما هو معلّم

حل أي عناوين URL لخارطة الموقع أو التنازع المحظور ولكن مفهرسة قبل محرك البحث يخفض الازدواجية.

ماذا يقوم هذا الاختبار بالتحقق منه

نفس الحواجز التي نقوم بها داخليا قبل نشر صفحة واحدة

📜

توجيهات البحث

يقوم بتحليل كل مجموعة من وكلاء المستخدم وقواعد السماح / عدم السماح الخاصة بها حتى يمكنك رؤية ما هو محجوز بالضبط.

🗺️

خرائط المواقع المعلنة

يعرض كل خريطة موقع مرجعة في robots.txt، ويحصل على كل واحد، ويبلغ عن نوعه وعدد العنوان.

⚠️

توسع سلسلة الاستفسار

تشير إلى عناوين URL لخارطة الموقع التي تنشر صفحات مكررة تقريبًا وتسبب تخفيضات المحتوى المكررة.

🔗

خذ الصحة

يلتقط خرائط sitemap المعلنة في robots.txt التي تعطي خطأ أو تعيد التوجيه أو تعيد محتوى غير XML. هذه قاتلات صامتة للزحف.

الأسئلة المتكررة

يمكن لعنوان URL واحد في خريطة الموقع أن ينشر الآلاف من الصفحات المزدوجة تقريبًا. محركات البحث تبحث عنها، وتجد نفس المحتوى تحت بارامترات مختلفة، وتخفض المجموعة بأكملها للمحتوى المزدوج. هذا الاختبار يعلمهم قبل أن يحدث ذلك.
لا. إن ملف robots.txt المفقود أو الفارغ يسمح ببساطة بجميع عمليات البحث. والمخاطرة هي العكس: عدم السماح الواسع النطاق الذي يحول دون فهرس الصفحات التي تريد فهرسة، أو خريطة الموقع المعلنة في ملف robots.txt التي تعيد خطأ.
لا، نحن نحصل على robots.txt وخرائط المواقع التي تعلنها، ثم نقرأ عينة من العنوان من كل منها. نحن لا نقوم بإعادة اكتشاف كل صفحة، لذا فإن الاختبار سريع ولن يحمل خادمك.
نعم، الاختبار مجاني دون التسجيل. الوصول البرمجي من خلال REST API متاح على الخطط المدفوعة المدارة.
للمطورين

أخرجها من أنبوبك

يعمل هذا المختبِر بالكامل على جانب الخادم. ترسل عنوان URL فيجلب خادمنا ملف robots.txt وخرائط sitemap المعلنة ويحللها ثم يعيد عرض هذه الصفحة بالنتائج. تتوفر واجهة REST API برمجية لـ CI/CD والتدقيق الجماعي في الباقات المُدارة المدفوعة. انظر الخطط →

رابطة تطوير البرمجيات

استخدامها برنامجيا

كل أداة متاحة عبر واجهة REST API واحدة موثّقة في باقتي Pro وAPI. اربطها بنظام CI أو نظام إدارة المحتوى أو لوحات المعلومات لديك.

curl -X POST https://seo.bike/api/v1/robots-check \ -H "Authorization: Bearer sk_live_yourkey" \ -H "Content-Type: application/json" \ -d '{"url": "https://example.com/"}'
200 OK 200 OK 200 OK
{ "ok": true, "result": { ... } }
الحصول على مفتاح API → معدلات التسعير حسب المكالمة، ومستويات مجانية للأداة التفاعلية المذكورة أعلاه.
افحص كل صفحات موقعك، لا صفحة واحدة في كل مرة
يربط Pro حساب Google Search Console، ويجلب كل صفحة تخطاها Google وكل صفحة معطلة وكل صفحة ترتيبها منخفض، ويكتب ما يجب إصلاحه في كل منها.
اعرف كيف يعمل Pro