أن يحدد التدقيق الموحد هذه الوحدة.
الحزمة تحدد الأداة المناسبة وهذه الصفحة تجمع الأدلة التفصيلية.
أداة
فاحص Robots.txt
راجع ما إذا كان robots.txt متاحًا وما إذا كانت القواعد قد تمنع صفحات مهمة.
الأفضل لـ إثبات دقيق مع أدلة خام
استخدم هذه الصفحة بعد أن يحدد التدقيق الموحد الوحدة التي تحتاج إلى تحقق أعمق.
أداة فحص مفردة
نفّذ فحصًا تقنيًا مركزًا
قد يؤدي robots.txt المضبوط بشكل سيئ إلى منع الزحف والفهرسة وموارد التحقق الإعلاني دون أن تلاحظ.
أدلة مباشرةدرجة الخطورةإجراءات تنفيذية
قد يؤدي robots.txt المضبوط بشكل سيئ إلى منع الزحف والفهرسة وموارد التحقق الإعلاني دون أن تلاحظ.
التركيز الأساسي
يفحص الملف المفقود وقواعد المنع العامة وما إذا كانت مسارات الإعلانات أو المحتوى معرضة للخطر.
الأخطاء الشائعة
قد يتسبب سطر واحد مثل `Disallow: /` أو غياب توجيه sitemap أو نسخ قواعد بيئة الاختبار في مشكلات خفية.