مدقق استبعاد الروبوتات - امتداد SEO لـ Google Chrome
يعد هذا امتدادًا لـ تحسين محركات البحث strong> لـ Google Chrome وهو مفيد لأي مطور مواقع ويب لاختبار ما إذا كان قد تم حظر موقعه بواسطة برامج الروبوت strong>. txt أو meta robots .
الروبوتات strong> مدقق الاستبعاد strong> هي ميزة شائعة جدًا يستخدمها مشرفو المواقع على نطاق واسع للتحكم في البحث محرك الروبوتات strong> وبرامج زحف الويب التي تتصفح مواقع الويب. تستخدم محركات البحث الروبوتات strong> لفهرسة صفحات الويب على موقع الويب وفهرستها. لا يمكنهم قراءة HTML أو التعليمات البرمجية الأخرى الموجودة على موقع ويب. الروبوتات strong> تستخدم لتحديد ما إذا كان موقع الويب قد تم حظره بواسطة ملف robots .
بالإضافة إلى ذلك ، هناك وكيل مستخدم خاصية. يمكنك اختيار وكيل المستخدم لمحركات البحث لاختبار المواقع. باستخدام هذا ، ستتمكن من تحديد نوع الروبوت الذي يمكن لمحركات البحث الوصول إليه. هذا مفيد لأي مطور يحتاج إلى معرفة ما إذا تم حظر موقع الويب بواسطة الروبوتات strong>.