Back to Question Center
0

سيمالت: robots.txt: حظر جميع صفحات الويب باستثناء عدد قليل من صفحات الويب؟

1 answers:

لدي بعض الشكوك بشأن الروبوتات. تكست . لنفترض أن نطاقي هو ستاكوفيرفلو. كوم ،

أ) هل سيتم تنفيذ الشفرة التالية لكل برامج الزحف؟

  وسر-إدجنت: *عدم السماح: /السماح: / $
السماح: / a / $
السماح: / a / لوجين. فب
السماح: / a / لوجين. فب؟ العودة = / pligg / 
  1. قبول هتب: // ستاكوفيرفلو. كوم / سوف تقبل هتب: // ستاكوفيرفلو. كوم أيضا؟

  2. قبول هتب: // ستاكوفيرفلو. كوم / a /

  3. قبول هتب: // ستاكوفيرفلو. كوم / أ / تسجيل الدخول. فب

  4. قبول هتب: // ستاكوفيرفلو. كوم / أ / تسجيل الدخول. فب = ريتورن = / بليغ /

  5. عدم قبول أي صفحة أخرى على هتب: // ستاكوفيرفلو. كوم

ب) الذي هو الحق: الروبوتات. تكست أو روبوت. تكست ؟

6 days ago
سيمالت: robots.txt: حظر جميع صفحات الويب باستثناء عدد قليل من صفحات الويب؟
Reply