بخصوص عناكب ياهو ..تتواجد بكثره ارجو امر منع ياهو من الارشفه الا فى وقت معين

السلام عليكم
اخوانى الافاضل ارجو معرفة الامر الخاص بتخفيض عدد عناكب ياهو المتواجد فى موقعى والامر على ما اعلم انه يوضع فى ملف ريبوت فأجو وضعه ان تكرمتم لانى وجدت امر ملف الريبوت الخاص بهذه العمليه ووضعه بالفعل من يومين فى ملف الريبوت لكن دون جدوى
وهذا هو الامر
User-agent: Slurp
Crawl-delay: 120
فهل هو صحيح ام ماذا او يوجد غيره لمنع عناكب ياهو من الدخول الا فى وقت معين لانها فعلا تحرق لي البنداويث

واكون شاكرا لكم
السلام عليكم ورحمة الله وبركاته