دسترسي ربوت ها به صفحات من

[AccessDenied]

ضمن عرض سلام و خسته نباشيد يك سوال از مدير اين قسمت از فروم داشتم كه اگر لطف كنيد و جواب بديد يك دنيا ممنون ميشم.!
من چطوري ميتونم نوشته هاي داخل صفحات سايتم رو از دست ربوت ها دور نگه دارم؟
فرض كنيد من چند خط نوشته توي يكي از صفحات سايتم داشته باشم ولي نخوام كه هيچ موتور جستجويي اونو پيدا كنه؟ چه راهي وجود داره؟
ابهام دوم اينه كه اگه من صفحه اي داشته باشم كه فقط اعضاي سايت بتونن اونو ببين يعني براي پرينت شدن اون مطالب لازم باشه كاربر يوزر و پسورد وارد كنه تا بياد تو خوب. حالا گوگل ميتونه اين صفحه رو سرچ كنه؟ يعني گوگل يا هر ربوت ديگه ميتونه وارد اون صفحه بشه بدون وارد كردن رمز؟ يا اينكه ميشه با اين روش مطالب رو از دست ربوت ها در امان داشت و جايي درز نكنه؟
فرض كنيد ما بخوايم در مورد چيزايي توي يه قسمت سايت بحث كنيم كه هيچ كس ديگه اي نبايد بفهمه؟ همون قرار دادن يه قسمت چك كردن پسورد كافيه؟

 

[AccessDenied]

سوال دوم اينكه فيلترينگ ايران ربوت هست؟ يا دستي سايت ها فيلتر ميشن؟
و اگه ربوت هست ميتونه وارد صفحه اي بشه كه پسورد ميخواد تا مطالب رو از ديتاباس بكشه بيرون؟
و مثلا اونو توي نتايج جستجوي خودش ثبت كنه

 

[Arash_j13]

اینجا رو یه نگاه بکن خود گوگل توضیح داده که چه طور بعضی صفحات رو از دید روبوتها مخفی کنی
http://www.google.com/intl/fa/remove.html