سلام آقا محمد ببخشید ولی من فکر میکنم شما اشتباه میکنید
طبق اطلاعات صفحه پرسش و پاسخ گوگل >>> Robot.txt يک سند استاندارد است که به روبات گوگلی ميگويد چه اطلاعاتی از سرور وب شما را ذخيره نکند.
یعنی فقط Disallow
ضمنا اگر میخواستم برداشت دلخواه خودم رو بکنم دیگه اینجا سوال نمیکردم
ممنون از وقتی که گذاشتید

[مهمان/کاربر گرامی برای دیدن لینک ها ابتدا باید عضو سایت شوید و لاگین کنید برای ثبت نام اینجا کلیک کنید]