robots.txt و ایندکس شدن بهتر SMF در گوگل

[kateb]

با سلام دوستان
من از این کد در روبات تکس استفاده کردم فکر میکنم نتیجه بهتری در ایندکس شدن گوگل داشت :

User-agent: *

Disallow: /forum/index.php?wap
Disallow: /forum/index.php?wap2
Disallow: /forum/index.php?imode
Disallow: /forum/index.php?type=rss
Disallow: /forum/index.php*sort
Disallow: /forum/index.php*prev_next
Disallow: /forum/index.php?PHPSESSID=
Disallow: /forum/Smileys
Disallow: /forum/Themes
Allow: /forum/index.php?action=forum*
Allow: /forum/index.php?action=tags*
Allow: /forum/index.php?action=sitemap*
Allow: *forum/index.php/topic*
Allow: *forum/index.php/board*

User-agent: Googlebot-Mobile
Allow: /forum/index.php?wap
Allow: /forum/index.php?wap2

User-agent: Slurp
Allow: /forum/index.php?wap
Allow: /forum/index.php?wap2

Sitemap: [مهمان/کاربر گرامی برای دیدن لینک ها ابتدا باید عضو سایت شوید و لاگین کنید برای ثبت نام اینجا کلیک کنید]