سئوال در مورد: robots.txt

[iranbus]

دوستان robots.txt
چیه؟
از کجا میتونم یه نوشته شدشو دانلود کنم؟

دقیقاً کجا باید آپلود بشه؟ اینجا (/public_html) باید آپلود بشه؟

 

[SEOmoz]

آموزش نوشتن robots.txt ابتدایی تا پیشرفته

 

[iranbus]

آموزش نوشتن robots.txt ابتدایی تا پیشرفته

عالی دوست من .
ولی مشکل اینه که بنده برنامه نویسی بلد نیستم

کد آماده میخوام
یه جا نوشته بود اینو بذارید

User-agent: *
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /comments
allow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments

Sitemap: http://site.damane/sitemap.xml
sitemap: http://site.damane/sitemap.xml.gz



iهمین خوبه؟

 

[SEOmoz]

عالی دوست من .
ولی مشکل اینه که بنده برنامه نویسی بلد نیستم

کد آماده میخوام
یه جا نوشته بود اینو بذارید

User-agent: *
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /comments
allow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments

Sitemap: http://site.damane/sitemap.xml
sitemap: http://site.damane/sitemap.xml.gz



iهمین خوبه؟

دوست عزیز برنامه نویسی که در کار نیست.این نوشتن چند خط دستور ساده هست که خودتون براساس فولدر های هاستتون تعیین کنید شکل کلی وجود نداره

 

[cd3]

سلام.
چطور می تونم یه ادرس http://mysite.com/store.php رو از دسترس روبات خارج کنم...

 

[vahidrk]

سلام.
چطور می تونم یه ادرس http://mysite.com/store.php رو از دسترس روبات خارج کنم...

Block or remove pages using a robots.txt file - Webmaster Tools Help

User-agent: *
Disallow: /store.php$

فقط برای همین صفحست

 

[cd3]

سلام.
در گوگل وب مستر در قسمت Crawl Errors این پیغام رو داده
http://www.citybacklink.com/story.php?title=pest-control-florida
به تعداد 417 تا ولی توی سایت این صفحه وجود نداره چون که قالب رو عوض کردم..
یعدر در قسمت Blocked URLs قسمت ربوت گوگل Disallow: /story.php$ قرار دادم... ولی بازهم داره.. پیغام می ده..
حالا باید چه کار کنم!!!