چطور فولدرهای حذف شده را از نتایج گوگل حذف کنیم

[sirramin]

من توی سایتم یه فولدر داشتم به اسم test
بعد اسم این فولدر رو عوض کردم گذاشتم tshirt
الان توی گوگل وب مستر قسمت crawler errors دائما ارورهایی برای فولدر test ظاهر میشه
کارهایی هم که کردم :
1. فولدر رو ریدایرکت 301 کردم به ادرس جدید (tshirt)
2. فولدر test رو توی robot.txt دیس الو کردم
3. درخواست remove url ثبت کردم

ولی بعد از یک ماه هنوز ارور میگیره گوگل

 

[asadiweb]

اگه همه این کار ها رو کردین دیگه تقریبا راه دیگه ای نمونده فقط باید صبر کنید

ارور ها رو فیکس کنید شاید بیخیال بشه

عجیبه با robot.txt سریع جواب میده

 

[Hamid2day]

زمان می بره
robotS.txt بهترین روش هست که اسپلیدر اجازه خوندن پوشه را ندی.

اگه میشه نمونه robot.txt برامون اینجا قرار بدید.

 

[sirramin]

این ادرس فایل روبات هست:
http://farsipresta.ir/robots.txt

 

[Hamid2day]

اینو بردار

# robots.txt automaticaly generated by PrestaShop e-commerce open-source solution # http://www.prestashop.com - http://www.prestashop.com/forums # This file is to prevent the crawling and indexing of certain parts # of your site by web crawlers and spiders run by sites like Yahoo! # and Google. By telling these "robots" where not to go on your site, # you save bandwidth and server resources. # For more information about the robots.txt standard, see: # http://www.robotstxt.org/wc/robots.html # GoogleBot specific

 

[sirramin]

برداشتم این اسلش ها چه تاثیری دارن؟
یعنی فرق موارد زیر چیه؟
Disallow: /test
Disallow: test/
Disallow: /test/
Disallow: test

 

[sirramin]

Test results

Url	Googlebot	Googlebot-Mobile
http://farsipresta.ir/formodules	Allowed	Allowed

با ابزاری که در خود گوگل هست تست میکنم فولدری که بلاک کردم رو میگه allowed!

 

[sirramin]

دوستان بنظر میاد robot.txt روی پوشه هایی که حذف شده اند تاثیری نداره چون دیگه وجود ندارد
راه بهتری برای حذف کردن نتایج وجود داره؟

 

[Hamid2day]

اینو یه دقیق بخون

فایل robots.txt چیست و چگونه باید از آن استفاده کنیم ؟

 

[Hamid2day]

اینو هم ببین

Robots.txt Generator - SEO Tools - Search Engine Optimization, Google Optimization