اقا این robots.txt یعنی چه؟

[Mahiar0]

اقا این robots.txt یعنی چه؟

مثلا این
http://www.iranseo.com/robots.txt

چی باید گذاشت توش چه فایده ای داره؟

 

[Mahiar0]

نبود کسی جواب بده
الان برای www.tafrihi.com باید چطوری کنم؟

 

[robo]

http://www.robotstxt.org/wc/robots.html
اين سايت اختصاصيش هست. يك نگاهي بكنيد

اين فايل روبوتز تي اكس تي به موتور جستجو ميگه كه فلان دايركتوريها رو سرچ و آرشيو نكن!
براي اين جور موارد كاربرد داره

براي بهتر شده سرچ اگر ميخواهيد از خود متا تگ ها استفاده كنيد. سرچ كن: meta tag html

 

[amir abbas]

یه نگاهی هم به این بنداز

فایل robots.txt چیست و چگونه باید از آن استفاده کنیم

 

[شايان]

این هم همچنین http://www.google.com/intl/fa/faq.htm

 

[ODE112]

این هم همچنین http://www.google.com/intl/fa/faq.htm

تاپیکاشو اگه میگی که اینجاست!
http://www.google.com/support/webmasters/bin/topic.py?topic=8843&hl=en

 

[TehranNet]

خیلی باهاله

میهن بلاگ و بلاگفا هم دارند روی وبلاگها
البته بقیه رو نمیدونم
http://tehran-net.mihanblog.com/robots.txt
http://news.blogfa.com/robots.txt