گیر دادن گوگل به robots.txt سایت من. کمک کنید.

[mahdi120012]

توی گوگل وبمسترم دیدم یک پیغام خطا اومده که به فایل robots.txt سایتم گیر داده نمیدونم مشکل robots.txt سایت من چیه
لطفا ببینید مشکل از کجاست؟درضمن بازدید سایتم به شدت کاهش یافته
اینم ادرس ربات تکستم:
http://lroman.ir/robots.txtUser-agent: *
Allow: *
Disallow: /wp-admin/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Allow: /wp-content/uploads/
Sitemap: http://lroman.ir/sitemap.xml
Sitemap: http://lroman.ir/sitemap.xml.gz

[سیدرضا بازیار]

این کد که شما گذاشتید به هیچ دردی نمیخوره
یه کد دارم که بهینه شده. هم امنیت سایت شما رو بالا میبره هم باعث میشه سایت شما توی گوگل و موتور های جستجوگر دیگه بالا بیاد


################################################## #####
#TCJ Robots
# All Bots
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /wp-content/
Disallow:/wp-content/themes
Disallow:/wp-content/upgrade
Disallow:/wp-content/plugins
Disallow:wp-content/cache
Disallow:/wp-content/bps-backup
Disallow:/wp-content/languages
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /wp-
Disallow: /trackback
Disallow: /trackback/
Disallow: */trackback/*
Disallow: /*/trackback/$
Disallow: /author
Disallow: /wget/
Disallow: /httpd/
Disallow: /cgi-bin
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /search
Disallow: /feed
Disallow: /feed/
Disallow: /rss
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /useronline/
Disallow: /*?
Disallow: /*.xhtml$
Disallow: /stats*
Disallow: /about/legal-notice/
Disallow: /about/copyright-policy/
Disallow: /about/terms-and-conditions/
Disallow: /docs*
Disallow: /manual*
Disallow: /category/uncategorized*
Disallow: /bargozari
Disallow: /graphic
Disallow: /error_log
Disallow: /php.ini
Disallow: /xmlrpc.php
Allow: /wp-content/uploads/*.gif
Allow: /wp-content/uploads/*.png
Allow: /wp-content/uploads/*.jpg
Allow: /sitemap.xml.gz$
# Dugg Mirror
User-agent: duggmirror
Disallow: /
# disallow files ending with the following extensions
User-agent: Googlebot
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.cgi$
Disallow: /*.wmv$
Disallow: /*.php*
Disallow: /*.gz$
# Google AdSense
User-agent: Mediapartners-Google
Disallow:
#disallow WayBack archiving site
User-agent: ia_archiver
Disallow: /
# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://www.tv.balyan.ir/sitemap.xml
# END XML-SITEMAP-PLUGIN
################################################## #####

- این کد توسط توسعه دهندگان وردپرس تایید شده!
- لینک سایت balyan.ir رو تغییر بدید و لینک سایت خودتون رو بزارید
- سایت مپ رو فعال کنید

[SASAN-BSE]

این سایت هم برا بهینه کردن robots بدرد میخوره:
The Web Robots Pages (http://www.robotstxt.org/robotstxt.html)

[CentralClubs]

ممکنه مشکل موقت در دسترسي به سرور باشه که در نمودار گوگل وب مستر دقيقا نشون ميده. پس ممکنه يک خطاي مقطعي بوده که رفع شده، اما کمي طول ميکشه تا دوباره چک مارک اون به صورت سبز در بياد. اما اگر طي روزهاي گذشته خطايي در نمودار نميبينيد، مشکلي وجود نداره و جک‌مارک سبز هم درست خواهد شد