نمایش نسخه قابل چاپ
توی گوگل وبمسترم دیدم یک پیغام خطا اومده که به فایل robots.txt سایتم گیر داده نمیدونم مشکل robots.txt سایت من چیه
لطفا ببینید مشکل از کجاست؟درضمن بازدید سایتم به شدت کاهش یافته
اینم ادرس ربات تکستم:
http://lroman.ir/robots.txtUser-agent: *
Allow: *
Disallow: /wp-admin/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Allow: /wp-content/uploads/
Sitemap: http://lroman.ir/sitemap.xml
Sitemap: http://lroman.ir/sitemap.xml.gz
این کد که شما گذاشتید به هیچ دردی نمیخوره
یه کد دارم که بهینه شده. هم امنیت سایت شما رو بالا میبره هم باعث میشه سایت شما توی گوگل و موتور های جستجوگر دیگه بالا بیاد
- این کد توسط توسعه دهندگان وردپرس تایید شده!نقل قول:
################################################## #####
#TCJ Robots
# All Bots
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /wp-content/
Disallow:/wp-content/themes
Disallow:/wp-content/upgrade
Disallow:/wp-content/plugins
Disallow:wp-content/cache
Disallow:/wp-content/bps-backup
Disallow:/wp-content/languages
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /wp-
Disallow: /trackback
Disallow: /trackback/
Disallow: */trackback/*
Disallow: /*/trackback/$
Disallow: /author
Disallow: /wget/
Disallow: /httpd/
Disallow: /cgi-bin
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /search
Disallow: /feed
Disallow: /feed/
Disallow: /rss
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /useronline/
Disallow: /*?
Disallow: /*.xhtml$
Disallow: /stats*
Disallow: /about/legal-notice/
Disallow: /about/copyright-policy/
Disallow: /about/terms-and-conditions/
Disallow: /docs*
Disallow: /manual*
Disallow: /category/uncategorized*
Disallow: /bargozari
Disallow: /graphic
Disallow: /error_log
Disallow: /php.ini
Disallow: /xmlrpc.php
Allow: /wp-content/uploads/*.gif
Allow: /wp-content/uploads/*.png
Allow: /wp-content/uploads/*.jpg
Allow: /sitemap.xml.gz$
# Dugg Mirror
User-agent: duggmirror
Disallow: /
# disallow files ending with the following extensions
User-agent: Googlebot
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.cgi$
Disallow: /*.wmv$
Disallow: /*.php*
Disallow: /*.gz$
# Google AdSense
User-agent: Mediapartners-Google
Disallow:
#disallow WayBack archiving site
User-agent: ia_archiver
Disallow: /
# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://www.tv.balyan.ir/sitemap.xml
# END XML-SITEMAP-PLUGIN
################################################## #####
- لینک سایت balyan.ir رو تغییر بدید و لینک سایت خودتون رو بزارید
- سایت مپ رو فعال کنید
این سایت هم برا بهینه کردن robots بدرد میخوره:
The Web Robots Pages
ممکنه مشکل موقت در دسترسي به سرور باشه که در نمودار گوگل وب مستر دقيقا نشون ميده. پس ممکنه يک خطاي مقطعي بوده که رفع شده، اما کمي طول ميکشه تا دوباره چک مارک اون به صورت سبز در بياد. اما اگر طي روزهاي گذشته خطايي در نمودار نميبينيد، مشکلي وجود نداره و جک‌مارک سبز هم درست خواهد شد