با درود
من یه مشکلی با robots.txt دارم ، از گوگل وب مستر پیغام Url blocked by robots.txt میدهد . چطور میتوانم برطرفش کنم
محتوانی فایل ربات من به شکل زیر است
User-agent:
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes
Disallow: /wp-content/cache
Disallow: /trackback
Disallow: */trackback
Allow: */feed
Allow: /feed
Allow: /wp-content/themes/
Allow: /upload/
Allow: /upload/*/
Allow: /tag/
Allow: /tag/*
Allow: /wp-content/uploads/
Allow: /wp-content/uploads/*.gif
Allow: /wp-content/uploads/*.png
Allow: /wp-content/uploads/*.jpg
Sitemap: http://irsfe.in/sitemap_index.xml