پاسخ : این فایل برای robot وردپرس خوبه ؟
من قبلاَ در سیستم وردپرسی از کد زیر استفاده می کردم و واقعا هم جوابگو بودUser-agent: *البته کد زیر رو هم برای جلوگیری از هک و سورس و غیره گذاشته بودم که خواستین می تونین استفاده کنن
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /*?
Allow: /trackback/
Allow: /feed/
Allow: /comments/
Allow: /category/
Allow: /wp-content/uploads/
Disallow: /index.php # separate directive for the main script file of WP
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
پاسخ با نقل قول