اینو داخل روبوت بنویس

User-agent: *
Allow: /Your dir/
جای dir اسم اون پوشه رو بنویس!!!