مشکل در گوگل وبمستر robot tester

[hamid1101]

سلام

آدرس سایتی که این مشکل را داره بفرمایید تا بشه تست کرد.

از لحاظ ساختار این robots.txt که نوشته اید مشکلی نداره
البته اگر حجم sitemap های شما بیشتر از 10 مگابایت باشه و یا بیشتر از 50000 رکورد داخلش باشه٫ بهتره به جای اینکه همه اونها را داخل robots.txt بنویسید٫ یک فایل فهرست برای sitemap با پسوند xml درست کنید و لینک فایل مربوطه را بگذارید داخل robots.txt. فرمت فایل فهرست sitemap میتونه به شکل زیر باشه:

1 - فایل با عنوان مثلا sitemap_index.xml بسازید
2 - محتوی این فایل میتونه شبیه به زیر باشه:

<?xml version="1.0" encoding="UTF-8"?>
<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
   <sitemap>
      <loc>http://www.example.com/sitemap1.xml</loc>
      <lastmod>2012-10-01T18:23:17+00:00</lastmod>
   </sitemap>
   <sitemap>
      <loc>http://www.example.com/sitemap2.xml</loc>
      <lastmod>2012-01-01</lastmod>
   </sitemap>
</sitemapindex>

البته توی وردپرس پلاگین هایی مانند yoast این کار را خودشون انجام میدهند.