کند شدن سایت و مصرف زیاد منابع توسط GoogleBot
سلام
مدتیه وضعیت مصرف منابع در یکی از هاست های اشتراکی ما به این شکل هست :
DDSERVER.png
نه مشکلی در سایت هست و نه بازدید کننده زیاد شده . خیلی تلاش کردیم بلاخره متوجه شدیم مشکل از ربات گوگل هست
زمانی که برای ازمایش این مساله رنج ایپی های ربات گوگل رو بلاک کردیم همه چیز به حالت عادی برگشت و مصرف منابع به زیر 20 درصد رسید و همه چی سبز شد . اما به محض ازاد کردن ایپی های گوگل مصرف منابع خیلی زیاد میشه و سایت به شدت کند میشه
از گوگل وبمستر بررسی کردیم میزان Crawl rate روی Let Google optimize for my site بود لیمیتش کردیم ولی بازم تاثیری نداشت . نمیدونم همون لحظه که لیمیتش میکنیم باید تاثیر رو ببینیم یا نه
به هر حال الان این مشکل رو داریم . کسی راه حلی برای رفع مشکل داره ؟
پاسخ با نقل قول
