کند شدن سایت و مصرف زیاد منابع توسط GoogleBot

[OMIDTU5]

سلام

مدتیه وضعیت مصرف منابع در یکی از هاست های اشتراکی ما به این شکل هست :

DDSERVER.png

نه مشکلی در سایت هست و نه بازدید کننده زیاد شده . خیلی تلاش کردیم بلاخره متوجه شدیم مشکل از ربات گوگل هست

زمانی که برای ازمایش این مساله رنج ایپی های ربات گوگل رو بلاک کردیم همه چیز به حالت عادی برگشت و مصرف منابع به زیر 20 درصد رسید و همه چی سبز شد . اما به محض ازاد کردن ایپی های گوگل مصرف منابع خیلی زیاد میشه و سایت به شدت کند میشه

از گوگل وبمستر بررسی کردیم میزان Crawl rate روی Let Google optimize for my site بود لیمیتش کردیم ولی بازم تاثیری نداشت . نمیدونم همون لحظه که لیمیتش میکنیم باید تاثیر رو ببینیم یا نه

به هر حال الان این مشکل رو داریم . کسی راه حلی برای رفع مشکل داره ؟

[hamid53214]

یا منابع رو افزایش بدید یا بازدید گوگل رو محدود کنید

[shayandavoudi]

از Search console > Settings > Site settings > Crawl rate تیک بخش Limit Google's maximum crawl rate رو بزنید و مقدار اون رو کم کنید.