اول: سایت هایی مانند آپارات ممکنه بیش از یک مقدار مشخص به بات ها اجازه فچ کردن سایت شون را ندهند.
دوم: در کنترل پنلی مانند cPanel به راحتی می توانید آن را در قسمت کرون جاب تعریف کنید.
سوم: برای جلوگیری از تایم اوت شدن هم باید در کد php خودتان یا در php.ini تنظیمات لازم را وارد کنید (ر.ک. گوگل)