نقل قول نوشته اصلی توسط Esi نمایش پست ها
سلام .

روی یکی از سرور ها که یک سایت بزرگ رو میزبانی می کنه ، یک مشکلی داریم .

cpu این سرور 4 هسته ای 3.0ghz هست و مشکلی توی لود تا حالا نداشته . مشکلی اصلی ما 4 گیگ رم هست . چون یک انجمن بزرگ رو پشتیبانی می کنه (سرور اختصاصی همین سایت هست ) بوت و روبات های یاهو و گوگل و msn ، وقتی داخل انجمن میان ، شروع به ایندکس کردن صفحات انجمن می کنن که بیش از 2 میلیون صفحه هست ، با این وجود ، بعد از مدت 24 یا 48 ساعت ، رم سرور بیش از 60 درصد پر میشه و دسترسی به سایت با اختلال مواجه میشه . یعنی پیام های database error و ... ظاهر می شوند . در حالی که در همین زمان لود سیستم کاملا عادی هست .

برای حل این مشکل چه پیشنهادی دارید ؟ آیا باید IP روبات های گوگل و یاهو را بست ؟
مشخصات :
cpanel/whm
csf firewall
برای حذف دسترسی اسپایدرهای سایت های جستجویی که خوشتون نمیاد سایتتون رو ایندکس کنن مطالب این تاپیک رو بخونید... (نوشته خودم هست، ممکنه ضعف هایی داشته باشه، خوشحال میشم تذکر بدید برطرف کنم)