من احتمال میدم سایتهای جمع کننده مطالب هست
طبق تجربم سعی کنید دیتابیس رو بشکونید.
بدین شکل که اگر مطالب رو میریزید در تیبل پست یا هرچیزی به این نام. بیایید برای 40 هزار تای اول تیبل یک تعریف کنید و... بدین شکل برید جلو از سیستم کش تو در تو استفاده کنید.
مثلا پستها رو ام دی 5 کنید بعد در فولدر کش 36 فوادر دارید و در داخل هر فولدر 36 فولدر دیگه تا 3 مرحله برید. و سعی کنید برای دیتا بیستون از سروری که هارد اس اس دی داره استفاده کنید و از 50% فضاش بیشتر استفاده نکنید و با پورت 3306 بهش کانکت شید فقط برای روبوت و موارد کش کردن.
غیر از این باشه سیستم مای اس کیو ال بالای 800 مگ که دی بی میره نیاز سخت افزاری تصاعدی میشه و به مشکل میخورید .
بهرحال ببخشید خارج از بحث سرور صحبت کردم.
- - - Updated - - -
تکمیلی:
حجم هر تیبل بیشتر از 500 مگ نشه و تعداد تیبل ها بیشتر از 1000 تا و اگر احتمال میدین بیشتر خواهد شد از چند دیتا بیس با موضوع بندی پشت پرده بهره بگیرید