مشکل افزایش Load Averages سرور با پردازش imedated و خطای HANG: chkservd

[jamal]

سلام به دوستان گرامی

یک مشکل عجیبی که سرور سی پنل با اون مواجه شده اینه که بعد از مدت تقریباً 3 یا 4 روز که سرور به درستی کار می کنه، یک دفعه ای خطای HANG: chkservd از جانب WHM داده میشه.

در همین بین پردازشی با نام imedated که ارتباطی هم با systemd-timedated داره، یک هسته از CPU رو به خودش اختصاص میده و Load سرور رو بالا می بره!!

در این حالت تمامی سرویس های سرور به درستی کار می کنند. فقط مدام هر 15 دقیقه خطای HANG: chkservd داده میشه و لود هم بالاست.

زمانی که سرور یک بار Restart می شه مشکل رفع میشه، تا اینکه 3 یا 4 روز بعد، روز از نو ؛ روزی از نو ...!



در ضمن یکی از خطاهای دیگه ای که WHM میده، مربوط به یکی از RPM های مرتبط با cpanel-perl-524-LWP-UserAgent-DNS-Hosts هست که هر روز این خطا هم صادر میشه.

و باید دستور تعمیر RPM های سی پنل داده بشه که بعد از مدت زمانی دوباره خطا به حالت خودش بر می گرده.

/usr/local/cpanel/scripts/check_cpanel_rpms --fix

حالا معلوم نیست که اینم به اون خطای اول ارتباط داره یا خیر!؟


ممنون میشم از دوستان اگر راه حلی به ذهن شون میرسه بنده رو راهنمایی کنند.

[a1994n1373]

روی سرور فایروال و انتی ویروس کانفیگ شده دارید ؟ مثلا csf ؟

[jamal]

روی سرور فایروال و انتی ویروس کانفیگ شده دارید ؟ مثلا csf ؟

بله. Csf و آنتی ویروس clam نصبه...

[a1994n1373]

این رو اجرا کنید . نتیجشو بنویسید .

grep CPANEL= /etc/cpupdate.conf

[jamal]

CPANEL=stable

نسخۀ استیبل به حالت انتخابه.

v66.0.23

[Mr-Pro]

محتویات لاگ chkservd و tailwatchd رو چک کنید

/var/log/chkservd.log

/usr/local/cpanel/logs/tailwatchd_log

[jamal]

root [/]# tail  /var/log/chkservd.log
crond [[check command:+][socket connect:N/A]]...
cpsrvd [[http_service_auth:1][check command:N/A][socket connect:+]]...
cphulkd [[check command:+][socket connect:+]]...
cpdavd [[http_service_auth:1][check command:+][socket connect:+]]...
cpanellogd [[check command:+][socket connect:N/A]]...
cpanel_php_fpm [[check command:N/A][socket connect:N/A]]...
cpanel-dovecot-solr [[check command:+][socket connect:+]]...
clamd [[check command:+][socket connect:N/A]]...
apache_php_fpm [[check command:+][socket connect:N/A]]...Done
Service Check Finished

root [/]# tail  /usr/local/cpanel/logs/tailwatchd_log
[25173] [2017-09-24 18:30:00 +0330] [Cpanel::TailWatch::Eximstats] Resetting email limits to new starttime of 1506265200
[25173] [2017-09-24 18:46:13 +0330] [Cpanel::TailWatch] [INFO] tailwatch saving positions and reloading configuration on SIG
[25173] [2017-09-24 18:46:13 +0330] [Cpanel::TailWatch] [INFO] Flushing all readers
[25173] [2017-09-24 19:30:00 +0330] [Cpanel::TailWatch::Eximstats] Resetting email limits to new starttime of 1506268800
[25173] [2017-09-24 20:30:00 +0330] [Cpanel::TailWatch::Eximstats] Resetting email limits to new starttime of 1506272400
[25173] [2017-09-24 20:42:58 +0330] [Cpanel::TailWatch] [INFO] tailwatch saving positions and reloading configuration on SIG
[25173] [2017-09-24 20:42:58 +0330] [Cpanel::TailWatch] [INFO] Flushing all readers
[25173] [2017-09-24 21:07:34 +0330] [Cpanel::TailWatch::Eximstats] Loading email sending limits from 1506272400 - 1506276000
[25173] [2017-09-24 21:07:34 +0330] [Cpanel::TailWatch] [INFO] tailwatch saving positions and reloading configuration on SIG
[25173] [2017-09-24 21:07:34 +0330] [Cpanel::TailWatch] [INFO] Flushing all readers

با تشکر از دوستان...

- - - Updated - - -

علاوه بر موارد بالا؛
زمانی هم که سرور با مشکل خطاهای مذکور روبرو میشه، نتیجۀ دستور وضعیت سرویس timedated به این صورته:

root [/]# systemctl status systemd-timedated
● systemd-timedated.service - Time & Date Service
   Loaded: loaded (/usr/lib/systemd/system/systemd-timedated.service; static; vendor preset: disabled)
   Active: failed (Result: timeout) since Wed 2017-09-20 07:03:02 +0430; 46s ago
     Docs: man:systemd-timedated.service(8)
           man:localtime(5)
           http://www.freedesktop.org/wiki/Software/systemd/timedated
  Process: 9152 ExecStart=/usr/lib/systemd/systemd-timedated (code=killed, signal=TERM)
 Main PID: 9152 (code=killed, signal=TERM)


Sep 20 07:01:32 name.server.com systemd[1]: Starting Time & Date Service...
Sep 20 07:03:02 name.server.com systemd[1]: systemd-timedated.service start operation timed out. Terminating.
Sep 20 07:03:02 name.server.com systemd[1]: Failed to start Time & Date Service.
Sep 20 07:03:02 name.server.com systemd[1]: Unit systemd-timedated.service entered failed state.
Sep 20 07:03:02 name.server.com systemd[1]: systemd-timedated.service failed.

[Mr-Pro]

بازدید سایت های روی سرور به چه صورت هست ؟ چیز غیر عادی دیده نمیشه . به نظر میرسه فشار روی سرور باعث میشه یکی از سرویس ها ( timedated ) عملکرد غیر عادی داشته باشه . وب سرور آپاچی هست به تنهایی ؟ از varnish یا سایر موارد برای بالانس کردن لود سرور استفاده نمیکنید ؟

آیا مشکلی که پیش میاد در بازه های زمانی خاص یا ساعتی خاص رخ میده ؟

[jamal]

بازدید سایت ها عادی است و هیچ مشکلی از این بابت وجود نداره.

اصلاً به همین دلیل هم هست که مشکوکه!

3 یا 4 روز همه چیز درست کار می کنه. بعد از اون یکدفعه لود به خاطر سرویس

timedated میره بالا!

وب سرور هم به تنهایی آپاچی است. لود بالانسینگ هم نداره.

آخرین باری که این مشکل پیش اومد بعد از زمانی بود که کران آپدیت WHM اجرا شد.


نتیجۀ دستور systemctl status systemd-timedated نشون میده که این سرویس از کار افتاده (در زمان ایجاد مشکل)!

[Mr-Pro]

یک مانیتورینگ انجام بدید ببینید که ساعت های پیش آمدن مشکل چه ساعاتی هست ؟ برای مثال اگر هر 3 روز یک بار در ساعت 8 شب مشکل پیش میاد ، میتونه به دلیل اجرای یک کران جاب باشه . چیزی که واضح هست اینه که خود سرویس timedated مشکلی نداره بلکه یک عامل دیگه باعث میشه که عملکردش غیر عادی بشه . مثلا یک کران جاب موقع اجرا شدن به این سرویس فشار بیش از حد میاره و باعث داون شدن process میشه . یک بار هم سعی کنید ببینید میتونید ارور Hang رو بازسازی کنید ؟ مثلا سرور رو ریست کنید و سرویس timedated رو kill کنید ببینید بازم شرایط اولیه ایجاد میشه ؟