Жуткие тормоза

[mymymy]

Был сервер, спокойно крутился ни один год, на нем почта,веб,VPN и прочие стандартные роли.Потому железо умерло в очередной раз и снова пришлось переносить на новое рабочую систему.
При последнем переносе было добавлено новое зеркало посредством gmirror (2 винта по 500)
Теперь стало происходить следующее: сутки сервер работает как часы,потом начинает жутко тормозить, службы не останавливаются,но не отвечают по таймауту на своих портах. Если ребутнуть-все опять работает как часы.

Код: Выделить всё

FreeBSD 6.2-RELEASE FreeBSD 6.2-RELEASE #1: Fri May  9 15:12:58 NOVST 2008   /usr/obj/usr/src/sys/main_kernell.my  i386

Filesystem            Size    Used   Avail Capacity  Mounted on
/dev/mirror/gm0s1a    965M    139M    750M    16%    /
devfs                 1.0K    1.0K      0B   100%    /dev
/dev/mirror/gm0s1e     30G    5.5G     22G    20%    /usr
/dev/mirror/gm0s1d    4.7G    1.7G    2.6G    40%    /var
/dev/mirror/gm1s1d    451G     20G    395G     5%    /GM1
devfs                 1.0K    1.0K      0B   100%    /var/named/dev

#systat

                    /0   /1   /2   /3   /4   /5   /6   /7   /8   /9   /10
     Load Average

                    /0   /10  /20  /30  /40  /50  /60  /70  /80  /90  /100
             <idle> XXXXXXXXXXXXXXXXXXXXXXXX
root           idle XXXXXXXXXXXXXXXXXXXXXXXX

Из железа все старое, кроме матери,камня, памяти и 2х винтов GM1

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[mymymy]

Код: Выделить всё

#top
last pid: 46667;  load averages:  0.00,  0.01,  0.03                                                                                 up 0+20:18:32  09:38:16
125 processes: 1 running, 124 sleeping
CPU states:  0.6% user,  0.0% nice,  0.6% system,  1.1% interrupt, 97.8% idle
Mem: 628M Active, 129M Inact, 157M Wired, 46M Cache, 108M Buf, 3184K Free
Swap: 2000M Total, 16K Used, 2000M Free

  PID USERNAME   THR PRI NICE   SIZE    RES STATE    TIME   WCPU COMMAND
39010 openfire    14  20    0   452M   308M kserel  10:36  0.00% java
 3230 www          1  20    0 27016K 17352K lockf    2:13  0.00% httpd
11924 www          1  20    0 27008K 17200K lockf    2:12  0.00% httpd
12179 www          1  20    0 27292K 17480K lockf    2:09  0.00% httpd
12205 www          1  20    0 28092K 18296K lockf    2:09  0.00% httpd
20275 www          1  20    0 27008K 17200K lockf    2:06  0.00% httpd
39544 www          1  20    0 26724K 16912K lockf    1:58  0.00% httpd
 2219 mysql       19  20    0   328M 84044K kserel   1:57  0.00% mysqld
  855 bind         1  96    0 14224K 13192K select   1:53  0.00% named
 1342 root         1  96    0  6944K  4908K select   1:27  0.00% snmpd
  642 root         1  96    0  1568K  1068K select   1:03  0.00% natd
  924 root         1  96    0 20080K  1948K select   0:22  0.00% server_linux
  922 root         1  96    0 20080K  1948K select   0:21  0.00% server_linux
  912 root         1  96    0 20080K  1948K select   0:19  0.00% server_linux
  911 root         1  96    0 20080K  1948K select   0:19  0.00% server_linux
 4459 www          1  20    0 27000K 17260K lockf    0:18  0.00% httpd
12193 www          1  20    0 27008K 17204K lockf    0:14  0.00% httpd
12220 www          1   4    0 27008K 17264K select   0:13  0.00% httpd
20366 www          1  20    0 27000K 17184K lockf    0:08  0.00% httpd
 1611 clamav       2   4    0   102M   101M select   0:06  0.00% clamd
 1308 stunnel      4  20    0  5336K  3844K kserel   0:06  0.00% stunnel
 1371 root         1  96    0  1424K  1000K select   0:04  0.00% rinetd
  925 root         1   8    0 20080K  1948K nanslp   0:04  0.00% server_linux
 1048 root         1  96    0  1476K  1160K select   0:04  0.00% dovecot
 1633 admin        1  96    0  6288K  2940K select   0:02  0.00% sshd
 1409 root         1  96    0  3172K  3192K select   0:02  0.00% ntpd
45350 mailnull     1  -4    0 10688K  3148K ufs      0:02  0.00% imap
 1854 dovecot      1  96    0  2576K  1512K select   0:02  0.00% pop3-login
 1057 root         1  96    0  2256K  1620K select   0:02  0.00% dovecot-auth
  913 root         1  96    0 20080K  1948K select   0:02  0.00% server_linux
 1613 root         1   8    0  5172K  4408K nanslp   0:01  0.00% perl5.8.8
 1517 root         1  96    0 22552K 12272K select   0:01  0.00% httpd
22335 dovecot      1  96    0  2576K  1512K select   0:01  0.00% pop3-login
22337 dovecot      1  96    0  2576K  1512K select   0:01  0.00% pop3-login
  921 root         1   8    0 20080K  1948K nanslp   0:01  0.00% server_linux
  782 root         1  96    0  1380K  1084K select   0:01  0.00% syslogd
 3454 mailnull     1  96    0  6076K  2800K select   0:01  0.00% exim-4.69-0
  856 root         1   8   19 20080K  1948K nanslp   0:01  0.00% server_linux
 1550 root         1   8    0  1404K  1116K nanslp   0:00  0.00% cron
  910 root         1  96    0 20080K  1948K select   0:00  0.00% server_linux
46588 cacti        1   8    0 22800K 14088K nanslp   0:00  0.00% php
 1609 root         1   4    0  6292K  2916K sbwait   0:00  0.00% sshd
42052 root         1  96    0  2228K  1612K select   0:00  0.00% dovecot-auth
46623 cacti        1  -8    0 22788K 13788K piperd   0:00  0.00% php
 1636 root         1  20    0  5472K  3048K pause    0:00  0.00% csh
46652 cacti        1  -4    0 19800K 11084K vlruwk   0:00  0.00% php
 1250 root         1   4    0  2960K  2368K sbwait   0:00  0.00% stunnel
 1429 root         1  96    0  1288K   820K select   0:00  0.00% usbd
  987 root         1   4    0  2832K  1808K select   0:00  0.00% mpd
 1248 root         1   4    0  2960K  2368K sbwait   0:00  0.00% stunnel

c DNS все в порядке, загрузки проца нет, но по, например,ssh, отзывы на каждую команду достигают 5 сек. Мкоммандер вообще грузится по паре минут,зайти им в папку вообще практически невозможно

[mymymy]

Небольшая поправка,чтобы не ввести в заблуждение - службы отвечают на портах, но видимо из-за того что сервак корячит- некоторые из них вовремя не отвечают

[manefesto]

может харды тупят ?
загляни в крон

[mymymy]

что именно в кроне смотреть?

Код: Выделить всё

#diskinfo -tv /dev/mirror/gm1
/dev/mirror/gm1
        512             # sectorsize
        500107861504    # mediasize in bytes (466G)
        976773167       # mediasize in sectors

Seek times:
        Full stroke:      250 iter in   1.367314 sec =    5.469 msec
        Half stroke:      250 iter in   1.392388 sec =    5.570 msec
        Quarter stroke:   500 iter in   1.851244 sec =    3.702 msec
        Short forward:    400 iter in   2.237611 sec =    5.594 msec
        Short backward:   400 iter in   2.197573 sec =    5.494 msec
        Seq outer:       2048 iter in   0.261747 sec =    0.128 msec
        Seq inner:       2048 iter in   0.374016 sec =    0.183 msec
Transfer rates:
        outside:       102400 kbytes in   0.840528 sec =   121828 kbytes/sec
        middle:        102400 kbytes in   0.902437 sec =   113471 kbytes/sec
        inside:        102400 kbytes in   1.491352 sec =    68663 kbytes/sec

#diskinfo -tv /dev/mirror/gm0
/dev/mirror/gm0
        512             # sectorsize
        41173056512     # mediasize in bytes (38G)
        80416126        # mediasize in sectors

Seek times:
        Full stroke:      250 iter in   1.698795 sec =    6.795 msec
        Half stroke:      250 iter in   1.731406 sec =    6.926 msec
        Quarter stroke:   500 iter in   3.399707 sec =    6.799 msec
        Short forward:    400 iter in   2.778523 sec =    6.946 msec
        Short backward:   400 iter in   2.677807 sec =    6.695 msec
        Seq outer:       2048 iter in   0.348635 sec =    0.170 msec
        Seq inner:       2048 iter in   0.384970 sec =    0.188 msec
Transfer rates:
        outside:       102400 kbytes in   4.699587 sec =    21789 kbytes/sec
        middle:        102400 kbytes in   3.901310 sec =    26248 kbytes/sec
        inside:        102400 kbytes in   4.642533 sec =    22057 kbytes/sec

[angelas_]

По симптомам похоже на то, что системное зеркало тупит. Система на gm0? Чёт маловато 26мб/с для современных дисков. Только от этого не должен так тупить, хотя если там нагрузка на дисковую увеличивается, то мож. А ничего подозрителного не наблюдается по

Код: Выделить всё

systat -vmstat 1

?

[mymymy]

я уже смотрел, ничего страшного не увидел..
Зеркало тупит? было бы похоже,если бы в логах сыпались ошибки на одном из дисков,как у меня бывало,когда зеркало разваливалось.
Система на gm0,да. Диски там ,мягко говоря, со словом "современность" ничего общего не имеют. Скорость такая объясняется легко. Два старинных диска, разной геометрии. Дело в том, что gm0 на старом железе работало и не беспокоило..
На gm1 хранится немногочисленная почта, нагрузки на это зеркало ,можно сказать, почти нет

[mymymy]

проблема не в зеркалах была, заменено первое зеркало GM0,проблема осталась

[mymymy]

проблема решена. Ява хавала память и не отдавала