Подвисает система FreeBSd 8.0 stable + mpd5.4

kolovrat

День добрый, система стабильно работать на может, подвисает раз в сутки полностью система, спасает только ребут, всегда именно ночью, в /var/log/messages ничего нету в этот момент

Код: Выделить всё

FreeBSD interaaa 8.0-STABLE FreeBSD 8.0-STABLE #1: Thu Feb 25 13:25:27 EET 2010 kolovrat@interaaa:/usr/obj/usr/src/sys/GENERIC_ABILLS amd64

Может дело в тюнинге, переборщил??

Код: Выделить всё

/etc/sysctrl.conf

hw.pci.enable_msix=1
hw.pci.enable_msi=1
net.inet.tcp.blackhole=1
net.inet.udp.blackhole=1
kern.ipc.nmbclusters=262144
kern.ipc.shmall=65536
kern.ipc.shmmax=268435456
net.inet.tcp.blackhole=2
net.inet.udp.blackhole=1
kern.ipc.somaxconn=4096
kern.ipc.semmap=512
kern.maxfiles=204800
net.inet.ip.dummynet.io_fast=1
kern.maxfilesperproc=200000
kern.ipc.maxsockets=262144
net.graph.maxdgram=128000
net.graph.recvspace=128000
net.inet.tcp.recvspace=65536
net.inet.tcp.sendspace=65536
net.inet.icmp.icmplim=1000
net.inet.ip.intr_queue_maxlen=5000
net.inet.ip.fastforwarding=1
net.isr.direct=1
net.inet.tcp.maxtcptw=40960
net.inet.tcp.msl=30000
net.inet.tcp.nolocaltimewait=1
net.inet.tcp.fast_finwait2_recycle=1
kern.ipc.shm_use_phys=1

Код: Выделить всё

/boot/loader.conf

kern.ipc.nmbclusters=262144
kern.ipc.maxsockets=262144
net.inet.tcp.syncache.hashsize=1024
net.inet.tcp.syncache.bucketlimit=100
net.inet.tcp.tcbhashsize=4096
kern.ipc.nsfbufs=10240
kern.ipc.semmni=256
kern.ipc.semmns=512
kern.ipc.semmnu=256
hw.em.rxd=1024
hw.em.txd=1024
net.graph.maxalloc=4096
kern.maxusers=2048
kern.ipc.maxpipekva=536870912
kern.maxfiles=204800
net.graph.maxdata=2048
kern.maxfilesperproc=200000
kern.ipc.maxsockbuf=524288

В /log/mpd.log, последнее перед зависанием сервера, сервер подвис через 5 минут потом...

Mar 5 05:39:04 interaaa mpd: [B-5] IPCP: state change Ack-Rcvd --> Opened
Mar 5 05:39:04 interaaa mpd: [B-5] IPCP: LayerUp
Mar 5 05:39:04 interaaa mpd: [B-5] 10.21.0.145 -> 10.21.4.118
Mar 5 05:39:04 interaaa mpd: [B-5] IFACE: No interface to proxy arp on for 10.21.4.118
Mar 5 05:39:04 interaaa mpd: [B-5] IFACE: Up event
Mar 5 05:39:04 interaaa mpd: [B-5] IFACE: session-timeout limited to 1952257 seconds

подскажите куда копать...

сетевые карты интел стоят
на сервере до 400 клиентов, но трафик идет гдето 600 на 600 на одной сетевой карте, и примерно на второй столько же мегабит.

Хостинг HostFood.ru · **Хостинг HostFood.ru**

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

sch · Непрочитанное сообщение **sch** » 2010-03-06 14:29:50

пока не очевидно, что mpd вызывает зависание
5:40 это уже утро, а не ночь

если есть привязка по времени, то посмотри на задачи в crontab, может эти задания виноваты... например, запускается задача с нагрузкой на процессор, повышается температура и ОС зависает.

kolovrat

просмотрел задачи крона и на биллинге(он отдельно стоит) и на фрибсд, тоже самое на это время нету ничего. Также на фряхе стоит ещё радиус, ну и snmpd чтобы с него статистику снимать.

как можно отсделить проблему, т.к сама система никаких логов не кидает

сейчас заметил ещё что память wired, постоянно растет...

вывод команд некоторых

Код: Выделить всё

netstat -m
1194/1881/3075 mbufs in use (current/cache/total)
1191/1063/2254/262144 mbuf clusters in use (current/cache/total/max)
1191/985 mbuf+clusters out of packet secondary zone in use (current/cache)
0/20/20/131072 4k (page size) jumbo clusters in use (current/cache/total/max)
0/0/0/65536 9k jumbo clusters in use (current/cache/total/max)
0/0/0/32768 16k jumbo clusters in use (current/cache/total/max)
2701K/2676K/5377K bytes allocated to network (current/cache/total)
0/0/0 requests for mbufs denied (mbufs/clusters/mbuf+clusters)
0/0/0 requests for jumbo clusters denied (4k/9k/16k)
0/0/0 sfbufs in use (current/peak/max)
0 requests for sfbufs denied
0 requests for sfbufs delayed
0 requests for I/O initiated by sendfile
0 calls to protocol drain routines

Код: Выделить всё

free
SYSTEM MEMORY INFORMATION:
mem_wire:         102182912 (     97MB) [  4%] Wired: disabled for paging out
mem_active:  +     31027200 (     29MB) [  1%] Active: recently referenced
mem_inactive:+      9809920 (      9MB) [  0%] Inactive: recently not referenced
mem_cache:   +       155648 (      0MB) [  0%] Cached: almost avail. for allocation
mem_free:    +   1925611520 (   1836MB) [ 93%] Free: fully available for allocation
mem_gap_vm:  +       356352 (      0MB) [  0%] Memory gap: UNKNOWN
-------------- ------------ ----------- ------
mem_all:     =   2069143552 (   1973MB) [100%] Total real memory managed
mem_gap_sys: +     63295488 (     60MB)        Memory gap: Kernel?!
-------------- ------------ -----------
mem_phys:    =   2132439040 (   2033MB)        Total real memory available
mem_gap_hw:  +     15044608 (     14MB)        Memory gap: Segment Mappings?!
-------------- ------------ -----------
mem_hw:      =   2147483648 (   2048MB)        Total real memory installed

SYSTEM MEMORY SUMMARY:
mem_used:         211906560 (    202MB) [  9%] Logically used memory
mem_avail:   +   1935577088 (   1845MB) [ 90%] Logically available memory
-------------- ------------ ----------- ------
mem_total:   =   2147483648 (   2048MB) [100%] Logically total memory

Код: Выделить всё

top
last pid: 10671;  load averages:  0.64,  0.66,  0.48    up 0+00:20:55  14:53:26
30 processes:  1 running, 29 sleeping
CPU:  0.4% user,  0.0% nice, 14.9% system,  0.1% interrupt, 84.6% idle
Mem: 29M Active, 9552K Inact, 98M Wired, 152K Cache, 22M Buf, 1837M Free
Swap: 4067M Total, 4067M Free

  PID USERNAME    THR PRI NICE   SIZE    RES STATE   C   TIME   WCPU COMMAND
  897 root          2  76    0 36060K  8820K select  2   0:05  0.00% mpd5
  909 root          1  44    0 26640K  7376K select  1   0:03  0.00% snmpd
  934 root          6  44    0 48216K 14464K uwait   1   0:02  0.00% radiusd
  761 root          1  44    0  7020K  1568K select  3   0:01  0.00% syslogd
 4322 kolovrat      1  44    0 38068K  5104K select  2   0:00  0.00% sshd
  611 root          1  76    0  3204K   648K select  1   0:00  0.00% devd
 4420 root          1  44    0 10280K  2880K pause   3   0:00  0.00% csh
 4272 root          1  44    0 38068K  5056K sbwait  0   0:00  0.00% sshd
 1590 root          1  44    0 12072K  3940K select  1   0:00  0.00% sendmail
10577 root          1  44    0  9332K  2224K CPU1    1   0:00  0.00% top
 4372 kolovrat      1  44    0 21664K  2012K wait    2   0:00  0.00% su
 1611 root          1  44    0  7948K  1604K nanslp  0   0:00  0.00% cron
 4323 kolovrat      1  45    0  8260K  1880K wait    2   0:00  0.00% sh
 1874 root          1  76    0  6888K  1296K ttyin   3   0:00  0.00% getty
 1879 root          1  76    0  6888K  1296K ttyin   0   0:00  0.00% getty
 1878 root          1  76    0  6888K  1296K ttyin   3   0:00  0.00% getty
 1877 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1876 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1872 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1319 root          1  44    0 26136K  4464K select  3   0:00  0.00% sshd
 1875 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1873 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1594 smmsp         1  76    0 12072K  3892K pause   0   0:00  0.00% sendmail
  106 root          1  76    0  2740K  1076K pause   0   0:00  0.00% adjkerntz

kolovrat · Непрочитанное сообщение **kolovrat** » 2010-03-07 1:47:09

через 8 часов

Код: Выделить всё

top

last pid: 77703;  load averages:  0.37,  0.37,  0.34                           up 0+10:12:16  00:44:47
34 processes:  1 running, 33 sleeping
CPU:  0.0% user,  0.0% nice, 14.8% system,  1.1% interrupt, 84.1% idle
Mem: 45M Active, 30M Inact, 540M Wired, 152K Cache, 125M Buf, 1358M Free
Swap: 4067M Total, 4067M Free

  PID USERNAME    THR PRI NICE   SIZE    RES STATE   C   TIME   WCPU COMMAND
  897 root          2  44    0 43740K 13312K select  1   3:23  0.00% mpd5
  909 root          1  44    0 26640K  8368K select  1   2:21  0.00% snmpd
  761 root          1  44    0  7020K  1568K select  3   0:10  0.00% syslogd
  934 root          7  44    0   145M 46148K uwait   0   0:04  0.00% radiusd
 4322 kolovrat      1  44    0 38068K  5136K select  1   0:01  0.00% sshd
 1590 root          1  44    0 12072K  3940K select  1   0:00  0.00% sendmail
  611 root          1  44    0  3204K   648K select  0   0:00  0.00% devd
75472 kolovrat      1  45    0 20632K  3496K select  2   0:00  0.00% sftp-server
 4272 root          1  44    0 38068K  5060K sbwait  2   0:00  0.00% sshd
 4420 root          1  44    0 10280K  2932K pause   1   0:00  0.00% csh
 1319 root          1  47    0 26136K  4464K select  1   0:00  0.00% sshd
75468 root          1  48    0 38068K  5024K sbwait  0   0:00  0.00% sshd
75471 kolovrat      1  44    0 38068K  5148K select  1   0:00  0.00% sshd
 1594 smmsp         1  44    0 12072K  3892K pause   0   0:00  0.00% sendmail
73738 root          1  76    0  7948K  1600K nanslp  1   0:00  0.00% cron
 4372 kolovrat      1  44    0 21664K  2012K wait    2   0:00  0.00% su
 4323 kolovrat      1  45    0  8260K  1880K wait    2   0:00  0.00% sh
 1874 root          1  76    0  6888K  1296K ttyin   3   0:00  0.00% getty
 1879 root          1  76    0  6888K  1296K ttyin   0   0:00  0.00% getty
 1878 root          1  76    0  6888K  1296K ttyin   3   0:00  0.00% getty
 1877 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1876 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1872 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1875 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty
 1873 root          1  76    0  6888K  1296K ttyin   2   0:00  0.00% getty

Код: Выделить всё

free
mem_wire:         566501376 (    540MB) [ 27%] Wired: disabled for paging out
mem_active:  +     47849472 (     45MB) [  2%] Active: recently referenced
mem_inactive:+     31690752 (     30MB) [  1%] Inactive: recently not referenced
mem_cache:   +       155648 (      0MB) [  0%] Cached: almost avail. for allocation
mem_free:    +   1422569472 (   1356MB) [ 68%] Free: fully available for allocation
mem_gap_vm:  +       376832 (      0MB) [  0%] Memory gap: UNKNOWN
-------------- ------------ ----------- ------
mem_all:     =   2069143552 (   1973MB) [100%] Total real memory managed
mem_gap_sys: +     63295488 (     60MB)        Memory gap: Kernel?!
-------------- ------------ -----------
mem_phys:    =   2132439040 (   2033MB)        Total real memory available
mem_gap_hw:  +     15044608 (     14MB)        Memory gap: Segment Mappings?!
-------------- ------------ -----------
mem_hw:      =   2147483648 (   2048MB)        Total real memory installed

SYSTEM MEMORY SUMMARY:
mem_used:         693067776 (    660MB) [ 32%] Logically used memory
mem_avail:   +   1454415872 (   1387MB) [ 67%] Logically available memory
-------------- ------------ ----------- ------
mem_total:   =   2147483648 (   2048MB) [100%] Logically total memory

Код: Выделить всё

665/3565/4230 mbufs in use (current/cache/total)
662/2744/3406/262144 mbuf clusters in use (current/cache/total/max)
662/2666 mbuf+clusters out of packet secondary zone in use (current/cache)
0/77/77/131072 4k (page size) jumbo clusters in use (current/cache/total/max)
0/0/0/65536 9k jumbo clusters in use (current/cache/total/max)
0/0/0/32768 16k jumbo clusters in use (current/cache/total/max)
1494K/6687K/8182K bytes allocated to network (current/cache/total)
0/0/0 requests for mbufs denied (mbufs/clusters/mbuf+clusters)
0/0/0 requests for jumbo clusters denied (4k/9k/16k)
0/0/0 sfbufs in use (current/peak/max)
0 requests for sfbufs denied
0 requests for sfbufs delayed
0 requests for I/O initiated by sendfile
0 calls to protocol drain routines

тобишь памяти сожрало уже огого, вопрос что её съело.

kaats · Непрочитанное сообщение **kaats** » 2010-03-11 19:59:15

у меня подобные проблемы -(FreeBSd 8.0 stable mpd5.4)
Память не девается, но при примерно 400-500 тунелях и 100Мегабит/сек трафика также вырубается сервер доступа (на нем только мпд).
На него еще успел удаленно зайти - тунели как будто кто то "обрубил". Так что думаю мпд тут "причем".
Пока разбираюсь....
В логах также ничего нет, перед смертью на монитор тоже ничего не вывел.
Пока поднял в биосе скорость кулера (у меня супермикро - плоский и шумный, зараза) - жду когда зависнет... Тогда разберу гляну на систему охлаждения...
Сервер новый - железные проблемы не исключаю.

У вас не понятный мне вывод ТОР

Можете

Код: Выделить всё

top -SPa или top -Sa

показать
у меня так

Код: Выделить всё

last pid: 79466;  load averages:  0.50,  0.64,  0.62                                                                                                                                    up 0+12:30:00  19:03:02
124 processes: 10 running, 80 sleeping, 34 waiting
CPU 0:  0.0% user,  0.0% nice, 12.0% system,  0.0% interrupt, 88.0% idle
CPU 1:  0.0% user,  0.0% nice,  0.0% system, 38.0% interrupt, 62.0% idle
CPU 2:  0.0% user,  0.0% nice,  8.2% system,  0.7% interrupt, 91.0% idle
CPU 3:  0.0% user,  0.0% nice, 11.3% system,  0.0% interrupt, 88.7% idle
CPU 4:  0.4% user,  0.0% nice,  0.0% system,  8.6% interrupt, 91.0% idle
CPU 5:  0.8% user,  0.0% nice,  9.4% system,  1.5% interrupt, 88.3% idle
CPU 6:  0.0% user,  0.0% nice, 10.9% system,  0.0% interrupt, 89.1% idle
CPU 7:  0.0% user,  0.0% nice,  9.0% system,  0.0% interrupt, 91.0% idle
Mem: 41M Active, 30M Inact, 113M Wired, 284K Cache, 112M Buf, 1807M Free
Swap: 5120M Total, 5120M Free

  PID USERNAME  THR PRI NICE   SIZE    RES STATE   C   TIME   WCPU COMMAND
   11 root        8 171 ki31     0K    64K RUN     0  88.6H 713.87% [idle]
   12 root       35 -64    -     0K   280K WAIT    0 319:24 54.98% [intr]
   13 root        8  49    -     0K    64K sleep   4 318:08 50.73% [ng_queue]
    0 root       12 -68    0     0K    88K -       4  26:14  4.35% [kernel]

Гость

топик стартеру - начните с того что уберите весь ваш тюнинг

Гость

в топ Написало

Код: Выделить всё

19 root        1  44    -     0K     8K CPU4    4   8:09 100.00% [flowcleaner]

и Мпд отказался обслуживать клиентов.

kaats · Непрочитанное сообщение **kaats** » 2010-03-12 21:41:25

Гость писал(а):в топ Написало
Код: Выделить всё
19 root        1  44    -     0K     8K CPU4    4   8:09 100.00% [flowcleaner]
и Мпд отказался обслуживать клиентов.

Вообщем обсуждаетсяhttp://forum.nag.ru/forum/index.php?sho ... ntry483287

forum.lissyara.su

Подвисает система FreeBSd 8.0 stable + mpd5.4

Подвисает система FreeBSd 8.0 stable + mpd5.4

Услуги хостинговой компании Host-Food.ru

Re: Подвисает система FreeBSd 8.0 stable + mpd5.4

Re: Подвисает система FreeBSd 8.0 stable + mpd5.4

Re: Подвисает система FreeBSd 8.0 stable + mpd5.4

Re: Подвисает система FreeBSd 8.0 stable + mpd5.4

Re: Подвисает система FreeBSd 8.0 stable + mpd5.4

Re: Подвисает система FreeBSd 8.0 stable + mpd5.4

Re: Подвисает система FreeBSd 8.0 stable + mpd5.4