Пятница подкинула сюрприз

Проблемы установки, настройки и работы Правильной Операционной Системы

Модератор: terminus

Правила форума
Убедительная просьба юзать теги [cоde] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
kenny
мл. сержант
Сообщения: 78
Зарегистрирован: 2008-11-21 15:13:53
Откуда: Москва
Контактная информация:

Пятница подкинула сюрприз

Непрочитанное сообщение kenny » 2009-01-31 0:16:35

Вот такой случай произошел сегодня есть машинка, сильный сервер на базе xeon 4 процессора по два ядра 6 гигов оперативы и рейд на 20 Тб, все работает под управлением freebsd 6 ветки, стабильно работал точнее :( до сего дня начал "засыпать" в логах 0, главное он засыпает странным образом, то есть интерфейсы пингуются, но не по ssh не с клавиатуры зайти не реально, приходится перезагружать, все началось после установке rsync и теперь работает через пень колоду, уже не знаю куда копать подскажите что см этим можно поделать? :( :(

Хостинговая компания Host-Food.ru
Хостинг HostFood.ru
 

Услуги хостинговой компании Host-Food.ru

Хостинг HostFood.ru

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-01-31 0:24:43

У меня было - rsync всю память съедает и все остальное в своп уходит. Достучатся не реально.
Следить за сервером, скажем можно раз в минуту top >>/var/log/top.log

kenny
мл. сержант
Сообщения: 78
Зарегистрирован: 2008-11-21 15:13:53
Откуда: Москва
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kenny » 2009-01-31 0:49:53

А ессли расширить swap?Или мало толку? Впринципе он засыпает и без rsynс вообще грешу на fsck мож она пожирает память :(

Аватара пользователя
Alex Keda
стреляли...
Сообщения: 35267
Зарегистрирован: 2004-10-18 14:25:19
Откуда: Made in USSR
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение Alex Keda » 2009-01-31 1:04:43

работа fsck - это далеко не ничегонеделание.
определитесь уже точно делает он у вас что-то в эти момменты или нет.
Убей их всех! Бог потом рассортирует...

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-01-31 1:15:16

kenny писал(а):А ессли расширить swap?Или мало толку? Впринципе он засыпает и без rsynс вообще грешу на fsck мож она пожирает память :(
Если rsync не виновать, то нужно на таких огромных разделах отрубить background fsck.

kenny
мл. сержант
Сообщения: 78
Зарегистрирован: 2008-11-21 15:13:53
Откуда: Москва
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kenny » 2009-01-31 12:27:40

Вот именно и заускается background fsck который проверяет и шустрит мой ред.

Аватара пользователя
Alex Keda
стреляли...
Сообщения: 35267
Зарегистрирован: 2004-10-18 14:25:19
Откуда: Made in USSR
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение Alex Keda » 2009-01-31 12:28:54

а почему fsck запускается?
Убей их всех! Бог потом рассортирует...

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-01-31 13:14:00

kenny писал(а):Вот именно и заускается background fsck который проверяет и шустрит мой ред.
ну вот тебе он и убивает машину, пытается сделать снапшот, у него ничего не получается, а в это время битая FS добивает машинку. На ufs делать такие огромные разделы - самоубийство. Можно попробовать через gjournal, но это тормозное поделие, за-то чекать не надо. ;)

kamuzon
рядовой
Сообщения: 13
Зарегистрирован: 2008-08-06 23:43:27

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kamuzon » 2009-02-02 6:05:52

Замечено, что background fsck (после неправильного завершения работы систему) убивает машину с дисками (разделами) в 750 гигов. Диски по 640 гигов чекает без проблем.
решение пользую такое: грузимся в single, fsck -y /dev/ad*s1d && reboot

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-02-02 7:03:11

kamuzon писал(а):Замечено, что background fsck (после неправильного завершения работы систему) убивает машину с дисками (разделами) в 750 гигов. Диски по 640 гигов чекает без проблем.
решение пользую такое: грузимся в single, fsck -y /dev/ad*s1d && reboot
Пофиг. Зависит от количества файлов и активности изменений оных. Т.к. размер снапшота на прямую зависит от этих параметров. У меня рейд 10 в 250 гиг убивается. ;)

Никаких манипуляций не надо с ребутами и пр.

Код: Выделить всё

cat >>/etc/rc.conf
fsck_y_enable="YES"      # Set to YES to do fsck -y if the initial preen fails.
background_fsck="NO"   # Attempt to run fsck in the background where possible.

эл
проходил мимо

Re: Пятница подкинула сюрприз

Непрочитанное сообщение эл » 2009-02-02 8:00:54

А какую файловую систему посоветуете для рейдов вместо ufs?

kenny
мл. сержант
Сообщения: 78
Зарегистрирован: 2008-11-21 15:13:53
Откуда: Москва
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kenny » 2009-02-02 8:40:37

lissyara писал(а):работа fsck - это далеко не ничегонеделание.
определитесь уже точно делает он у вас что-то в эти момменты или нет.
Вообще в момент зависания работает только fsck, apache, verlihub, mysql ну и скрипт на perl в принципе виснуть мне кажется вообще не из за чего.
Вот что делать с rsync я не знаю, если виснет из за него, то придется отказаться от зеркал linux-дистрибутивов :(

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-02-02 9:52:46

эл писал(а):А какую файловую систему посоветуете для рейдов вместо ufs?
ZFS + FreeBSD ацтой. Я перелез на Linux. ext4, xfs, jfs.

tetsio
рядовой
Сообщения: 19
Зарегистрирован: 2009-01-19 5:41:30

Re: Пятница подкинула сюрприз

Непрочитанное сообщение tetsio » 2009-02-02 9:53:04

а на монитор что-нибудь пишет? Может RAID начал сыпаться? Или контроллер греется. или что-то типа того. Хардварная трабла?

P.S. fsck на уже запущенный трудящийся сервак = убийство. Запускай fsck перед стартом сервисов.

Аватара пользователя
manefesto
Группенфюррер
Сообщения: 6934
Зарегистрирован: 2007-07-20 8:27:30
Откуда: Пермь
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение manefesto » 2009-02-02 10:21:54

2kirgudu: а ну не гони на правильную ось :bad:
я такой яростный шо аж пиздеЦ
Изображение

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-02-02 11:13:19

manefesto писал(а):2kirgudu: а ну не гони на правильную ось :bad:
Я не гоню, просто тут приходится уже выберать шашечки или ехать. Не надо кривить душой, у Фри нет нормальной FS.

Аватара пользователя
Alex Keda
стреляли...
Сообщения: 35267
Зарегистрирован: 2004-10-18 14:25:19
Откуда: Made in USSR
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение Alex Keda » 2009-02-02 11:22:30

про прямоту рук помоему выясняли?
если у вас не работает - не значит что у всех так.
Убей их всех! Бог потом рассортирует...

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-02-02 11:43:15

lissyara писал(а):про прямоту рук помоему выясняли?
если у вас не работает - не значит что у всех так.
еще раз говорю, читаем рассылки фревые и удивляемся, что прямота рук не зависит от качества работы zfs на freebsd в продакшне.

Аватара пользователя
manefesto
Группенфюррер
Сообщения: 6934
Зарегистрирован: 2007-07-20 8:27:30
Откуда: Пермь
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение manefesto » 2009-02-02 11:52:45

линк давай
не сотрясай воздух по напрасну
я такой яростный шо аж пиздеЦ
Изображение

kirgudu
сержант
Сообщения: 185
Зарегистрирован: 2009-01-16 23:14:00

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kirgudu » 2009-02-02 12:02:28

manefesto писал(а):линк давай
не сотрясай воздух по напрасну
http://www.google.ru/search?hl=ru&q=Fre ... =&aq=f&oq=

kenny
мл. сержант
Сообщения: 78
Зарегистрирован: 2008-11-21 15:13:53
Откуда: Москва
Контактная информация:

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kenny » 2009-02-02 12:24:21

Не raid норма все с ним, отрубил фоновое сканирование и усе нормально ща загрузка минимум и пока не падает, fsck запустился после того как рубанулось электричество, упсы отработали свое и уснули, я б вовремя среагировал просто сервер не на одном этаже со мной а изолирован намного выше.

Всем спасибо за помощь :smile:

kamuzon
рядовой
Сообщения: 13
Зарегистрирован: 2008-08-06 23:43:27

Re: Пятница подкинула сюрприз

Непрочитанное сообщение kamuzon » 2009-02-04 4:49:25

kirgudu писал(а):
kamuzon писал(а):Замечено, что background fsck (после неправильного завершения работы систему) убивает машину с дисками (разделами) в 750 гигов. Диски по 640 гигов чекает без проблем.
решение пользую такое: грузимся в single, fsck -y /dev/ad*s1d && reboot
Пофиг. Зависит от количества файлов и активности изменений оных. Т.к. размер снапшота на прямую зависит от этих параметров. У меня рейд 10 в 250 гиг убивается. ;)

Никаких манипуляций не надо с ребутами и пр.

Код: Выделить всё

cat >>/etc/rc.conf
fsck_y_enable="YES"      # Set to YES to do fsck -y if the initial preen fails.
background_fsck="NO"   # Attempt to run fsck in the background where possible.
Вторую строку дописал. Спасибо.
ЗЫ У меня на 750 гиговых дисках только крупные файлы по 750-2000 мб.