FreeNAS Fatal Trap 1...

[pin]

Всем доброго!
Вчера упал backup-сервер на FreeNAS последней редакции. При перезагрузке выдает ошибку и ступор. Диски подцеплены через аппаратный RAID ASR-5405. Отключаешь RAID-контроллер - система грузится, понятно, что дело в дисках, непонятно, куда копать?

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[guest]

Всем доброго!
Вчера упал backup-сервер на FreeNAS последней редакции. При перезагрузке выдает ошибку и ступор. Диски подцеплены через аппаратный RAID ASR-5405. Отключаешь RAID-контроллер - система грузится, понятно, что дело в дисках, непонятно, куда копать?

и кто додумался использовать RAID контроллер для ZFS?!

диски подключенные к RAID как оформлены:
- каждый диск как отдельный том?
или
- диски оформлены в RAID X?

zpool из чего создавался?

Не специалист в ZFS, но судя по всему, креш происходит во время работы журнала ZIL (zfs_log_rename),
есть предположение что сбоит какой-то диск? И вот тут важно как оформлен zpool, из чего сделан - см
вопросы про оформление RAID.

Одна из ВАЖНЫХ рекомендаций ZFS - не делать ZFS ПОВЕРХ Raid, использовать HBA контроллеры
для ZFS. RAID - в это случае выступает как прослойка и в свою очередь реагирует на дисковые ошибки.
Нужно определить проблемный диск - найти подобного объема и выполнить dd, заменить плохой
и посмотреть что будет.

ps. На форуме FreeNAS что советуют?

[pin]

диски в RAID5, статус RAID'а - OPTIMAL
На форум FreeNAS не ходил, совсем из головы вылетело как-то

[guest]

диски в RAID5, статус RAID'а - OPTIMAL

да-а-а... печально...

На форум FreeNAS не ходил, совсем из головы вылетело как-то

попробуйте там спросить, кроме как проверить диски smartctl на smart, и short & long test,
мыслей не имею. Проверять на других PC, можно в параллель.

ps. Совет на будущее - не используйте ZFS поверх RAID!

[pin]

Диски проверил на smart - все хорошо, сейчас гоняю встроенной в RAID-bios утилитой проверки, выяснилось, что диски не RAID EDITION (должны были быть WD RED RE, заказывал их специально, видать сборщики обманули)

[guest]

Диски проверил на smart - все хорошо, сейчас гоняю встроенной в RAID-bios утилитой проверки, выяснилось, что диски не RAID EDITION (должны были быть WD RED RE, заказывал их специально, видать сборщики обманули)

япона мать... какие еще RED !? Диски SATA или SAS?

Надо столько граблей собрать...
Если WD, то никаких: Green, Blue, Red, Black - сидеть потом изучать модели и править tler и idle
Если Hitachi - только UltraStar, Seagate - только Enterprise

Если уж собираете HW RAID, то только на реально правильных дисках:
- Hitachi UltraStar
- WD RE, WD RE4, WD RE SAS
- Seagate Entreprise SATA or SAS

[guest]

Диски проверил на smart - все хорошо, сейчас гоняю встроенной в RAID-bios утилитой проверки, выяснилось, что диски не RAID EDITION (должны были быть WD RED RE, заказывал их специально, видать сборщики обманули)

япона мать... какие еще RED !? Диски SATA или SAS?

Надо столько граблей собрать...
Если WD, то никаких: Blue,Green,Red,Black - сидеть потом изучать модели и править tler и idle
Если Hitachi - только UltraStar, Seagate - только Enterprise

Если уж собираете HW RAID, то только на реально правильных дисках:
- Hitachi UltraStar
- WD RE, WD RE4, WD RE SAS
- Seagate Entreprise SATA or SAS

[pin]

Диски SATA, писал выше, что заказывал WD, которые Raid Edition, а мне поставили "красные", проблема в другом - сейчас подцепил два диска прямо на мать и попробовал собрать ZFS pool, сервер ушел в перезагрузку и потом застопарился с той же ошибкой, диски 100% рабочие, похоже, дело глобально в аппаратной части, попробую поменять блок питания, что называется до кучи.

[guest]

Диски SATA, писал выше, что заказывал WD, которые Raid Edition, а мне поставили "красные", проблема в другом - сейчас подцепил два диска прямо на мать и попробовал собрать ZFS pool, сервер ушел в перезагрузку и потом застопарился с той же ошибкой, диски 100% рабочие, похоже, дело глобально в аппаратной части, попробую поменять блок питания, что называется до кучи.

- сначала проверьте RAM (битая память - смерть для ZFS)
- затем контроллер RAID

[guest]

Диски SATA, писал выше, что заказывал WD, которые Raid Edition, а мне поставили "красные", проблема в другом - сейчас подцепил два диска прямо на мать и попробовал собрать ZFS pool, сервер ушел в перезагрузку и потом застопарился с той же ошибкой, диски 100% рабочие, похоже, дело глобально в аппаратной части, попробую поменять блок питания, что называется до кучи.

Есть линейка WD RE RED или WD RED RE, возможно ее Вам и воткнули
Нужно не "заказывать", а писать спецификацию продавцу и ее утрясать, по получениии - все проверять.

[pin]

У нас поставкой оборудования занимается "специально обученный человек", ему пишешь спецификацию и вперед... сборкой и установкой оборудования в стойки занимается орава электронщиков... каюсь, не проверил, что поставили, до этого четыре года не было никаких косяков в работе такой цепочки, а тут... видать по-запарке мои винты ушли в пользовательскую станцию ... но ладно, это все лирика, теперь физика: сегодня собрал RAIDZ на трех HDD, подключенных в мать, все было здорово, пока не зажужжал один из кулеров, расположенных в передней части корпуса и предназначенный для обдува винтов. Сервер выключили, вытащили корзину с дисками, поменяли кулер, при включении та же картинка, только имя процесса поменялось: было newsyslog, стало rsyncd. Акронисом грохнул все разделы на винтах, проблема осталась. Вообще не понятно, как такое может быть

[guest]

У нас поставкой оборудования занимается "специально обученный человек", ему пишешь спецификацию и вперед... сборкой и установкой оборудования в стойки занимается орава электронщиков... каюсь, не проверил, что поставили, до этого четыре года не было никаких косяков в работе такой цепочки, а тут... видать по-запарке мои винты ушли в пользовательскую станцию ... но ладно, это все лирика, теперь физика: сегодня собрал RAIDZ на трех HDD, подключенных в мать, все было здорово, пока не зажужжал один из кулеров, расположенных в передней части корпуса и предназначенный для обдува винтов. Сервер выключили, вытащили корзину с дисками, поменяли кулер, при включении та же картинка, только имя процесса поменялось: было newsyslog, стало rsyncd. Акронисом грохнул все разделы на винтах, проблема осталась. Вообще не понятно, как такое может быть

один кулер - вероятно только начало проблем, sorry
ну какой еще акронис?!
затрите метаданные:

# dd if=/dev/zero of=/dev/adaX count=34
и в конце, к команде добавить skip=MAXNUMSECTOR-34

система то у Вас на UFS вроде, так проверьте диск, надеюсь RAM и sata/raid контроллеры уже проверили?

[Alvares]

memtest память походит?

[pin]

Тест памяти и контроллеров пройден успешно, очень напрягает, что ситуация повторилась уже на дисках. подключенных непосредственно к матери.

[guest]

Тест памяти и контроллеров пройден успешно, очень напрягает, что ситуация повторилась уже на дисках. подключенных непосредственно к матери.

падение случилось на "пустом" месте или после броска питания или после апгрейда... ?

[pin]

на пустом, если не считать замену кулера

[guest]

на пустом, если не считать замену кулера

если нагрузка на сервер не менялась - значит железо