Страница 1 из 2
Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 13:03:42
Laa
Здравствуйте!
Нужно создать массив raid 1 емкостью в 12Тбайт.
Порекомендуйте толковое и за разумные деньги решение (аппаратное, аппаратно-программное linux/fbsd/win). К этому массиву клиенты из локальной сети будут обращаться скорее всего по netbios (samba?).
Операционная система желательно fbsd/linux. Виндовое решение на самом последнем месте.
Заранее спасибо.

Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 14:41:38
Alex Keda
требования опишите? бюджет, опять же...
=======
подозреваю, что SATA контроллер с таким числом каналов найти врятли получиться, а если и найдёте - то стоить это будет нереальных денег.
поэтому тазик с большим числом дисков, или полка под SATA...
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 14:58:50
Laa
Давайте о бюджете пока не думать вообще, но стремится предлагать варианты за наиболее минимальные деньги.

Пока надо подготовить пару вариантов, а из них будет заказчик выбирать.
Винты на 1тб уже продаются.
Что такое полка под САТА? Дайте пару моделей, почитаю-посмотрю.
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 15:07:16
damir_madaga
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 15:46:14
Alex Keda
хороший кстати, вариант подключение по SAS внешнему, очень шустрая.
у меня две такие под бэкапы стоят
вот тока есть проблема - это HP, в ней неродные винты могут не завестись.
Код: Выделить всё
backup1# dd if=/dev/zero of=file bs=10m count=1024
1024+0 records in
1024+0 records out
10737418240 bytes transferred in 85.947020 secs (124930663 bytes/sec)
backup1#
тут, правда 10 рейд, диски по 750 гиг - SATA
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 16:02:31
Laa
damir_madaga писал(а):Ну вот как вариант!
Хороший вариант.
Я так понимаю, что это хранилище включается в SCSI порт сервера и доступно по scsi шине. Так?
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 16:03:35
Laa
lissyara писал(а):хороший кстати, вариант подключение по SAS внешнему, очень шустрая.
у меня две такие под бэкапы стоят
вот тока есть проблема - это HP, в ней неродные винты могут не завестись.
Код: Выделить всё
backup1# dd if=/dev/zero of=file bs=10m count=1024
1024+0 records in
1024+0 records out
10737418240 bytes transferred in 85.947020 secs (124930663 bytes/sec)
backup1#
тут, правда 10 рейд, диски по 750 гиг - SATA
А если можно, то сообщи аппаратное решение для этого хранилища.
Спасибо!
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 16:06:13
Alex Keda
а предложенный вариант - аппаратный.
тебе приёдтся брать SAS контроллер, а страйп они почти все умеют.
рекомендую взять SmartArray (к этому массиву - если его брать будешь)
у него прикольная фича - ты в БИОС диски выбираешь которые разбивать собираешься, а они на массиве голубым огоньком светьться. чтоб не промахнуться

железка прекрасно мониториться по SMART - ибо в smartd поддержка SmartArray есть.
правда, на файлопойке у меня 28 дисков - запускается чуть ли не минуту -пока smartd диски все опросит

))
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 16:17:22
damir_madaga
lissyara писал(а):а предложенный вариант - аппаратный.
тебе приёдтся брать SAS контроллер, а страйп они почти все умеют.
рекомендую взять SmartArray (к этому массиву - если его брать будешь)
у него прикольная фича - ты в БИОС диски выбираешь которые разбивать собираешься, а они на массиве голубым огоньком светьться. чтоб не промахнуться

железка прекрасно мониториться по SMART - ибо в smartd поддержка SmartArray есть.
правда, на файлопойке у меня 28 дисков - запускается чуть ли не минуту -пока smartd диски все опросит

))
Погодь! А разве для него нужен контролер?? Разве у него в нутри нет своего?
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 16:22:02
Laa
Блин!

Ну SmartArray я нашел разные.
Сообщи какой у тебя конкретно стоит. Какая модель. Дальше в него как что воткнуто.
Как для барана

объясни мне, я в этой теме не шарю. Дальше я сам дочитаю, догуглю.
Спасибо!
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 16:36:18
damir_madaga
Ну по моему все просто! Брешь HP StorageWorks MSA20 в нее вставляешь диски сколько тебе нужно, в сервак докупаешь вот этот Контроллер HP Smart Array 642 ну или аналог плюс внешний кабель! Вот тебе и ситема на 12 Тб!
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 16:52:40
damir_madaga
Полка 78000
Контроллер 25000
Кабель 4000
Диски 7000*20=140000
Итог: 250000 рублей!
Забавно 1 Тб стоит 21000 руб!
Это так больше для себя!

Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 17:36:04
Laa
damir_madaga писал(а):Ну по моему все просто! Брешь HP StorageWorks MSA20 в нее вставляешь диски сколько тебе нужно, в сервак докупаешь вот этот Контроллер HP Smart Array 642 ну или аналог плюс внешний кабель! Вот тебе и ситема на 12 Тб!
Видит ли это железо Freebsd? Если, да, то как какие устройства?
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 17:52:47
Fastman
Laa писал(а):Здравствуйте!
Нужно создать массив raid 1 емкостью в 12Тбайт.
Порекомендуйте толковое и за разумные деньги решение (аппаратное, аппаратно-программное linux/fbsd/win). К этому массиву клиенты из локальной сети будут обращаться скорее всего по netbios (samba?).
Операционная система желательно fbsd/linux. Виндовое решение на самом последнем месте.
Заранее спасибо.

Читаем внимательно
raid 1 емкостью в 12Тбайт.
Значит общая емкость массива должна быть 24Tb чтобы сделать 12Tb (не считаю пока потери на HotSpare)
Ну хозяин - барин.. Я бы не выпендривался и сделал все таки RAID6 если так надежность важна + HotSpare
Мой вариант лучше, к тому же вы не учитываете одной штуки..в коробках типа MSA есть ограничения на количество
HDD в одной рэйд группе(в конкретном случае если брать вышеприведенный вариант - это 16 HDD) Если же все таки надо
одним куском все это..то требуется тогда LVM чтобы объеденить две рэйд группы в один кусок.
И еще... вообще зря советуете что то пока начинальщик топика не озвучит тип планируемой нагрузки на систему хранения.
Озвучте задачу, придумаем еще что нить

Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 17:58:11
damir_madaga
Laa писал(а):Давайте о бюджете пока не думать вообще, но стремится предлагать варианты за наиболее минимальные деньги.

Пока надо подготовить пару вариантов, а из них будет заказчик выбирать.
Винты на 1тб уже продаются.
Что такое полка под САТА? Дайте пару моделей, почитаю-посмотрю.
Ну он в общем сам сказал что нужны варианты! И не более!
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 18:00:09
Laa
fastman, спасибо!
задача пока не ясна. Клиент ворочает толстыми файлами. Их надо
надежно где-то держать и оперативно иметь доступ.
По деньгам предел порядка 50 тыщ дол. Но это самый крайний предел.
RAID или нет может быть какой угодно. Очень тяжело клиент будет переносить потерю чего-либо в этом хранилище.

Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 18:03:03
damir_madaga
Fastman писал(а):
Мой вариант лучше, к тому же вы не учитываете одной штуки..в коробках типа MSA есть ограничения на количество
HDD в одной рэйд группе(в конкретном случае если брать вышеприведенный вариант - это 16 HDD) Если же все таки надо
одним куском все это..то требуется тогда LVM чтобы объеденить две рэйд группы в один кусок.
Вот этот момент не понял! Там всего 12 дисков! Я думаю что топикстартеру дали направление для размышления и поиска!
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 18:06:53
Laa
damir_madaga писал(а):Fastman писал(а):
Мой вариант лучше, к тому же вы не учитываете одной штуки..в коробках типа MSA есть ограничения на количество
HDD в одной рэйд группе(в конкретном случае если брать вышеприведенный вариант - это 16 HDD) Если же все таки надо
одним куском все это..то требуется тогда LVM чтобы объеденить две рэйд группы в один кусок.
Вот этот момент не понял! Там всего 12 дисков! Я думаю что топикстартеру дали направление для размышления и поиска!
Ага! Дали. Спасибо. Теперь хочу вникнуть в эти решения, чтобы потом не стали всплывать доп. расходы.
Поэтому буду еще задавать вопросов для полного вникания в тему.
Спасибо.
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 18:07:24
Fastman
Если не нужно выжимать IOPS-ы а тупо хранилка юзерского хлама,
То берите такую коробку.. дешево и сердито...
http://www.ser.com.ua/catalog/134/Supermicro/4454.html
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 18:10:57
Fastman
Laa писал(а):fastman, спасибо!
задача пока не ясна. Клиент ворочает толстыми файлами. Их надо
надежно где-то держать и оперативно иметь доступ.
По деньгам предел порядка 50 тыщ дол. Но это самый крайний предел.
RAID или нет может быть какой угодно. Очень тяжело клиент будет переносить потерю чего-либо в этом хранилище.

Другой вопрос с бюджетом.
Давайте так... вы опишите какова должна быть надежность решения и допустимое время простоя.
Так же дайте примерный припрост данных на хранилке(важно, потому что рекомендуется не заполнять СХД под завяку)
Ну и доступ я так понял это CIFS, значит либо коробка с дисками плюс сервер, либо готовый NAS.
Я смогу подкинуть варианты.
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 18:27:26
Laa
спаисибо всем.
пока беру таймаут на размышления.
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-08 23:34:55
Mors
Если еще актуально, я делал хранилище на решениях от SuperMicro.
Корпус SC216E1-R900LPB (
http://www.supermicro.com/products/chas ... R900LP.cfm), материнка/камни/память точно не помню Xeon под Socket 771, контроллер AOC-USAS-H8iR (
http://www.supermicro.com/products/acce ... S-H8iR.cfm), диски SATA II WD.
У них решение позволяет потом только корпуса добирать и вешать их как доп полки. По деньгам вышло дешевле чем брэндовые хранилища, а по надежности вполне пристойно.
RAID 5, ОС Debian. Цеплялись к нему в основном по NFS.
Позже попробую найти полную спецификацию.
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-09 8:29:03
bu7cher
Laa писал(а):fastman, спасибо!
задача пока не ясна. Клиент ворочает толстыми файлами. Их надо
надежно где-то держать и оперативно иметь доступ.
По деньгам предел порядка
50 тыщ дол. Но это самый крайний предел.
RAID или нет может быть какой угодно. Очень тяжело клиент будет переносить потерю чего-либо в этом хранилище.

С бюджетом в 50 тыс. дол (?) можно сделать катастрофоустойчивое решение на базе fibre channel с полным дублированием и разнесением данных в разные здания.
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-09 9:13:49
LMik
bu7cher писал(а):Laa писал(а):fastman, спасибо!
задача пока не ясна. Клиент ворочает толстыми файлами. Их надо
надежно где-то держать и оперативно иметь доступ.
По деньгам предел порядка
50 тыщ дол. Но это самый крайний предел.
RAID или нет может быть какой угодно. Очень тяжело клиент будет переносить потерю чего-либо в этом хранилище.

С бюджетом в 50 тыс. дол (?) можно сделать катастрофоустойчивое решение на базе fibre channel с полным дублированием и разнесением данных в разные здания.
+100500
Re: Как правильнее создать 12Тб массив?
Добавлено: 2009-09-09 10:32:08
Fastman
bu7cher писал(а):Laa писал(а):fastman, спасибо!
задача пока не ясна. Клиент ворочает толстыми файлами. Их надо
надежно где-то держать и оперативно иметь доступ.
По деньгам предел порядка
50 тыщ дол. Но это самый крайний предел.
RAID или нет может быть какой угодно. Очень тяжело клиент будет переносить потерю чего-либо в этом хранилище.

С бюджетом в 50 тыс. дол (?) можно сделать катастрофоустойчивое решение на базе fibre channel с полным дублированием и разнесением данных в разные здания.
Если без всяких извращений, то да.... Но вот ленточная библиотека в бюджет уже не влезает. Но на будующее пригодиться
