RAID на 16 дисков
Правила форума
Убедительная просьба юзать теги [code] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
Убедительная просьба юзать теги [code] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
RAID на 16 дисков
Рассматриваю вопрос взять SuperMicro 2027R-WRF, к нему надо RAID контроллер (вернее 2 по 8 портов).
Если не рассматривать старые чипы и 12Gb/s, то остаются такие варианты:
AOC-S2308L-L8e Standard LP, 8 internal ports (6Gb/s) Gen-3, 122HDD, HBA
AOC-S2308L-L8i Standard LP, 8 internal ports (6Gb/s) Gen-3, 63HDD, RAID 0,1,1E
AOC-S2208L-H8iR Standard LP, 8 internal ports (6Gb/s) Gen-3, 240HDD, RAID 0, 1, 5, 6, 10, 50, 60
Вопросы такие:
1. Что такое 122HDD, 63HDD, 240HDD, 240HDD? Общее количество дисков? Т.е. для моих 16 это не актуально?
2. Что такое HBA?
3. Имеет ли смысл брать "RAID 0, 1, 5, 6, 10, 50, 60"? Не проще сделать RAID средствами FreeBSD и не зависеть от софта управления RAID контроллером?
4. Имеет ли смысл брать "battery back-up"? Что оно реально даст? А если сервер на UPS?
Если не рассматривать старые чипы и 12Gb/s, то остаются такие варианты:
AOC-S2308L-L8e Standard LP, 8 internal ports (6Gb/s) Gen-3, 122HDD, HBA
AOC-S2308L-L8i Standard LP, 8 internal ports (6Gb/s) Gen-3, 63HDD, RAID 0,1,1E
AOC-S2208L-H8iR Standard LP, 8 internal ports (6Gb/s) Gen-3, 240HDD, RAID 0, 1, 5, 6, 10, 50, 60
Вопросы такие:
1. Что такое 122HDD, 63HDD, 240HDD, 240HDD? Общее количество дисков? Т.е. для моих 16 это не актуально?
2. Что такое HBA?
3. Имеет ли смысл брать "RAID 0, 1, 5, 6, 10, 50, 60"? Не проще сделать RAID средствами FreeBSD и не зависеть от софта управления RAID контроллером?
4. Имеет ли смысл брать "battery back-up"? Что оно реально даст? А если сервер на UPS?
Услуги хостинговой компании Host-Food.ru
Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
1)Кол-во поддерживаемых дисков/устройств
2)Контроллер для подключения к внешнему SAS контроллеру.
3)Нужно рассматривать под конкретную задачу
4)Есть. Реально даст то, что если сервер не успеет выключиться, и контроллер не успеет сбросить кэш на диски, у Вас не развалится RAID массив. При подаче питания весь кэш отправится на диски. Т.к UPS может не выдержать, батареи могут высохнуть.
2)Контроллер для подключения к внешнему SAS контроллеру.
3)Нужно рассматривать под конкретную задачу
4)Есть. Реально даст то, что если сервер не успеет выключиться, и контроллер не успеет сбросить кэш на диски, у Вас не развалится RAID массив. При подаче питания весь кэш отправится на диски. Т.к UPS может не выдержать, батареи могут высохнуть.
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
Файловая помойка, образы вируалок и т.п.3)Нужно рассматривать под конкретную задачу
Думаю сделать RAID 6 - но вопрос делать ли его средствами FreeBSD или самого контроллера?
Если делать средствами контроллера, то можно попасть при поломке контроллера - диски не прочитаются (пока аналогичный контроллер не достанешь).
- Alex Keda
- стреляли...
- Сообщения: 35436
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: RAID на 16 дисков
http://www.supermicro.com.tw/products/s ... 7R-WRF.cfm
я так извернулся у себя - на 12 дисков взял 3ware 9790-4i
можно прилично сэкономить если вязть с SFF-8087 бакплейном - тогда контроллер можно взять с одним соответствующим выходомInput / Output
SAS/SATA
Customizable storage
я так извернулся у себя - на 12 дисков взял 3ware 9790-4i
Убей их всех! Бог потом рассортирует...
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
На сколько этой батарейки хватает? А если она высохнет?4)Есть. Реально даст то, что если сервер не успеет выключиться, и контроллер не успеет сбросить кэш на диски, у Вас не развалится RAID массив. При подаче питания весь кэш отправится на диски. Т.к UPS может не выдержать, батареи могут высохнуть.
Удивителен кстати ценник на нее.
Это как?можно прилично сэкономить если вязть с SFF-8087 бакплейном
Там в комплектации четко написано Backplane BPN-SAS-213A Sup 16x2.5" hot-swap SAS/SATA hdd; iPass ?con и 4 кабеля в комплекте.
По виду они вроде похожи на SFF-8087, но как узнать совместимы ли?
Такую модель даже яндекс не знает. Да и она должна быть на 4 порта всего (4i в названии).я так извернулся у себя - на 12 дисков взял 3ware 9790-4i
На 16 портов есть:
LSI 3WARE SAS 9750-16i4e <LSI00252> (RTL) PCI-Ex8, 20-port SAS / SATA 6Gb / s RAID 0 / 1 / 5 / 6 / 10 / 50, 512Mb
LSI SAS 9201-16i <LSI00244> (RTL) PCI-Ex8, 16-port SAS / SATA 6Gb / s
И опять встает вопрос - стоит ли переплачивать в 3 раза за аппаратный рейд? Ведь есть большой риск потерять весь массив при выходе из строя контроллера.
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
Это не значит что можно подключить только 4 диска. Это значит что там 4 порта. К которому через бэкплэйн или SAS экспандер можно подключить до четырёх устройств. можно подключить 4 дисковых полки по 16 дисков в каждой.Такую модель даже яндекс не знает. Да и она должна быть на 4 порта всего (4i в названии).
А если все диски сгорят? А если потом? А если пожар? Бэкапы никто не отменял. А при софтовом рэйде вы данные не потеряете?Ведь есть большой риск потерять весь массив при выходе из строя контроллера.
Бюджет какой? Сервера уже есть?
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
Высохнет-замЕните. обычно на 3-4 года хватает. сейчас новые рэйды идут с суперконденсатором и флешкой, на которую переносится вся инфа из кэша, и в таком состоянии контроллер может находится до нескольких лет. если бюджет позволяет, меняйте раз в два года.На сколько этой батарейки хватает? А если она высохнет?
Удивителен кстати ценник на нее.
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
Вероятности разные.А если все диски сгорят? А если потом? А если пожар?
На подобном сервере в том числе бекапы и будут лежать.Бэкапы никто не отменял.
Бекап бекапов делать? А потом еще бакап бекапа бекапов?
Я смогу диски вставить в другой сервер с другим контроллером и поднять массив.А при софтовом рэйде вы данные не потеряете?
С аппаратным рейдом такое не получится (был опыт с Intel и Adaptec).
Да и многие большие компании вроде идут по подобному пути (не используют аппаратные RAID) - google и т.п.
Серверов нет. Бюджет считаю, пока выходит около 500 тыс на сервер.Бюджет какой? Сервера уже есть?
Как и в UPSВысохнет-замЕните.

Это которые конкретно модели?сейчас новые рэйды идут с суперконденсатором и флешкой, на которую переносится вся инфа из кэша, и в таком состоянии контроллер может находится до нескольких лет.
Менять батарею не получится - 100%если бюджет позволяет, меняйте раз в два года.
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
сбой может быть любой. никто Вам не даст 100% гарантии того что, что то не сломается.Вероятности разные.
не факт.Я смогу диски вставить в другой сервер с другим контроллером и поднять массив.
поэтому всегда должен быть запасной под замену.С аппаратным рейдом такое не получится (был опыт с Intel и Adaptec).
Ну да. У них есть для этого миллионы долларов что бы держать прогрммеров и тех. персонал. для обслуживания распределённой ФС. Конечно в таком случае софтовое решение обойдётся горааааздо дешевле, нежели хардварное. Не думаю что у Вас есть этот миллион. Да и скорость работы не какая будет. В любом случае Вам нужен SAS контроллер.Да и многие большие компании вроде идут по подобному пути (не используют аппаратные RAID) - google и т.п.
Типа тогоКак и в UPS

http://www.nix.ru/autocatalog/controlle ... 47770.htmlЭто которые конкретно модели?
http://www.nix.ru/autocatalog/controlle ... 16254.html
http://www.nix.ru/autocatalog/controlle ... 64234.html
там в описании поддерживаемые контроллеры.
Посмотрите на эти девайсыСерверов нет. Бюджет считаю, пока выходит около 500 тыс на сервер.
Платформа
http://www.supermicro.com/products/syst ... E1R16L.cfm
проц
http://ark.intel.com/products/64588/Int ... -Intel-QPI
Контроллер
http://www.nix.ru/autocatalog/controlle ... 47611.html
BBU
http://www.nix.ru/autocatalog/controlle ... 47770.html
Или
Платформа
http://ark.intel.com/products/56271/Int ... R2312GL4GS
доп полка для дисков
http://ark.intel.com/products/74543/Int ... OD2312S2SP
контроллер
http://ark.intel.com/products/47614/Int ... r-RS2MB044
BBU
http://ark.intel.com/products/56117/Int ... -AXXRSBBU8
Или
http://www.nix.ru/autocatalog/controlle ... 49537.html
+
http://www.nix.ru/autocatalog/controlle ... 47770.html
проц
http://ark.intel.com/products/64588/Int ... -Intel-QPI
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
Главный вопрос - на сколько будет падение? Если не очень много, то пожертвовать можно.Да и скорость работы не какая будет.
Да, но цена полноценного контроллера умеющего RAID-6 отличается почти в 2 раза от умеющего только RAID-1.В любом случае Вам нужен SAS контроллер.
Для SAS 3.5" не очень выгодно, т.к. винты все равно нормальные идут 2.5".Платформа Supermicro 6037R-E1R16L
Для SATA я на подобную смотрю.
Староват. Я смотрю на Intel E5-2660v2 - там уже 10 ядер (вместо 4 у приведенного), шина быстрее, кэша больше.проц Intel Xeon E5-2609
Если учитывать периодические слухи о сворачивания серверного сегмента, то лучше сразу рассматривать других производителей.Или
Платформа Intel® Server System R2312GL4GS
Раньше именно Intel я и брал, но перехожу на Supermicro.
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
Вы меня не правильно поняли. Вам нужен просто SAS контроллер, а не SAS RAID контроллер. Что то на подобии этих.Если Вы решитесь делать чисто софтовое решение.Да, но цена полноценного контроллера умеющего RAID-6 отличается почти в 2 раза от умеющего только RAID-1.
http://www.nix.ru/autocatalog/controlle ... 54983.html
http://www.nix.ru/autocatalog/controlle ... 86903.html
http://www.nix.ru/autocatalog/controlle ... 68433.html
Так и не понял что невыгодно. Стоимость 1ГБ 3,5" в полтора раза ниже стоимости 1ГБ 2,5". И дисков больше 1ТБ, 2,5" нету.Для SAS 3.5" не очень выгодно, т.к. винты все равно нормальные идут 2.5".
И от использования 2,5" дисков кроме сниженного энергопотребления Вы ничего не выигрываете.
Не совсем понимаю зачем для хранения информации 10 ядер, а там еще и HT есть. даже если Вы будете использовать софтовое решение, максимум Вы будете использовать его на 15-20 процентов.Староват. Я смотрю на Intel E5-2660v2 - там уже 10 ядер (вместо 4 у приведенного), шина быстрее, кэша больше.
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
- Neus
- капитан
- Сообщения: 1961
- Зарегистрирован: 2008-09-08 21:59:56
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
По цене они особо не отличаются от RAID контроллеров.Вам нужен просто SAS контроллер, а не SAS RAID контроллер. Что то на подобии этих.
Решиться бы только. Похоже никто не знает насколько медленнее софтовое решениеЕсли Вы решитесь делать чисто софтовое решение.

Берем к примеру WD и Toshiba: все винты SAS 10к оборотов являются 2.5", а 3.5" делается путем добавления радиатора.Так и не понял что невыгодно. Стоимость 1ГБ 3,5" в полтора раза ниже стоимости 1ГБ 2,5". И дисков больше 1ТБ, 2,5" нету.
И от использования 2,5" дисков кроме сниженного энергопотребления Вы ничего не выигрываете.
Много чего планируется туда повесить: HTTP, MySQL, Virtualbox и т.п.Не совсем понимаю зачем для хранения информации 10 ядер, а там еще и HT есть. даже если Вы будете использовать софтовое решение, максимум Вы будете использовать его на 15-20 процентов.
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
А можно больше информации от том что Вы хотите сделать?
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
Боле-менее универсальный сервер на 16 быстрых дисков с хорошим процессором и 256 ГБ памяти.
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
А что будет если этот сервер сломается?
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
А что будет если другие сервера ломаются?А что будет если этот сервер сломается?
Все как обычно - серверов несколько.
Плюс бекапы на SATA (пока не решил 2U (12 дисков) или 3U (16 дисков)).
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
Ну я к тому что не стоит всё предприятие держать на одном сервере. Даже если есть бэкапы.
Посмотрите в сторону proxmox в качестве системы виртуализации, она по производительнее будет чем VBOX.
http://www.proxmox.com/ru/proxmox-ve
Посмотрите в сторону proxmox в качестве системы виртуализации, она по производительнее будет чем VBOX.
http://www.proxmox.com/ru/proxmox-ve
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
-
- лейтенант
- Сообщения: 751
- Зарегистрирован: 2008-07-15 16:11:11
Re: RAID на 16 дисков
Он далеко не один. Но и раздувать не могу, т.к. с местом и питанием проблемы.Ну я к тому что не стоит всё предприятие держать на одном сервере.
Уже смотрел. Там для FreeBSD вроде QEMU используется? Не проще ли сразу на FreeBSD поднять QEMU без Linux?Посмотрите в сторону proxmox в качестве системы виртуализации, она по производительнее будет чем VBOX.
- Electronik
- капитан
- Сообщения: 1593
- Зарегистрирован: 2008-11-15 17:32:56
- Откуда: Минск
- Контактная информация:
Re: RAID на 16 дисков
не в кусе.Там для FreeBSD вроде QEMU используется?
Ну если Используется только FreeBSD, то проще. И юзать при этом jail. Если есть другие ОС, то не проще.Не проще ли сразу на FreeBSD поднять QEMU без Linux?
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог
Блог
- Alex Keda
- стреляли...
- Сообщения: 35436
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: RAID на 16 дисков
9750-4i контроллер
--
я делаю "бэкап бэкапов"
это нормально, по отношению к действительно ценным данным.
--
я делаю "бэкап бэкапов"
это нормально, по отношению к действительно ценным данным.
Убей их всех! Бог потом рассортирует...