Тормозит дисковая система на PROXMOX

VirtualBox, QEMU, ESX/ESXi и прочия
Правила форума
Убедительная просьба юзать теги [code] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 14:36:25

Есть сервер виртуализации с proxmox, сам гипервизор стоит на отдельном винте. Для хранения виртуалок собрал RAID10 на 4 дисках при помощи mdadm. Скорость дискового массива получается под 300МБ/с

Код: Выделить всё

root@srv-hprv01:~# dd if=/dev/md10 of=/dev/null bs=1024k count=1024
1024+0 records in
1024+0 records out
1073741824 bytes (1.1 GB, 1.0 GiB) copied, 3.61019 s, 297 MB/s
Но, при попытке установить любую операционку, начинаются дикие тормоза при копировании установочных файлов на диск виртуалки (к примеру ставим winserver и распаковка и копирование файлов на диск занимает дикое количество времени).
Дисковый массив грузится до 70% и выше. Не удается даже выключить саму виртуальную машину, приходится перегружать сам гипервизор. Хотя, по идее на RAID10 это должно, как минимум, шустро работать, а по факту получаем производительность флешки

Хостинговая компания Host-Food.ru
Хостинг HostFood.ru
 

Услуги хостинговой компании Host-Food.ru

Хостинг HostFood.ru

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2460 рублей (8 CPU, 8Gb RAM, 2x500Gb HDD, RAID 3ware 9750):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 15:28:32

Кое-что прояснилось. Если использовать при создании виртуального диска VirtIO SCSI контроллер, то все становится нормально.
Теперь проблема с драйвером для него под WinServer, в линуксах все есть.

Аватара пользователя
Neus
капитан
Сообщения: 1753
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-03 15:44:18

alex117 писал(а):
2018-09-03 15:28:32
Теперь проблема с драйвером для него под WinServer, в линуксах все есть.
нет там проблемы: на вики проксмокса есть ссылка на виртио для винды, качаешь исошник, подключаешь второй виртсидюк -- вуаля.
«Вы никогда не сумеете решить возникшую проблему,
если сохраните то же мышление и тот же подход,
который привёл вас к этой проблеме.»
© Альберт Эйнштейн

Аватара пользователя
Neus
капитан
Сообщения: 1753
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-03 15:48:11

alex117 писал(а):
2018-09-03 14:36:25
Для хранения виртуалок собрал RAID10 на 4 дисках при помощи mdadm
кстати, софтрейды в проксе ансуппортед энд не рекомендед =)
«Вы никогда не сумеете решить возникшую проблему,
если сохраните то же мышление и тот же подход,
который привёл вас к этой проблеме.»
© Альберт Эйнштейн

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 16:04:28

ну не поддерживаются это да, но я добавил директорию для хранения ВМ, как каталог на диске RAID
с установкой винды разобрался вроде, можно обойтись и одним cd-rom, просто по очереди монтировать образы

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-03 16:09:46

Аппаратный рейд есть на материнке, но proxmox его не видит, так что выбор оказался невелик.

Аватара пользователя
Neus
капитан
Сообщения: 1753
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-03 17:40:13

ну не поддерживаются это да, но я добавил директорию для хранения ВМ, как каталог на диске RAID
Неправильно Вы дядя Алекс проксмокс приготовили 8)
на md надо было LVM натянуть, а не ФС. И раздавать в виртуалку raw LV.
Или воспользоваться возможностями ZFS.
Первый -- стабильнее. У второго есть интересная фишка -- асинхронная репликация.
«Вы никогда не сумеете решить возникшую проблему,
если сохраните то же мышление и тот же подход,
который привёл вас к этой проблеме.»
© Альберт Эйнштейн

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-04 8:07:04

Neus писал(а):
2018-09-03 17:40:13
на md надо было LVM натянуть, а не ФС. И раздавать в виртуалку raw LV.
Может и так, что дает LV?
Я пока тестирую, поэтому могу все поменять.
WinServer2008 летает, как не летал на реальном железе.
Скорость диска на чтение близка к фактической, на скорость записи ниже примерно в 1,5-2 раза.
ZFS на линуксе пока стараюсь обходить стороной

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-04 11:17:44

В топку этот проксмокс - постоянные глюки, связанные с блокировкой файлов при попытке выключить ВМ и пр.

Аватара пользователя
Neus
капитан
Сообщения: 1753
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-04 12:03:56

Если будешь виртуалить только винду, ставь HyperV.
Если винду и линукс ставь XCP-NG
У меня он же, но в исполнении Citrix (XenServer)
«Вы никогда не сумеете решить возникшую проблему,
если сохраните то же мышление и тот же подход,
который привёл вас к этой проблеме.»
© Альберт Эйнштейн

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-05 8:57:18

спасибо, а чем hyper-v для линуксов не подходит?
у меня три года крутятся несколько машин на centos на hyper-v, проблем нет

Аватара пользователя
Neus
капитан
Сообщения: 1753
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-05 9:21:20

я не говорил что не подходят.
для линуксов ксен умеет в PVH

Изображение

а это почти нативная производительность в отличии от полной виртуализации в гиперв.
«Вы никогда не сумеете решить возникшую проблему,
если сохраните то же мышление и тот же подход,
который привёл вас к этой проблеме.»
© Альберт Эйнштейн

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-05 11:01:30

поставил я xcp, поставил веб-консоль
его нужно вообще регистрировать, пишет, что trial

Аватара пользователя
alex117
ст. сержант
Сообщения: 341
Зарегистрирован: 2010-07-30 13:25:13

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение alex117 » 2018-09-05 11:07:08

сначала пробовал ставить клиентскую часть - не запускается, что-то наворотили, лог читал так и не понял в чем дело
а веб консоль - та еще гадость, куда ни ткни - все платно, снес к чертям, буду ковырять клиентскую часть

Аватара пользователя
Neus
капитан
Сообщения: 1753
Зарегистрирован: 2008-09-08 21:59:56

Тормозит дисковая система на PROXMOX

Непрочитанное сообщение Neus » 2018-09-05 16:19:07

alex117 писал(а):
2018-09-05 11:07:08
сначала пробовал ставить клиентскую часть - не запускается, что-то наворотили, лог читал так и не понял в чем дело
Microsoft .Net Framework 4.6.х ей надо
«Вы никогда не сумеете решить возникшую проблему,
если сохраните то же мышление и тот же подход,
который привёл вас к этой проблеме.»
© Альберт Эйнштейн