gstripe =)
Модератор: vadim64
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
2 izen
и что? ты своим постом хотел поазать что на 2 гигах оно рабоатет?
я гвоорю что на тазике том 256 рамы. а не два гига.
и что? ты своим постом хотел поазать что на 2 гигах оно рабоатет?
я гвоорю что на тазике том 256 рамы. а не два гига.
Убей их всех! Бог потом рассортирует...
Услуги хостинговой компании Host-Food.ru
Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/
- iZEN
- ст. лейтенант
- Сообщения: 1095
- Зарегистрирован: 2007-09-15 16:45:26
- Контактная информация:
Re: gstripe =)
6 Gb RAM. Во время работы занимается около 2Gb.lissyara писал(а):2 izen
и что? ты своим постом хотел поазать что на 2 гигах оно рабоатет?
я гвоорю что на тазике том 256 рамы. а не два гига.
GNU/Linux — это не Unix и даже никогда им не был, и, что самое смешное, никогда им не станет — GNU's Not Unix
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
и? к чему это?
я же сказал что там 256 рамы и это мало.
я же сказал что там 256 рамы и это мало.
Убей их всех! Бог потом рассортирует...
- iZEN
- ст. лейтенант
- Сообщения: 1095
- Зарегистрирован: 2007-09-15 16:45:26
- Контактная информация:
Re: gstripe =)
"мало" — не то слово. Это катастрофически мало для ZFS.lissyara писал(а):и? к чему это?
я же сказал что там 256 рамы и это мало.
Так что единственный выход: UFS2 на 1*gstripe на N*gmirror (RAID10), если нужна надёжность+скорость одновременно с нетребовательностью к ресурсам.
GNU/Linux — это не Unix и даже никогда им не был, и, что самое смешное, никогда им не станет — GNU's Not Unix
- Fastman
- ст. лейтенант
- Сообщения: 1236
- Зарегистрирован: 2006-07-07 10:20:38
- Откуда: Минск. РБ
Re: gstripe =)
Ошибаешся.iZEN писал(а):"мало" — не то слово. Это катастрофически мало для ZFS.lissyara писал(а):и? к чему это?
я же сказал что там 256 рамы и это мало.
Так что единственный выход: UFS2 на 1*gstripe на N*gmirror (RAID10), если нужна надёжность+скорость одновременно с нетребовательностью к ресурсам.
(1*gstripe на N*gmirror + надёжность+скорость одновременно с нетребовательностью ) = нонсенс. Даже не спорь.
Главное в жизни здоровье и любовь, остальное я все куплю.
- iZEN
- ст. лейтенант
- Сообщения: 1095
- Зарегистрирован: 2007-09-15 16:45:26
- Контактная информация:
Re: gstripe =)
Это ты что-то путаешь, даже не спорь.Fastman писал(а):Ошибаешся.iZEN писал(а):"мало" — не то слово. Это катастрофически мало для ZFS.lissyara писал(а):и? к чему это?
я же сказал что там 256 рамы и это мало.
Так что единственный выход: UFS2 на 1*gstripe на N*gmirror (RAID10), если нужна надёжность+скорость одновременно с нетребовательностью к ресурсам.
(1*gstripe на N*gmirror + надёжность+скорость одновременно с нетребовательностью ) = нонсенс. Даже не спорь.
RAID10 отличается от RAID 0+1 как Небо от Земли.
RAID10 — это несколько дисков, объединённых попарно в зеркала, которые затем объединяются в страйп массив. Ёмкость получившегося хранилища равна суммарному объёму зеркальных пар, а скорость записи пропорционально количеству зеркальных пар. То есть четыре диска в RAID10 дадут ёмкость как два диска. Надёжность же такая же, как у одного зеркала — выход из строя единичных накопителей — по-одному в каждом из зеркал — не критичен для работы.
(Есть один момент. В отдельном зеркале может быть не пара дисков, а три и более диска, зеркалирующих друг друга, — в этом случае скорость зеркала на запись, как всегда, равна скорости наименее скоростного накопителя в нём, а вот скорость чтения с зеркала пропорциональна количеству накопителей в нём, то есть по сравнению с зеркалом из пары дисков, скорость чтения из зеркала с тремя дисками будет в полтора раза выше. Таким образом, RAID10 из 6 дисков, объединённых в зеркальные тройки, а затем зеркала объединяются в страйп-массив, будет быстрее и надёжнее, но менее ёмкий, чем страйп-массив из трёх зеркал, в которых по два диска в каждом).
GNU/Linux — это не Unix и даже никогда им не был, и, что самое смешное, никогда им не станет — GNU's Not Unix
- Fastman
- ст. лейтенант
- Сообщения: 1236
- Зарегистрирован: 2006-07-07 10:20:38
- Откуда: Минск. РБ
Re: gstripe =)
Не расказывай мне про рэйды ))iZEN писал(а):Это ты что-то путаешь, даже не спорь.Fastman писал(а):Ошибаешся.iZEN писал(а):"мало" — не то слово. Это катастрофически мало для ZFS.lissyara писал(а):и? к чему это?
я же сказал что там 256 рамы и это мало.
Так что единственный выход: UFS2 на 1*gstripe на N*gmirror (RAID10), если нужна надёжность+скорость одновременно с нетребовательностью к ресурсам.
(1*gstripe на N*gmirror + надёжность+скорость одновременно с нетребовательностью ) = нонсенс. Даже не спорь.
RAID10 отличается от RAID 0+1 как Небо от Земли.
...
Я без тебя накурился их выше крыши
Я до тебя пытался донести что софтовые решения для рэйдов - это мелкие и домашние решения которые для серьезных вещей просто неприемлимы.
Тут с железными SAN коробками за дурные деньги иногда таких отгребешь секасов что потом снится в кошмарах.
Главное в жизни здоровье и любовь, остальное я все куплю.
- iZEN
- ст. лейтенант
- Сообщения: 1095
- Зарегистрирован: 2007-09-15 16:45:26
- Контактная информация:
Re: gstripe =)
Можно подумать, что "железные" RAID сильно быстрее soft-RAID. Ну, может быть чуть быстрее за счёт перекладывания расчёта контрольных сумм на специаизированный процессор конроллёра, однако же, проприетарные драйвера и GEOM работают в одном и том же пространстве — в пространстве ядра. Так что выше головы не прыгнешь, а зависеть от вендора-производителя дорогущего контроллёра RAID как-то не кузяво.Fastman писал(а):Не расказывай мне про рэйды ))
Я без тебя накурился их выше крыши
Я до тебя пытался донести что софтовые решения для рэйдов - это мелкие и домашние решения которые для серьезных вещей просто неприемлимы.
Тут с железными SAN коробками за дурные деньги иногда таких отгребешь секасов что потом снится в кошмарах.
Soft-RAID тем и хорош, что исключает Vendor lock-in.
GNU/Linux — это не Unix и даже никогда им не был, и, что самое смешное, никогда им не станет — GNU's Not Unix
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
вот тока на основноё работе, где поголовно все сервера с железными контроллерами - я сплю спокойней, чем на этой, ult вот такие странные поделия рождаются.iZEN писал(а):Можно подумать, что "железные" RAID сильно быстрее soft-RAID. Ну, может быть чуть быстрее за счёт перекладывания расчёта контрольных сумм на специаизированный процессор конроллёра, однако же, проприетарные драйвера и GEOM работают в одном и том же пространстве — в пространстве ядра. Так что выше головы не прыгнешь, а зависеть от вендора-производителя дорогущего контроллёра RAID как-то не кузяво.Fastman писал(а):Не расказывай мне про рэйды ))
Я без тебя накурился их выше крыши
Я до тебя пытался донести что софтовые решения для рэйдов - это мелкие и домашние решения которые для серьезных вещей просто неприемлимы.
Тут с железными SAN коробками за дурные деньги иногда таких отгребешь секасов что потом снится в кошмарах.
Soft-RAID тем и хорош, что исключает Vendor lock-in.
а что там кого исключает - мне глубоко насрать. хороший железный контроллер надёжней софтверного решения.
а лишние 300-400 баксов за сервер - не такая большая сумма чтоб не спать потом по ночам.
Убей их всех! Бог потом рассортирует...
- Fastman
- ст. лейтенант
- Сообщения: 1236
- Зарегистрирован: 2006-07-07 10:20:38
- Откуда: Минск. РБ
Re: gstripe =)
На копировании папки с хоме-видео ? Да.. разницы не будетiZEN писал(а):Можно подумать, что "железные" RAID сильно быстрее soft-RAID..
А теперь возми хорошую SAN коробку или железный контроллер толковый, и погоняй iometr c worker-ами которые эмулируют близкую к
реальной нагрузку на множественном доступе как линейно так и мелкими блоками. Будешь сильно удивлен
Не только... Железный контроллер это не только отдельный процессор для контрольных сумм.. Это прошивка которая реализует довольно сложные алгоритмы корректировки ошибок,iZEN писал(а): Ну, может быть чуть быстрее за счёт перекладывания расчёта контрольных сумм на специаизированный процессор конроллёра,
распределение кэша в зависимости от нагрузок, в конце концов без BBU можно курить в сторонке если речь идет о надежности.... Опять же, управление и обслуживание дискового массива.
Не путай драйвер железного контроллера который реализует интерфей к массиву.. и софтварный драйвер который еще и "кофе сварить" бегаетiZEN писал(а): однако же, проприетарные драйвера и GEOM работают в одном и том же пространстве — в пространстве ядра.
Так что выше головы не прыгнешь, а зависеть от вендора-производителя дорогущего контроллёра RAID как-то не кузяво.
Свобода - это не тогда когда можно делать все что угодно. А когда отвечаешь за свои решенияiZEN писал(а): Soft-RAID тем и хорош, что исключает Vendor lock-in.
Производители отвечают за это и требуют компенсировать финансово это. Все верно.
Я ж не против программных решений, я за то что всему свое место
Главное в жизни здоровье и любовь, остальное я все куплю.
- iZEN
- ст. лейтенант
- Сообщения: 1095
- Зарегистрирован: 2007-09-15 16:45:26
- Контактная информация:
Re: gstripe =)
Сомневаюсь: http://forum.lissyara.su/viewtopic.php?f=5&t=19909Fastman писал(а):Железный контроллер это не только отдельный процессор для контрольных сумм.. Это прошивка которая реализует довольно сложные алгоритмы корректировки ошибок,iZEN писал(а):Можно подумать, что "железные" RAID сильно быстрее soft-RAID..
распределение кэша в зависимости от нагрузок, в конце концов без BBU можно курить в сторонке если речь идет о надежности.... Опять же, управление и обслуживание дискового массива.
Свобода - это не тогда когда можно делать все что угодно. А когда отвечаешь за свои решения
Производители отвечают за это и требуют компенсировать финансово это. Все верно.
GNU/Linux — это не Unix и даже никогда им не был, и, что самое смешное, никогда им не станет — GNU's Not Unix
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
да-да...
а теперь выборочку по глюкам zfs дайте пожалуйста.
какой список больше-то будет?
а теперь выборочку по глюкам zfs дайте пожалуйста.
какой список больше-то будет?
Убей их всех! Бог потом рассортирует...
- iZEN
- ст. лейтенант
- Сообщения: 1095
- Зарегистрирован: 2007-09-15 16:45:26
- Контактная информация:
Re: gstripe =)
Тьфу три раза через левое плечо. За две недели интенсивного использования не заметил.lissyara писал(а):да-да...
а теперь выборочку по глюкам zfs дайте пожалуйста.
какой список больше-то будет?
GNU/Linux — это не Unix и даже никогда им не был, и, что самое смешное, никогда им не станет — GNU's Not Unix
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
Код: Выделить всё
%df -h
Filesystem Size Used Avail Capacity Mounted on
/dev/ad0s1a.journal 17G 795M 14G 5% /
devfs 1.0K 1.0K 0B 100% /dev
BackupStorage 2.0T 0B 2.0T 0% /shares
%su
backup# zfs list
NAME USED AVAIL REFER MOUNTPOINT
BackupStorage 135K 2,01T 26,9K /BackupStorage
backup# zfs get all BackupStorage
NAME PROPERTY VALUE SOURCE
BackupStorage type filesystem -
BackupStorage creation чт авг 27 16:50 2009 -
BackupStorage used 135K -
BackupStorage available 2,01T -
BackupStorage referenced 26,9K -
BackupStorage compressratio 1.00x -
BackupStorage mounted yes -
BackupStorage quota none default
BackupStorage reservation none default
BackupStorage recordsize 128K default
BackupStorage mountpoint /BackupStorage default
BackupStorage sharenfs off default
BackupStorage checksum on default
BackupStorage compression off default
BackupStorage atime on default
BackupStorage devices on default
BackupStorage exec on default
BackupStorage setuid on default
BackupStorage readonly off default
BackupStorage jailed off default
BackupStorage snapdir hidden default
BackupStorage aclmode groupmask default
BackupStorage aclinherit secure default
BackupStorage canmount on default
BackupStorage shareiscsi off default
BackupStorage xattr off temporary
BackupStorage copies 1 default
backup#
backup# mount
/dev/ad0s1a.journal on / (ufs, asynchronous, local, gjournal)
devfs on /dev (devfs, local)
BackupStorage on /shares (zfs, local)
backup#
проблема тока в том, что я нигде не вижу того что это действительно 5 раид... по месту - да, сходиться... но не вижу =((
Убей их всех! Бог потом рассортирует...
- Fastman
- ст. лейтенант
- Сообщения: 1236
- Зарегистрирован: 2006-07-07 10:20:38
- Откуда: Минск. РБ
Re: gstripe =)
В ZFS нету как такого RAID5, есть аналог - RAID Z...ты про него ?
Главное в жизни здоровье и любовь, остальное я все куплю.
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
да. в мане написано что аналог 5 - значит 5.
как узнать он или нет?
========
компрессию включил.
в этот момент чё-то копировалось - отвалилось... значит на ходу лучше не делать...
моунтпойнт сменить не даёт - в настройках дефолтоая а я отел прописать номральную
перемонтировать чтоли пытается?
нафига - оно уже туда смонтировано..
странно, в общем местами, но работает
кстати - непонятно зачем гиг рамы... у меня на той машине щас гиг - занято 256...
тока зря бегал искал две планки по 512....
как узнать он или нет?
========
компрессию включил.
в этот момент чё-то копировалось - отвалилось... значит на ходу лучше не делать...
моунтпойнт сменить не даёт - в настройках дефолтоая а я отел прописать номральную
Код: Выделить всё
backup# zfs set mountpoint=/shares BackupStorage
cannot unmount '/shares': Device busy
нафига - оно уже туда смонтировано..
странно, в общем местами, но работает
кстати - непонятно зачем гиг рамы... у меня на той машине щас гиг - занято 256...
Код: Выделить всё
backup# top -b | grep Mem
Mem: 19M Active, 18M Inact, 250M Wired, 136K Cache, 16M Buf, 705M Free
backup#
Убей их всех! Бог потом рассортирует...
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
да, работает явно быстрей чем предыдущая комбинация - на мелких файлах.
влёт копируются.
влёт копируются.
Убей их всех! Бог потом рассортирует...
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
Код: Выделить всё
backup# dd if=/dev/zero of=file bs=1m count=10000
10000+0 records in
10000+0 records out
10485760000 bytes transferred in 73.586085 secs (142496506 bytes/sec)
backup#
параллельно по самбе заливались файлы - по стмегабитной сетке.
а дальше посмотрим ))
Убей их всех! Бог потом рассортирует...
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
me bang head on wall
чё за фокус?
Код: Выделить всё
backup# cd /shares/
backup# pwd
/shares
backup# df -h | grep shares
BackupStorage 2.0T 32G 2.0T 2% /shares
backup# zfs get all BackupStorage | grep -E "compressratio|referenced|used"
BackupStorage used 32,2G -
BackupStorage referenced 32,2G -
BackupStorage compressratio 1.02x -
backup# dd if=/dev/zero of=file1.bin bs=10m count=1000
1000+0 records in
1000+0 records out
10485760000 bytes transferred in 73.100898 secs (143442287 bytes/sec)
backup# df -h | grep shares
BackupStorage 2.0T 32G 2.0T 2% /shares
backup# zfs get all BackupStorage | grep -E "compressratio|referenced|used"
BackupStorage used 32,2G -
BackupStorage referenced 32,2G -
BackupStorage compressratio 1.02x -
backup# dd if=/dev/zero of=file2.bin bs=10m count=1000
1000+0 records in
1000+0 records out
10485760000 bytes transferred in 72.480688 secs (144669709 bytes/sec)
backup# df -h | grep shares
BackupStorage 2.0T 32G 2.0T 2% /shares
backup# zfs get all BackupStorage | grep -E "compressratio|referenced|used"
BackupStorage used 32,2G -
BackupStorage referenced 32,2G -
BackupStorage compressratio 1.02x -
backup# ll file
file.bin file1.bin file2.bin
backup# ll file*
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:24 file.bin
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:28 file1.bin
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:32 file2.bin
backup#
Убей их всех! Бог потом рассортирует...
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
Код: Выделить всё
backup# pwd
/shares
backup# du -h -d1
3,8G ./trash
3,5K ./tmp
28G ./data
32G .
backup# ll ./tmp/
total 2
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:46 file.bin
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:43 file1.bin
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:40 file2.bin
backup# ll
total 8
drwxr-xr-x 4 root wheel 4B 28 авг 02:23 data
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:24 file.bin
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:28 file1.bin
-rw-r--r-- 1 root wheel 9,8G 28 авг 09:32 file2.bin
drwxr-xr-x 2 root wheel 5B 28 авг 09:43 tmp
drwxrwx--- 4 root wheel 4B 27 авг 23:05 trash
backup# zfs get all BackupStorage | grep -E "compressratio|referenced|used"
BackupStorage used 32,2G -
BackupStorage referenced 32,2G -
BackupStorage compressratio 1.02x -
backup#
Убей их всех! Бог потом рассортирует...
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
Код: Выделить всё
backup# zpool status
pool: BackupStorage
state: ONLINE
scrub: none requested
config:
NAME STATE READ WRITE CKSUM
BackupStorage ONLINE 0 0 0
raidz1 ONLINE 0 0 0
ad4 ONLINE 0 0 0
ad6 ONLINE 0 0 0
ad8 ONLINE 0 0 0
ad10 ONLINE 0 0 0
errors: No known data errors
backup#
осталось разобраться с волшебным местом )
как-то оно странно себя ведёт +)
Убей их всех! Бог потом рассортирует...
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: gstripe =)
осталось про компрессратио найти...On UFS, the du command reports the size of the data blocks within the file. On ZFS, du(1) reports the actual size of the file as stored on disk. This size includes metadata as well as compression. This reporting really helps answer the question of "how much more space will I get if I remove this file?" So, even when compression is off, you will still see different results between ZFS and UFS.
оно должно быть офигительным - из 90 гигов что там лежат 60 гиг - это нули из /dev/zero - но - цифирки говорят иное =(
Убей их всех! Бог потом рассортирует...
- Fastman
- ст. лейтенант
- Сообщения: 1236
- Зарегистрирован: 2006-07-07 10:20:38
- Откуда: Минск. РБ
Re: gstripe =)
Я так понимаю тебя смущает что созданные по dd файлы с нулями не включены в общий размер ????
P.S. По поводу пямяти - ее на ZFS не бывает лишней. При активном вводе-выводе - будет кушаться, не пропадет
P.S. По поводу пямяти - ее на ZFS не бывает лишней. При активном вводе-выводе - будет кушаться, не пропадет
Главное в жизни здоровье и любовь, остальное я все куплю.
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
- iZEN
- ст. лейтенант
- Сообщения: 1095
- Зарегистрирован: 2007-09-15 16:45:26
- Контактная информация:
Re: gstripe =)
Ничего странного — для всех файловых систем пула по умолчанию доступен весь размер пула.lissyara писал(а):осталось разобраться с волшебным местом )
как-то оно странно себя ведёт +)
Solaris ZFS Administration Guide (PDF, 1.6Mb)lissyara писал(а):осталось про компрессратио найти...
GNU/Linux — это не Unix и даже никогда им не был, и, что самое смешное, никогда им не станет — GNU's Not Unix