Медленное копирование.

[arkan]

Еще раз повторю
Вот поэтому ZFS очень многие фряшники и ждали
а там что ссылку дали несколько постов вверх то там не на SATA винтах вот поэтому и скоростя за 100 и за 200 переваливают

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[kharkov_max]

Продолжаем ?

На IDE винте для теста решил поставить ZFS, все вроде получилось, прописал в loader.conf в rc.conf, создал zpool и в нем раздел и примаунтил к основной UFS системе.
В виду того что пока есть диск только IDE, проверить скорость на Sata-2 пока не могу....

Но уже возник вопрос:
Диск на ZFS открыл посети Samboй так вот читает замечательно, а писать на него не хочет.
По ftp все реботает без вопросов.

Гугля по инету, где то тут же на Lissyare видел статью что это пока не возможно.
Но статья немного старовата, на данный момент ничего не поменялось ? Может уже как то Sambу прикрутили к ZFS ?

[arkan]

желательноб взглянуть на конфиг smb.conf да и права доступа на каталог куда пытаешься записать файло
Кстати скажи линку на статейку как ZFS прикрутил

[kharkov_max]

желательноб взглянуть на конфиг smb.conf да и права доступа на каталог куда пытаешься записать файло
Кстати скажи линку на статейку как ZFS прикрутил

Хм.. дал заново права на папку и вроде все заработало.
Лью 60 Гб файлов, пока полет нормальный.

Прикручивал отсюда: http://citkit.ru/articles/464/
И еще сюда смотрел: http://www.xgu.ru/wiki/ZFS

Как доберусь до скорости Sata-2 на ZFS отпишу результаты ...

[Alex Keda]

сдаётся мне, что-то вы не так делаете.
в systat и top при копировании неплохо бы взглянуть.
====
да и через mc тестировать - это вообще трэш какой-то..
голый cp тогда уж.

Код: Выделить всё

backup1# time dd if=/dev/zero of=file.bin bs=10m count=1024
1024+0 records in
1024+0 records out
10737418240 bytes transferred in 73.605059 secs (145878808 bytes/sec)
0.000u 31.162s 1:13.64 42.3%    26+1518k 323+81920io 0pf+0w
backup1#       

голая теория на этом контроллере говорит - 160 метров в секунду.
ибо U160 SCSI

[kharkov_max]

сдаётся мне, что-то вы не так делаете.
в systat и top при копировании неплохо бы взглянуть.
====
да и через mc тестировать - это вообще трэш какой-то..
голый cp тогда уж.

Код: Выделить всё

backup1# time dd if=/dev/zero of=file.bin bs=10m count=1024
1024+0 records in
1024+0 records out
10737418240 bytes transferred in 73.605059 secs (145878808 bytes/sec)
0.000u 31.162s 1:13.64 42.3%    26+1518k 323+81920io 0pf+0w
backup1#       

голая теория на этом контроллере говорит - 160 метров в секунду.
ибо U160 SCSI

Вот результат:
1.НЖМД Sata-2, 80Гб, UFS2 (поднят gmirror)

Код: Выделить всё

[6:43]gateway:/home>>time dd if=/dev/zero of=file.bin bs=10m count=1024
1024+0 records in
1024+0 records out
10737418240 bytes transferred in 220.706349 secs (48650246 bytes/sec)
0.000u 35.304s 3:40.89 15.9%    27+1145k 230+86253io 0pf+0w

2. НЖМД IDE ATA100, 80 Гб, ZFS

Код: Выделить всё

[7:21]gateway:/usr/mydisk>>time dd if=/dev/zero of=file.bin bs=10m count=1024
1024+0 records in
1024+0 records out
10737418240 bytes transferred in 1666.003946 secs (6445014 bytes/sec)
0.000u 19.195s 27:46.02 1.1%    29+1233k 0+0io 0pf+0w

3. НЖМД Sata-2, 500 Гб, UFS2 (он то меня больше всего и интересует)

Код: Выделить всё

[7:50]gateway:/usr/storage>>time dd if=/dev/zero of=file.bin bs=10m count=1024
1024+0 records in
1024+0 records out
10737418240 bytes transferred in 163.302033 secs (65751896 bytes/sec)
0.007u 30.185s 2:43.33 18.4%    26+1131k 430+82089io 0pf+0w

На сколько я понимаю 1) ~48 Мб/сек 2) ~6 Мб/сек 3) ~65 Мб.сек
top в этот момент показывает 40-48% простоя проца, а вот памяти маловато Inact - 222 Мб, Free - 5 Мб.

[Alex Keda]

шлейфик поменяйте, чтоли...
чё-то не так со вторым тестом

[kharkov_max]

шлейфик поменяйте, чтоли...
чё-то не так со вторым тестом

1. Могла ли повлиять на результаты 2 го теста определенная занятось винта в момент теста? Шлейф буду смотреть...
2. Что подскажете по тесту 1 и 2 данные показатели "относительно" нормальные для UFS2
3. Улучшется ли ситуация со скоростью чтения/записи если 3й перевести на zfs, понимаю что все познается в сравнении, но нет накопителя на котором можно тестить и процесс перехода 3 го винта для меня немного геморойный.
Хотелось бы знать Ваше мнение ...

Ps: После ребута шлюза Винт 2:

Код: Выделить всё

[9:33]gateway:/usr/mydisk>>time dd if=/dev/zero of=file.bin bs=10m count=1024   1024+0 records in
1024+0 records out
10737418240 bytes transferred in 592.321818 secs (18127676 bytes/sec)
0.000u 19.886s 9:52.32 3.3%     27+1171k 0+0io 0pf+0w

Ту же скорость для 2 го винта показывает и МС при копировании ...

[kharkov_max]

Вроде как продолжу....

После обновления системы до 8.1 и установки samba34-3.4.8, опять обратил внимание на скорость копирования по сети (freebsd -> windows).
И был удивлен, скорость стабильно возросла до 11.8 Мб/сек, как минимум так тотал показывает. (т.е 100 М/бит)
Скорость копирования одинаковая в обе стороны.

Причину того почему раньше было так медленно (6-8 Мб/сек), не нашел, но уверен что причина софтовая (возможно кривой порт).

[FreeBSP]

у меня на 7.1 тоже самбочка тормозит. для перекидывания больших объемов использую ftp - получаются нормальные 70-90+ мбод
по харду - в свое время получал показатель около 22мбайт/сек на ИДЕ харде..

[OHOSTING]

В системе стоит 2 сигейта 1.5Т
Система Freebsd 8.1 amd64
4ядра, 2 гига

У меня на 1.5 Тбайтном винте SEAGATE скорость копирования с ufs падает до 3 Мб/c и все тупит. Сервер продакшн.
Запускал на 3 разных машинах, в одной памяти 5 Гб, на рабочей машине 2 Гб, а также работала в VMWARE c 1 гигом под виндой, на машине, на которой 5 гиг.

Код: Выделить всё

machdep.tsc_freq: 3360011224
cpu: 4 

Загрузка во время копирования:

Код: Выделить всё

last pid: 89855;  load averages:  0.01,  0.12,  0.26                                                                  up 0+23:36:27  15:44:46
204 processes: 1 running, 201 sleeping, 2 zombie
CPU:  0.4% user,  0.1% nice,  2.7% system,  0.7% interrupt, 96.2% idle
Mem: 543M Active, 704M Inact, 615M Wired, 66M Cache, 209M Buf, 8864K Free
Swap: 4096M Total, 63M Used, 4033M Free, 1% Inuse

Код: Выделить всё

# zpool iostat
               capacity     operations    bandwidth
pool         used  avail   read  write   read  write
----------  -----  -----  -----  -----  -----  -----
odrv         305G  1,03T     75     47  8,20M  2,34M
osys        6,26G  23,5G     19     15  2,00M   176K
----------  -----  -----  -----  -----  -----  -----

Disks   ad0  ada0  ada1 pass0 pass1                628536 wire   2000 cpu1: time
KB/t   0,00  0,00 79,00  0,00  0,00                557076 act    2000 cpu2: time
tps       0     0   516     0     0                714748 inact       hdac1 258
MB/s   0,00  0,00 39,77  0,00  0,00                 71472 cache
%busy     0     0   101     0     0                 11304 free
                                                   214432 buf

Статус ZFS

Код: Выделить всё

# ./zfs_mem_stat.sh
TEXT=19223368, 18,3328 MB
DATA=140272640, 133,774 MB
TOTAL=159496008, 152,107 MB

Вижу скорость драйвай 40 метров
при этом скорость в mc

Код: Выделить всё

 ETA 0:07:39 (2,59 Мб/с)    

и все тупит.


Еще:
Копирую

Код: Выделить всё

# dd if=torg_2009-11-21.sql of=/dev/null bs=1m
1102+1 records in
1102+1 records out
1156343987 bytes transferred in 25.109680 secs (46051721 bytes/sec)

Disks   ad0  ada0  ada1 pass0 pass1                621140 wire   2005 cpu1: time
KB/t    128  0,00 53,28  0,00  0,00                544576 act    2005 cpu2: time
tps      16     0   364     0     0                745420 inact       hdac1 258
MB/s   1,98  0,00 18,96  0,00  0,00                 65320 cache
%busy     2     0   100     0     0    

dd if=torg_2009-11-21.sql of=/d01/sss bs=1m
^C76+0 records in
75+0 records out
78643200 bytes transferred in 25.769306 secs (3051817 bytes/sec)

Теперь копирую большой файл с zfs

Код: Выделить всё

Disks   ad0  ada0  ada1 pass0 pass1                624676 wire   2000 cpu1: time
KB/t   0,00  0,00   127  0,00  0,00                530668 act    2000 cpu2: time
tps       0     0   827     0     0                743108 inact       hdac1 258
MB/s   0,00  0,00   103  0,00  0,00                 78716 cache
%busy     0     0    95     0     0                  5952 free
                                                   214432 buf
dd if=dbmail.sql of=/dev/null bs=1m
6994+1 records in
6994+1 records out
7334663731 bytes transferred in 170.100408 secs (43119613 bytes/sec)

Система при этом практически не тупила

Копирую этот файл на ufs

Код: Выделить всё

dd if=dbmail.sql of=/mnt/xxx bs=1m

^C2124+0 records in
2124+0 records out
2227175424 bytes transferred in 134.260822 secs (16588424 bytes/sec)

Тоже не тупила.