Заканчивая неделю ZFS

Заканчивая неделю (или полуторамесячник) ZFS, финальные тесты. Списал данные, добавил еще один диск, прежде чем возвращать данные - маленько потестировал

Оборудование: i3-6300T, 32GB RAM, 7 дисков (6Tb HGST: 4 штуки 7k6000 и 3 штуки He8), диски подключены к чипсетному контроллеру (Intel C236).

Окружение: FreeBSD 11.0-p4

Методика: собираем пул, делаем на нем один датасет с размером блока 1m или 128к, пишем 200-гигабайтный файл
dd if=/dev/zero of=/zdata/testset bs=1m count=200k
Затем читаем этот файл той же командой dd в /dev/nul с мегабайтным же размером блока.

Из 6 или 7 дисков можно составить разные комбинации, я пробовал не все, меня интересовал в первую очередь raidz2, остальные - ну "до кучи". Результаты в таблице - в десятичных мегабайтах (10^6 байт):

Жирным выделены результаты, которые мне не понравились (слишком медленно) и я перетестировал второй раз. Они повторились (ну с точностью в 2-3%)

За исключением выделенного и вообще всей строчки 7xHDD, RAIDZ1, скорости "в расчете на один шпиндель" очень близки, 183-193 MB/s на шпиндель, что довольно близко к тому, что можно получить с дисков He8 (196Mb/sec в начале диска). У 7-дискового raidz1 пишут в комментариях про неудачный паттерн.

Отчего так просели выделенные места - не знаю, неудачно встали звезды (размазались размеры I/O по дискам).