Разное

Slow ZFS read: проблема не в коде а в данных на диске

Картинка, вероятно, уже надоела, но вот вам очередная порция тестов.

Ящик: Intel i5-2400, 16Gb RAM, Adaptec 5805, 5x4Tb (HGST NAS) в JBOD, собраны в RAIDZ2.

Свободного места достаточно:

$ zpool list
NAME      SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
zdata    18,1T  5,11T  13,0T         -     9%    28%  1.00x  ONLINE  -

настройки в loader.conf:

vm.kmem_size="15G"
vfs.zfs.arc_max="14G"

Загружаем FreeBSD 11.0-RELENG:...

FreeBSD ZFS read: 11-STABLE тоже поломана

Все оказалось еще гораздо хуже, чем казалось на первый взгляд:

  1. FreeBSD 11-STABLE тоже поломана
  2. И поломка - это свойство, возникающее при записи файла.

Давайте значит по порядку.

I. Другой ящик:

  • i3-6300T, 32Gb RAM, 6 дисков по 6Tb в RAIDZ2, диски подключены к контроллеру на материнке.

II. Берем FreeBSD 11-STABLE, конкретно вот эту вот:

FreeBSD home-gw.lexa.ru 11.0-STABLE...

FreeBSD ZFS read speed: они убили кенни!

Вчерашний вечер у меня тоже прошел не скучно.

Я взял уже знакомый вам стенд:

  • i5-2400, 16GB RAM
  • LSI 9211-8i (FW 16.0, IT-mode, без BIOS)
  • 7 дисков WD1003FBYX

И начал делать так:

  1. Скачиваю с ftp.freebsd.org FreeBSD-NN.y-RELEASE-amd64-memstick.img
  2. Пишу его на флешку
  3. Загружаюсь с этой флешки (никаких дополнительных настроек!)
  4. Собственно тестирую:

zpool create -O recordsize=nn ztest raidz2 /dev/gpt/DISK[0-5/6]
...

Про ZFS prefetch (2)

Продолжение вот этого вот текста, теперь более систематически.

АХТУНГ. Все описанные ниже эксперименты (и прошлая серия экспериментов) - относятся ТОЛЬКО к FreeBSD-12. На 10.3-11.0 (РЕЛИЗНЫХ, в -stable все похоже хуже) картина принципиально другая и деградации скорости чтения при маленькой глубине префетча нет.

Провел вчерашнее утро, а затем - вечер за стендом,  который схематически показан на картинке (там 7 дисков, потом...

4 года прогресса

Берем одну и ту же FreeBSD11 и делаем

time make -j8 buildworld

Сначала на i3-2120:

А потом на i3-6300T (пересадив диск на другую материнку)

Тактовые частоты одинаковые (3.3Ghz), платформы (материнка, сокет, тип памяти) - понятно что разные, но это как раз нормально т.к. апгрейд процессора "на 4 поколения" всяко сопровождается сменой платформы. Диск - SSD, памяти достаточно, чтобы влезли и исходники и получившийся результат (в сумме...

Exclusive! blog.lexa.ru Black Friday Deals!!!

(Подсмотрел у Питенина в фейсбуке)

По случаю почернения пятницы, объявляется скидка 10% на все, что я тут распродаю потихоньку:

  • Видеокарты
    • NVidia GTX970 в исполнении ASUS Strix: Продано.
    • AMD Radeon 7970HD: 7000р  6300р
  • Оптика Zeiss
  • Оптика Pentax67:
    • Pentax67 55/4 (прекрасно сочетается со следующим пунктом):
  • ...

Sale: Asus/NVidia GTX970-DC2OC

добавил картинок, освежил дату

Продается:

Видеокарта Asus GTX970-DC2OC

 

Продано.

Ахтунг: Paypal, Ebay, сломалась опция "конверсия банком"

Наткнулся второй раз (29 октября и сегодня) на такую фигню:

  • При оплате на ebay через Paypal, счет выставлен в валюте (это были AUD и EUR)
  • При выставлении в пейпале опции "конверсия карточной системой/банком"
  • Платеж не проходит.
  • А если ставить опцию "конверсия пейпалом" - то проходит, списываются рубли. По известно какому (конскому) курсу пейпала.

Первый раз цена всего вопроса была меньше $2 (то есть на потери я тупо наплевал), второй раз 29EUR - и тут я уже позвонил в саппорт пейпала.

В саппорте мне сказали:

  1. Проблема известная
  2. "проблема не у них" а в выставлении счета ebay
  3. Они уже знают и чинят.

Короче, если у вас валютная карта (как у меня) и вы не хотите терять на двойной конвертации (как я), то с покупками на eBay стоит подождать с недельку, а потом попробовать на какой-то очень мелкой ерунде.

P.S. На фейсбуке мне пишут "все работает". У меня - все не работает, но карты при этом ВТБ24 и просто ВТБ (Банк Москвы), может дело в банке еще.

UPD: по состоянию на 20 ноября, долларовый платеж без лишних конверсий проходит при оплате пейпалом не-ebay.

10 лет в эфире

Забегался и пропустил юбилей.

Этот бложик с вами уже 10 лет ну и еще 6 дней.

Про ZFS и манипулирование данными

Таскал тут данные туда-сюда, RAIDZ1 разобрать, RAIDZ2 собрать.

Но так как дисков/питания на "поднять оба массива сразу" не хватало, делал это хитровывернутым образом - скопировал на одиночные диски, потом собрал degraded-массив без этих дисков (подстановкой файликов из нулей вместо них), скопировал обратно, восстановил четность.

И смотрю я теперь на iostat -x 100 и не радуюсь:

device     r/s   w/s    kr/s    kw/s qlen svc_t  %b
da0      330.3  10.1 11156.0   104.6    0   3.9  20
da1      330.2  10.4 11152.1   107.8   
...

Sony, ты одурела!

353000/3500 = 100.85 рублей за доллар?

А для 70-200/2.8FE курс получается 92 рубля ровно, фотографам тоже расслабляться не стоит.

Поддерживает ли UFS2 файлы больше 1Tb?

Да, поддерживает (интернеты в этом расходятся, было немножко нервно):

lexa@home-gw:~# ls -l /DATA/
total 3446778112
-rw-r--r--  1 root  wheel   877456780272 Nov  2 18:24 archive-books3
-rw-r--r--  1 root  wheel  1844203276336 Nov  3 01:49 archive-photoarc
-rw-r--r--  1 root  wheel   171793351432 Nov  2 19:47 archive-photoother
-rw-r--r--  1 root  wheel   635185397760 Nov  3 11:49 archive-raw-archive

 

Это уже второй 6-терабайтник заполняется, игра в 15, так ее растак:

  • Cбэкапить текущий ZFS (6x4Tb, RAIDZ1)
  • Собрать новый в деградированном виде (6xTB, RAIDZ2, два висят
  • ...

О новых технологиях, мать их за ногу

Постоянные читатели этого блога уже знают, что недавно я сменил беспроводную мышку на проводную.

Пришла очередь клавиатуры: последние дни вечерами я чудовищно страдал уже от клавиатуры: буквы набирались не сразу, иногда двоили и все такое. Я даже винду восстановил из бэкапа двухнедельной давности (думая что какой-то апдейт чего-то кривой прилетел), но не помогло.

И вот сегодня - опять.

Воткнул проводную такую же (Logitech Wave) - как рукой сняло.

Подозреваю теперь, что соседи снизу включают направленную в меня микроволновку  обзавелись какой-то бытовой техникой, которая на 2.4 гигагерца гадит. И придя с работы - ее включают

Пойду значит в лабаз за нормальной механической кнопочной, осталось только выбрать.

А подозрения в протухлости беспроводной мыши были, похоже, напрасными.

#отдамдаром: Dell P2214H под ремонт

ВОПРОС ЗАКРЫТ, монитор отдан.

Есть монитор Dell P2214H, 22", FullHD.

Плохо работает:

  • при подключении по DVI, работает несколько минут, потом начинает, судя по всему, переключать входы, ищет что-то на дисплейпорте, потом обратно уходит на DVI. Раз в несколько минут же.
  • Фиксация входа (DVI) через меню не работает, самопроизвольно переключается на Auto
  • Подключение через DisplayPort: моргает раз в пару секунд.

Так как работать надо, а ремонтировать некогда - сегодня купил замену, а этот отдаю "как есть", а именно только монитор, коробки давно нет, кабели использованы для подключения замены.

Sale: видеокарты для вычислений (но годятся и для игр)

По всей видимости, мои упражнения с (научными) вычислениями на видеокартах закончены, занимаюсь уже совсем другим. В связи с этим - распродаю остатки:

NVidia Geforce Titan: продано

AMD Radeon 7970HD (3GB, Tahiti XT): продано

Меня интересуют только мыши-2

В прошлой записи с тем же заголовком был написан срок жизни пред-предыдущей мыши.
А в этом - будет про предыдущую. Logitech Performance MX прожила 6.5 лет

Сегодня купил новую, Logitech 502 Gaming, проводная, отличная.

А эта запись - чтобы через N лет вспомнить, когда же я ее купил. Вот тупо по тегу Logitech

Не прохожу мимо

Эти люди задолбали меня по телефону (а сегодня еще и бумажку в почтовый ящик положили), поэтому не могу пройти мимо.

Если вы найдете в почтовом ящике (в Москве!) такую вот бумагу:

Знайте, вас хотят развести на поверку счетчиков воды за 1800 рублей (при нормальной цене ~600) и скорее всего - раньше срока.

В моем случае они довольно умело прикидываются ЕИРЦ по телефону (поди отличи ЕРЦ от ЕИРЦ по телефону) и говорят очень убедительно. Только то, что я знаю сроки поверки и сроки годности счетчиков наизусть (ибо задолбали, не только эти) позволяет говорить с ними уверенно.

В случае бумаги - их выдает ИНН (московские все начинаются с 77, а эти - областные, ибо 50...), адрес (ул. Лавочкина - это Химки) ну и ООО (все государственное - не бывает ООО). Ну и в моем случае - там еще в базе ошибка, что позволило мне послать их в жопу в первый раз (при звонке, первый звонок был где-то с год назад), а потом я уже все про счетчики выучил наизусть.

К сожалению, мошенничества в бумаге не видно. Там все правильно написано, счетчики надо поверять и все такое, жаловаться в прокуратуру - я не вижу на что.

Совет: посмотрите на реальную дату поверки на pgu.mos.ru, если до нее далеко, то научите всех в округе (особенно - пожилых) на слова "счетчик воды" просто класть трубку. Если до поверки близко - найдите нормальных (а не тех, кто такими холодными звонками) и поверьте.

Ну чем еще порадовать ся?

Поздравил себя с 46-летием при помощи Samsung 950Pro

5-баксовый адаптер работает только едет очень долго. В результате у меня теперь есть 5-баксовый (ехал больше 3 недель) и 8-баксовый, который доехал за 4 дня:

Ну и все, наверное, знают, что родной NVMe драйвер в Windows 8.1 - говно. Я поставил самсунговский, есть наверное и другие варианты.

UPD: но...

Будущее уже тут. Совсем

Сходил за бухлом. Дали чек. На чеке - QR-код (который, впрочем, не прочелся нормально или я не умею) и URL: http://check.egais.ru/?id=ffcd......

Ну я не поленился и вбил URL в адресную строку. А там такое:

И это - реалтайм, ну то есть я до дома дошел, минут пять прошло, но понятно что в базу оно легло сразу.

Горд отечественным айти!

Будущее уже тут. Частично

Заглянул в "личный кабинет налогоплательщика", а он мне и говорит (человеческим голосом):

Закон тоже заботливо выложен на сайте налоговой

Если в двух словах, то

  • Пользователи личного кабинета - сношаются с ФНС только через электронные сервисы "если не попрошено обратного". Сношение это - полноценное даже с неквалифицированной подписью.
  • ИП, нотариусы и прочие подобные - для полноценных электрических сношений нужна полноценная же подпись, увы.

В связи с этим - вопрос, а получить полноценную подпись халявно - никак нельзя? Раньше вот был проект УЭК, но он остался только в избранных регионах, в Москве - по факту нету....

Pages

Subscribe to Разное