The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux , opennews (??), 23-Май-19, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


3. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –1 +/
Сообщение от Анонимус154 (?), 23-Май-19, 22:39 
Насколько оно пригодно для использования на десктопах, а не серверах?
Последнее обсуждение, что я помню - дефолтные настройки ARC жрут слишком много памяти, а уменьшение ARC резко негативно влияет на производительность.
Ответить | Правка | Наверх | Cообщить модератору

8. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от Аноним (8), 23-Май-19, 23:00 
Всё верно, ZFS не десктопная система. Но задуматься стоит, если Вам нужно сжатие, т.к. на данный момент к сожалению только COW системы поддерживают сжатие. И ZFS, вероятно, меньшее из зол.
Ответить | Правка | Наверх | Cообщить модератору

23. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +16 +/
Сообщение от Аноним (23), 24-Май-19, 00:04 
меньшее из ZoL
Ответить | Правка | Наверх | Cообщить модератору

53. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +1 +/
Сообщение от Аноним (53), 24-Май-19, 09:51 
Лучшее сочетание сжатия и скорости сейчас обеспечивает zstd, а это пока только btrfs.
Ответить | Правка | К родителю #8 | Наверх | Cообщить модератору

76. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +4 +/
Сообщение от Led (ok), 24-Май-19, 13:01 
Не только. Еще reiser4.
Ответить | Правка | Наверх | Cообщить модератору

125. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +2 +/
Сообщение от ананим.orig (?), 24-Май-19, 19:36 
https://blog.delouw.ch/2018/12/17/using-data-deduplication-a.../

https://www.redhat.com/en/blog/look-vdo-new-linux-compressio...

Ответить | Правка | К родителю #53 | Наверх | Cообщить модератору

83. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +3 +/
Сообщение от X4asd (ok), 24-Май-19, 15:03 
> если Вам нужно сжатие

то пользуйтесь архиватором

Ответить | Правка | К родителю #8 | Наверх | Cообщить модератору

167. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от Аноним (8), 26-Май-19, 16:14 
И снепшоты тоже через 7zip делаются за раз...
Ответить | Правка | Наверх | Cообщить модератору

25. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –1 +/
Сообщение от RNZ (ok), 24-Май-19, 00:12 
Очень пригодно.
Делаем zfs_arc_max в 10% RAM, где RAM>20GiB и радуемся, радуемся.
Негативного воздействия на производительность - не наблюдаем.

Ответить | Правка | К родителю #3 | Наверх | Cообщить модератору

51. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –4 +/
Сообщение от пох (?), 24-Май-19, 09:48 
значит, производительность вам была не нужна вообще.

Ответить | Правка | Наверх | Cообщить модератору

96. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +1 +/
Сообщение от RNZ (ok), 24-Май-19, 16:38 
> значит, производительность вам была не нужна вообще.

С чего вдруг? Всё летает.

Причём если ОЗУ много (к примеру 2-4tb) для zfs может хватить и 7%-3% ОЗУ.

Ответить | Правка | Наверх | Cообщить модератору

97. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +1 +/
Сообщение от RNZ (ok), 24-Май-19, 16:49 
> значит, производительность вам была не нужна вообще.

А zfs на десктопе не для производительности, а для удобства. Для производительности - SSD.
И по секрету скажу, у меня для L2ARC есть, на котором 200G для того, что может быть в ОЗУ, но не обязано.
И ещё по секрету скажу, ARC на zfs умеет освобождать память в адаптивном режиме. Потому на десктопе с RAM 32G и 10% под ARC после полудня втыкания в браузер может быть занятым в 300-500M.

Ответить | Правка | К родителю #51 | Наверх | Cообщить модератору

101. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +1 +/
Сообщение от пох (?), 24-Май-19, 17:22 
> Потому на десктопе с RAM 32G и 10% под ARC после полудня втыкания в браузер может быть занятым в
> 300-500M.

это значит что вы его таки доломали совсем. :-(

arc должен освобождаться только в одном-единственном случае - острой нехватки памяти в системе.
Точно так же, как это делает буферный кэш - иногда полезнее выбросить в своп нечто, что может и вообще никогда не понадобиться, но сохранить read cache. С чего он у вас уменьшается если 31.5 гига заняты непоймичем? (окей, там на самом деле еще 500 из них занимает abd, который вы не видите, но он есть, где еще 31?)

l2arc - это, чаще всего, деньги, которые вы могли потратить на оперативную память, но потратили на фигню (он имеет смысл, когда память либо физически не лезет уже, либо когда ее больше по одним мнениям 128, по другим 256G из-за каких-то проблем реализации, которые авторы zfs решать не планируют, потому что у них стока нет ;-)
Кстати, рекомендую иметь в виду, что его индекс не выгружается и жрет место в оперативной памяти - всегда, вне зависимости от востребованности самого arc2.

Ответить | Правка | Наверх | Cообщить модератору

154. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от RNZ (ok), 25-Май-19, 20:28 
>> Потому на десктопе с RAM 32G и 10% под ARC после полудня втыкания в браузер может быть занятым в
>> 300-500M.
> это значит что вы его таки доломали совсем. :-(

Нет

> arc должен освобождаться только в одном-единственном случае - острой нехватки памяти в
> системе.
> Точно так же, как это делает буферный кэш - иногда полезнее выбросить
> в своп нечто, что может и вообще никогда не понадобиться, но
> сохранить read cache.

Нет, на desktop он может не заполняться, потому-что это desktop - он может выключаться к примеру

> С чего он у вас уменьшается если 31.5
> гига заняты непоймичем? (окей, там на самом деле еще 500 из
> них занимает abd, который вы не видите, но он есть, где
> еще 31?)

Ничем.

> l2arc - это, чаще всего, деньги, которые вы могли потратить на оперативную
> память, но потратили на фигню (он имеет смысл, когда память либо
> физически не лезет уже, либо когда ее больше по одним мнениям
> 128, по другим 256G из-за каких-то проблем реализации, которые авторы zfs
> решать не планируют, потому что у них стока нет ;-)

Он имеет смысл, когда desktop выключается/включается. И вместо чтения с hdd, выполняется чтение нужных данных с ssd (l2arc).

> Кстати, рекомендую иметь в виду, что его индекс не выгружается и жрет
> место в оперативной памяти - всегда, вне зависимости от востребованности самого
> arc2.

Надо проверять. Но для desktop который выключается - не критично.

Ответить | Правка | Наверх | Cообщить модератору

156. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от пох (?), 25-Май-19, 20:41 
> Нет, на desktop он может не заполняться

а, это может. У меня десктоп только виндовый, и ему вечно памяти не хватает (потому что не совсем и десктоп), и перезагружается не чаще раза в две недели. Линуксная система (ни разу не в метафоре десктопа) выключается пару раз в году, и ей есть что держать в кэше.

> Он имеет смысл, когда desktop выключается/включается. И вместо чтения с hdd, выполняется чтение
> нужных данных с ssd (l2arc).

а оно его не обнуляет при перезагрузке? И, кстати, если не - сама эта перезагрузка будет изрядно быстрее, если индекс l2arc (причем какого-то, как я понял, гомерического размера) не перечитывать (нет ведь никаких гарантий, что эти данные вообще зачем-то нужны).

> Надо проверять.

это описано в доках оракла, и,по-моему, в доках фринаса, вместе с конкретными цифрами.
Есть ли в линуксе для этого инструменты - не в курсе, у меня-то это в top.

но в общем это настолько странное и далекое от гайдлайнов использование, что я бы взял секундомер и померял типовые задачи этого десктопа (включая вкл-выкл, раз они частые) - отдельно с l2arc, отдельно с нормальной настройкой zfs (без ненужных ограничений) и без l2arc вообще

Будете мерять - положите куда-нибудь, это гораздо интереснее серверов с аптаймом по 450 дней.

Ответить | Правка | Наверх | Cообщить модератору

163. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от RNZ (ok), 25-Май-19, 21:40 
>> Нет, на desktop он может не заполняться
> а, это может. У меня десктоп только виндовый, и ему вечно памяти
> не хватает (потому что не совсем и десктоп), и перезагружается не
> чаще раза в две недели. Линуксная система (ни разу не в
> метафоре десктопа) выключается пару раз в году, и ей есть что
> держать в кэше.

Выключаю все приборы, кроме холодильника, когда покидаю жилище - соблюдаю технику безопасности. ;)

>> Он имеет смысл, когда desktop выключается/включается. И вместо чтения с hdd, выполняется чтение
>> нужных данных с ssd (l2arc).
> а оно его не обнуляет при перезагрузке? И, кстати, если не -
> сама эта перезагрузка будет изрядно быстрее, если индекс l2arc (причем какого-то,
> как я понял, гомерического размера) не перечитывать (нет ведь никаких гарантий,
> что эти данные вообще зачем-то нужны).

l2arc, обнуляет, патчей ещё не завезли (хотя я пробовал их применять). Я неправильно написал - при выключении/включении имеет смысл наличие на ssd метаданных.
$ zpool status tank
  pool: tank
state: ONLINE
  scan: scrub repaired 0B in 13h48m with 0 errors on Sun May 12 14:12:57 2019
config:

    NAME                            STATE     READ WRITE CKSUM
    tank                            ONLINE       0     0     0
      mirror-0                      ONLINE       0     0     0
        wwn-0x5000039fe6d37a87      ONLINE       0     0     0
        wwn-0x5000c50079c65faf      ONLINE       0     0     0
    logs
      wwn-0x5707c181003b37e5-part1  ONLINE       0     0     0
    cache
      wwn-0x5707c181003b37e5-part2  ONLINE       0     0     0

> Будете мерять - положите куда-нибудь, это гораздо интереснее серверов с аптаймом по
> 450 дней.

Если найду время, то может быть.

Ответить | Правка | Наверх | Cообщить модератору

171. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от crypt (ok), 26-Май-19, 18:20 
> У меня десктоп только виндовый

а я-то все понять не мог, что с тобой не то...

Ответить | Правка | К родителю #156 | Наверх | Cообщить модератору

30. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от 0x0 (?), 24-Май-19, 03:12 
Как по мне, для десктопа и xfs вполне годится. Несколько лет использую, правда, не как корневую, а для хранилища. Корневую под Linux, всё-таки, целесообразнее в ext4 форматировать. Хотя.. на вкус и цвет товарищей net :)
Ответить | Правка | К родителю #3 | Наверх | Cообщить модератору

31. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –1 +/
Сообщение от 0x0 (?), 24-Май-19, 03:26 
*а если учесть, что со времён ext2 ни с одной, ни с другой не было ни одного серъёзного сбоя, то, наверное, по этому поводу и париться сильно не стоит.
Разве что, из исследовательских интересов ;)
Ответить | Правка | Наверх | Cообщить модератору

157. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от 0x0 (?), 25-Май-19, 20:51 
**и суток не прошло:))
https://www.phoronix.com/scan.php?page=news_item&px=Linux-5....

***с другой стороны, лично я, ни lvm, ни dm-crypt, ни Samsung SSD как-то пользуюсь :)

Ответить | Правка | К родителю #30 | Наверх | Cообщить модератору

159. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от 0x0 (?), 25-Май-19, 20:54 
****а btrfs и подавно ...в смысле, не))
Ответить | Правка | К родителю #30 | Наверх | Cообщить модератору

37. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –4 +/
Сообщение от пох (?), 24-Май-19, 07:14 
пригодно, ибо поломано одинаково что для тех, что для других.

> Последнее обсуждение, что я помню - дефолтные настройки ARC жрут слишком много памяти

шок, сенсация - дефолтные настройки ядра линукса жрут вообще всю память, без всякой zfs!

             total       used       free     shared    buffers     cached
Mem:       8160616    8014792     145824          0      63352    6920316
-/+ buffers/cache:    1031124    7129492
представляете - 7 гиг сожрали, полтораста мегабайт всего оставили нужным и полезным задачам!

Ответить | Правка | К родителю #3 | Наверх | Cообщить модератору

52. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +6 +/
Сообщение от svetrnd (ok), 24-Май-19, 09:49 
Так и должно быть. Свободная память - выброшенная в мусорное ведро память. Линукс - это вам не винда. Которая любит не использовать RAM и дурочки радуются, что якобы меньше ест :D
Ответить | Правка | Наверх | Cообщить модератору

59. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от пох (?), 24-Май-19, 11:21 
> Так и должно быть. Свободная память - выброшенная в мусорное ведро память.

молодец, садись, четыре-с-минусом.

На пять-с-плюсом надо было сообразить, что с arc все должно было быть точно так же, причем buffer cache при этом должен быть в районе нуля, поскольку повторное кэширование да еще поверх более адекватного механизма - только лишняя латенси и лишний шанс поймать мусор (вроде бы тут у ZoL все правильно).

Поэтому твои затеи с его ограничением - во-первых, глупость, во-вторых, еще и работают не так как ты думаешь. (к сожалению, удобный инструмент для проверки, как на самом деле используется память, в линуксе отсутствует)

P.S. у винды все нормально с кэшированием, уж по сравнению с твоим отбалдовым "отрезать 20%, остальное потратить хз на что", но оно работает тоже немного не так как показывает process manager.
Поскольку предполагается, что юзеру не это знать надо, он хочет знать, сколько памяти осталось для его задач.

Ответить | Правка | Наверх | Cообщить модератору

61. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от пох (?), 24-Май-19, 11:23 
а, пардон - это, оказывается, [слово запрещенное на впопеннете] предлагал ручные ограничения ARC, а не пингвин. Звиняйте, что-то сегодня все анонимы кажутся на одно лицо.
Ответить | Правка | Наверх | Cообщить модератору

60. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –2 +/
Сообщение от Минона (ok), 24-Май-19, 11:22 
Винда использует память точно также, вся свободная память уходит под кеш ФС
Ответить | Правка | К родителю #52 | Наверх | Cообщить модератору

78. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –3 +/
Сообщение от пох (?), 24-Май-19, 14:11 
не разрушайте лап4атым мирок
тем более что юзероориентированные средства избавляют от лишних знаний, а более сложные ими ниасилены.
Ответить | Правка | Наверх | Cообщить модератору

138. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от вот такая вот куйня (?), 25-Май-19, 08:37 
ну не совсем... далеко не совсем

если установлен SQL Server то именно он все сожрет а не винда

а если подобной софтины нет, то винда не жрет всю память под дисковый кеш

по моим наблюдениям не более 3/4

линукс съедает все что есть, притом сам занимаем копейки 500-1500 MB вся система в зависимости от конфига

Ответить | Правка | К родителю #60 | Наверх | Cообщить модератору

104. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от iPony (?), 24-Май-19, 17:40 
>  это вам не винда. Которая любит не использовать RAM и дурочки радуются, что якобы меньше ест :D

Хорошая альтернативная вселенная...

Ответить | Правка | К родителю #52 | Наверх | Cообщить модератору

73. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  –1 +/
Сообщение от Аноним (73), 24-Май-19, 12:30 
Смотря какие требования к декстопу. Можно и видео хранить, можно и нагрузку давать какую-то. Обычно на декстопе надо спип и хибернейт и неплохо бы чтобы рут был тоже на зфс при этом. Как с этим хз.
Ответить | Правка | К родителю #3 | Наверх | Cообщить модератору

79. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +1 +/
Сообщение от пох (?), 24-Май-19, 14:13 
как обычно - нужен disk-backed sleep - нужен своп, своп на zfs работает только у solaris

если вы склонны считать его пережитком прошлого, то все более-менее будет работать. Но зачем?

Ответить | Правка | Наверх | Cообщить модератору

98. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от анон (?), 24-Май-19, 16:52 
всмысле "только у solaris" ?
Ответить | Правка | Наверх | Cообщить модератору

102. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от пох (?), 24-Май-19, 17:23 
ну в смысле у него он работает, а у остальных как обычно.

судя по тому что даже proxmox его выпилила - что-то там совсем не так.

Ответить | Правка | Наверх | Cообщить модератору

99. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от RNZ (ok), 24-Май-19, 16:53 
> Смотря какие требования к декстопу. Можно и видео хранить, можно и нагрузку
> давать какую-то. Обычно на декстопе надо спип и хибернейт и неплохо
> бы чтобы рут был тоже на зфс при этом. Как с
> этим хз.

хибернейт обычно только на переносных пк нужен. на десктопе sleep достаточен обычно.

Ответить | Правка | К родителю #73 | Наверх | Cообщить модератору

116. "Выпуск ZFS on Linux 0.8.0, реализации ZFS для ядра Linux "  +/
Сообщение от Аноним (114), 24-Май-19, 18:29 
btrfs дома удобней. И не только дома.
Ответить | Правка | К родителю #3 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру