Попробовать хотел ZFS и вот свершилось, поставил сегодня ZFS на 3тб HDD (ashift=12, aclinherit=passthrough, acltype=posixacl, xattr=sa, compression=lz4, atime=off) потребление памяти выросло с 15% до 40% при 8Гб ОЗУ, т.е. фактически 1Гб = 1Тб места, так это еще и на диск я скинул только 40гб, график потребления памяти - пила даже в простое когда нет операций с диском, при копировании на диск - занято сразу 55% ОЗУ. Посмотрим как дальше будет. Не в восторге, ext4 пока мне нравится больше чем BTRFS и ZFS.
она высвободит память если понадобится другому процессу.
Это радует, а вот что не радует так это: #77 Просто копировал свои же данные с ext4 на ZFS, копировал просто в "самбе", размер я понимаю почему разный - сжатие включил, но кол-во папок и файлов Провел такой же эксперимент: скинул некий объем данных с ext4 на ext4 - кол-во файлов и папок одинаково.
Member
Статус: Не в сети Регистрация: 22.06.2008 Откуда: Ленинград
по заголовкам не видно что это одни и теже папки могут не копироваться файлы у которых внезапно нет прав на чтение пользователем, под которым крутится самба но больше похоже на чудо. и уж точно дедупликация нипричом
Member
Статус: Не в сети Регистрация: 02.11.2008 Откуда: Москва
Для надёжного копирования лучше юзать что то типа https://fastcopy.jp/en/ . Там есть проверка хэшсумм файлов + если что то с ошибками пошло - можно посмотреть в чём проблема.
По умолчанию выключена и я менял чуть другие параметры (выше в скобках писал - ashift=12, aclinherit=passthrough, acltype=posixacl, xattr=sa, compression=lz4, atime=off), на форуме OMV5 рекомендовали и я почитал о каждом #77
Йож писал(а):
но больше похоже на чудо.
Да я тоже в шоке был. Всё видимо оказалось проще: я так понимаю кеш то в ОЗУ хранится, видимо может до-копировалось что-то, хотя сам процесс копирования завершился. Вот спустя 10 часов грубо говоря, проверил и кол-во файлов/папок одинаковое и потребление ОЗУ упало снова до 20% как это было на ext4, ОЗУ кушает в момент операций видимо, поглядим, может вернусь на ext4, а то если я еще 6Тб добавлю то памяти не хватит. #77 Мне просто тогда непонятно как она считается "стабильной" без дедупликации и зеркал, если часть данных в ОЗУ при копировании/чтении, даже если UPS стоит, то один фиг - завершение работы системы и все данные из ОЗУ трутся.
Ох уж эти новые технологии, с ext4 всё просто, новый диск на 8ТБ получил, буду его просто в ext4 подключать без экспериментов.
Member
Статус: Не в сети Регистрация: 06.01.2005 Фото: 0
Я, лично, все ещё считаю, что zfs не для домашнего использования. Ну только если у вас прям вся работа завязана на этом nas. Вроде хранения исходников видео, графики, аудио или ещё что. Для домашней библиотеки, хлама и т.д. zfs нафиг не сдался. Много лишнего, много ресурсов.
Member
Статус: Не в сети Регистрация: 22.06.2008 Откуда: Ленинград
d3ma писал(а):
Мне просто тогда непонятно как она считается "стабильной"
может в родной бзде она быстрее доносит данные до дисков? или пока не дожала файлик и не записала везде всякую свою мету она его не показывает, хотя он уже в общем-то записан на диск на самом деле. больно умная в общем
Member
Статус: Не в сети Регистрация: 02.11.2008 Откуда: Москва
d3ma писал(а):
Мне просто тогда непонятно как она считается "стабильной" без дедупликации и зеркал, если часть данных в ОЗУ при копировании/чтении, даже если UPS стоит, то один фиг - завершение работы системы и все данные из ОЗУ трутся.
Ты оставил atime=оff, поэтому файлы пишутся в кэш, па потом на диски кидаются. Если выставишь on - будут сразу писаться на диски.
Добавлено спустя 11 минут 44 секунды: Скажу так - ставить zfs на соло диски - такое себе занятие. Смысла в этом нет, так как все фишки имеют смысл при raidz
Просто непонятно, одни его выключают, другие оставляют, по идее кеш в ОЗУ то шустрее, но есть вероятность потери. Если atime=on, то при каждом обращении к файлам будет перезаписываться время последних изменений (кажется так читал), ну мол больше нагрузки, ты даже не менял, просто открыл файл - а запись обновится.
Cool'D писал(а):
такое себе занятие.
Да всё оно "такое себе занятие" если не рейд из 6 дисков , считается ж, что сохранность данных выше на ZFS как раз за счет кешей, плюс сразу компрессия причем на перфоманс не влияет
Member
Статус: Не в сети Регистрация: 22.06.2008 Откуда: Ленинград
d3ma писал(а):
сразу компрессия причем на перфоманс не влияет
законы физики этой реальности против. такое может быть только за счет отложенной записи и кеширования. дедупликация всеравно лучше. ну если данные дедупфрендли.
ZFS - Анекдот, вчера поигрался со снешпотами, понял как работают, разобрался как их менеджить потом, ну думаю ладно дам последний шанс , ничего важного на этот диск скидывать не буду.
Сегодня выключил сервер через UI, надо было UPS поставить между ПК и сервером, подключил значит оба устройства, в сервер воткнул еще один диск, попутно поменял местами сата провода (это наверно важно), загрузился глянул потребление электричества, снова выключил сервер через UI чтобы зайти в биос и понизить частоты своего i5-4570, всё снова включил, дай думаю сейчас же надо форматнуть новый диск, что поставил - его вижу, а того диска что с ZFS нет. #77 железобетонная стабильность мать её. Проверил командами
Код:
zpool status zpool status
В ответ получаю
Код:
no datasets available
Открываю ZFS плагин - ничего нет, добавить пул нажал - пусто. Думаю ну ладно, создам заново
Код:
zpool create tank /dev/sdc1
В ответ получаю
Код:
invalid vdev specification use '-f' to override the following errors: /dev/sdc1 is part of potentially active pool 'tank'
/dev/sdc1 is part of potentially active pool 'tank' просто нет слов, вот и гадай - это я так выключил через UI и все равно ему не понравилось или потому что сата-провод переставил. На момент создания диск был /dev/sdb1 после смены проводов стал /dev/sdc1 видимо для ZFS критично или я чего-то не понял, потому что другие мои ext4 работают, да поменялись эти пути с sda на sdb например, но я к ним обращаюсь по лейблам и везде в контейнерах пути использую по лейблам.
Сейчас этот форум просматривают: id_000 и гости: 19
Вы не можете начинать темы Вы не можете отвечать на сообщения Вы не можете редактировать свои сообщения Вы не можете удалять свои сообщения Вы не можете добавлять вложения