Nas4Free - Software RAID 0 из 10-ти дисков не форматируется и не монтируется.

SkynetDDS

Cadet
Joined
Apr 20, 2019
Messages
8
Доброго дня, собрал систему из 10-ти дисков, добавил все диски, отформатировал их всех в файловой системе SoftRaid, создал GEOM Software RAID 0.
И тут уже при его форматировании в UFS или ZFS выдает в конце ошибки что не может создать таблицу разделов.
Через iSCSI этот диск массив виден в Windows 10 и успешно можно форматировать в NTFS и он локально определяется
Но монтировать внутри у меня не получается, пишет что неправильный номер UFS раздела, либо выбрана неправильная фаловая система.
Главное в Software RAID разделе показывает UFS систему, а общий объем неизвестен.
Как это можно решить ?

Конфиг:
i7-4770K, Asus Z97-Deluxe, 32GB RAM, 6 SATA портов чипсетных и 4-е от Asmedia. 10 хардов по 2ТБ. Сама система Nas4Free на флэшке.
 

sretalla

Powered by Neutrality
Moderator
Joined
Jan 1, 2016
Messages
9,702
You're probably in the wrong forum here with the reference to Nas4free, but I'll have a shot at answering the questions I think you might be asking.

FreeNAS provides software RAID, but more specifically RAIDZ, built on ZFS.

You can't create or really work with UFS disks in FreeNAS, but you can import the contents from one over to a ZFS pool. There is no "conversion process" for that, so you need to have both the UFS and ZFS created already for the import disk option to work.

Good luck with it. I hope this helped.
 

2nd-in-charge

Explorer
Joined
Jan 10, 2017
Messages
94
Привет SkynetDDS.

Как sretalla сказал, ты немножко промахнулся с форумом. У Nas4Free или XsigmaNAS тоже есть русский форум:
https://www.xigmanas.com/forums/viewforum.php?f=44

Я даже не знал, что там существует SoftRaid. С помощью гугла нашел как это работает (по английски)
https://www.xigmanas.com/wiki/doku.php?id=documentation:setup_and_user_guide:software_raid_configuration_management&do=export_pdf
И понял, что ты очень смелый человек. Если хоть один из этих десяти полетит, весь массив в пролете. Я не знаю почему у тебя UFS не форматирует, может быть с таким широким массивом не справляется.
Первое что это инструкция говорит это что ты если у тебя достаточно памяти, ты должен использовать ZFS а не SoftRaid. 32ГБ должно быть достаточно. Сделай один RaidZ2 zpool. Или если тебе нужны IOPS, пять зеркальных vdevs.

i7-4770K, Asus Z97-Deluxe, 32GB RAM, 6 SATA портов чипсетных и 4-е от Asmedia. 10 хардов по 2ТБ. Сама система Nas4Free на флэшке.
Местные эксперты очень не любят память без ECC, но это уже другой вопрос.

sretalla, I'm not sure if you understand what I said in Russian. Click on the pdf link above, I think that's what the OP is doing.
 
Last edited:

SkynetDDS

Cadet
Joined
Apr 20, 2019
Messages
8
You're probably in the wrong forum here with the reference to Nas4free, but I'll have a shot at answering the questions I think you might be asking.

FreeNAS provides software RAID, but more specifically RAIDZ, built on ZFS.

You can't create or really work with UFS disks in FreeNAS, but you can import the contents from one over to a ZFS pool. There is no "conversion process" for that, so you need to have both the UFS and ZFS created already for the import disk option to work.

Good luck with it. I hope this helped.

Hi, thank you for help. I will try zfs. Sorry, that i choosed wrong forum.

Привет SkynetDDS.

Как sretalla сказал, ты немножко промахнулся с форумом. У Nas4Free или XsigmaNAS тоже есть русский форум:
https://www.xigmanas.com/forums/viewforum.php?f=44

Я даже не знал, что там существует SoftRaid. С помощью гугла нашел как это работает (по английски)
https://www.xigmanas.com/wiki/doku.php?id=documentation:setup_and_user_guide:software_raid_configuration_management&do=export_pdf
И понял, что ты очень смелый человек. Если хоть один из этих десяти полетит, весь массив в пролете. Я не знаю почему у тебя UFS не форматирует, может быть с таким широким массивом не справляется.
Первое что это инструкция говорит это что ты если у тебя достаточно памяти, ты должен использовать ZFS а не SoftRaid. 32ГБ должно быть достаточно. Сделай один RaidZ2 zpool. Или если тебе нужны IOPS, пять зеркальных vdevs.


Местные эксперты очень не любят память без ECC, но это уже другой вопрос.

sretalla, I'm not sure if you understand what I said in Russian. Click on the pdf link above, I think that's what the OP is doing.

Привет!
Мне удалось отформатировать с галочкой - использовать 4К сектора. Или просто потому что удалил iSCSI таргет.
На счет полетит хард и 10, пока там нет критичных данных.
И мне проще намного показалось во всем разобраться в Nas4Free, чем во FreeNAS.
Мне пока нужнее iSCSI подключение всего массива. Как я понял нельзя одновременно его использовать с SMB "Shared".
Чётко определять сразу ты хочешь под iSCSI и сколько под другие нужды.
Во FreeNAS у меня Extent вообще не создавался, там надо пул создать, потом на этом пуле создать zvol.
И только потом там что-то получилось с Extent, хотя пробовал просто использовать мастер-Wizard тот что в Legacy Web Interface доступен, но там вообще странно, нет ограничения сколько я хочу создать раздел iSCSI, напал даже 25ТБ, хотя там 18,2 ТБ кажется физически доступно. А мастер так и создал 25ТБ, без вопросов. В Windows 10 подключил его, он и отформатировался на 25 ТБ ! Как так ?
В Nas4Free сразу четко видно Device при создании Extent в iSCSI. И места больше чем доступно не дает сделать.
 

2nd-in-charge

Explorer
Joined
Jan 10, 2017
Messages
94
Или просто потому что удалил iSCSI таргет.
Если ты форматировал UFS при живом iSCSI я вообще-то удивлен что UFS вообще взялось за форматирование.
На счет полетит хард и 10, пока там нет критичных данных.
Все так говорят.. А что критично, скорость? Или размер массива? RaidZ2 из 10 дисков теряет только 20%. A скорость во многом ограничена сетью в 1 Гбпс.
Мне пока нужнее iSCSI подключение всего массива. Как я понял нельзя одновременно его использовать с SMB "Shared".
Ну да, либо один пишет свои данные на массив либо другой, но не оба сразу.
Во FreeNAS у меня Extent вообще не создавался, там надо пул создать, потом на этом пуле создать zvol.
Я так понимаю, что zvol это самый правильный путь. По крайней мере ZFS cможет защищать от повреждения хранимых данных.
Ты бы увидел индивидуальные диски если бы они не были уже завязаны в пуле.
Я думаю, что geom Raid0 на FreeNAS тоже возможен, но делать надо вручную. Да и Nas4Free SoftRaid уберут рано или поздно.
И только потом там что-то получилось с Extent, хотя пробовал просто использовать мастер-Wizard тот что в Legacy Web Interface доступен, но там вообще странно, нет ограничения сколько я хочу создать раздел iSCSI, напал даже 25ТБ, хотя там 18,2 ТБ кажется физически доступно. А мастер так и создал 25ТБ, без вопросов. В Windows 10 подключил его, он и отформатировался на 25 ТБ ! Как так ?
Магия! Может быть сжатие? ZFS использует lz4 по умолчанию.
 

SkynetDDS

Cadet
Joined
Apr 20, 2019
Messages
8
Если ты форматировал UFS при живом iSCSI я вообще-то удивлен что UFS вообще взялось за форматирование.
Взялось :)
Все так говорят.. А что критично, скорость? Или размер массива? RaidZ2 из 10 дисков теряет только 20%. A скорость во многом ограничена сетью в 1 Гбпс.
Скорость. Сеть планирую сделать 10Gb на Asus XG-C100C. Только сейчас увидел что драйверов походу нет для FreeBSD.
И коммутатор XG-U2008, там два порта 10Г. Ещё пока не получил, два кабеля CAT7 тоже заказал.
Я так понимаю, что zvol это самый правильный путь. По крайней мере ZFS cможет защищать от повреждения хранимых данных.
Ты бы увидел индивидуальные диски если бы они не были уже завязаны в пуле.
Я думаю, что geom Raid0 на FreeNAS тоже возможен, но делать надо вручную. Да и Nas4Free SoftRaid уберут рано или поздно.
Может вернуться на openmediavault OMV ? Правда я так и не понял. Вроде iSCSI там убрали из 3-й версии, а в 4-й я тоже его не вижу.
Магия! Может быть сжатие? ZFS использует lz4 по умолчанию.
Что-то мне кажется что я там какую цифру поставлю, такую и он и примет :)
 

2nd-in-charge

Explorer
Joined
Jan 10, 2017
Messages
94
Скорость.
А какая? С последовательным доступом и длинными записями RaidZ хорошо справляется. А вот с произвольным доступом и короткими записями будет проблема. В ZFS для таких ресоммендуются зеркальные VDEVs. В твоем случае получится только пять. Но даже десять хардов в Raid0 (или ZFS stripe из 10 однодисковых VDEV) могут оказаться слишком медленными для 10Гбпс.

Сеть планирую сделать 10Gb на Asus XG-C100C. Только сейчас увидел что драйверов походу нет для FreeBSD.
Даже из тех чипсетов для которых есть драйвера не все надежно работают. Рекомендуют только Intel и Chelsio.

Может вернуться на openmediavault OMV ? Правда я так и не понял. Вроде iSCSI там убрали из 3-й версии, а в 4-й я тоже его не вижу.
Вообще то по идее для твоего железа и эксперимента linux больше подходит. ZFS, при всей ее надежности, скорости не поможет.
У Openmediavault iSCSI плагин сломан, он только работает с 3й версией и ядром 3.x
https://openmediavault.readthedocs.io/en/latest/faq.html

Я бы попробовал OviOS или Openfiler.
Edit:
В OviOS все вручную,(без GUI) и через ZFS.
Openfiler должен быть наиболее похож на SoftRaid в Nas4Free.
https://www.linuxsysadmins.com/creating-software-raid-and-volumes-on-openfiler-storage/
 
Last edited:

SkynetDDS

Cadet
Joined
Apr 20, 2019
Messages
8
Я бы попробовал OviOS или Openfiler.
Edit:
В OviOS все вручную,(без GUI) и через ZFS.
Openfiler должен быть наиболее похож на SoftRaid в Nas4Free.
Большое спасибо за рекомендации. Буду пробовать Openfiler. Так как без GUI мне сложновато всё-таки.
 

2nd-in-charge

Explorer
Joined
Jan 10, 2017
Messages
94
Удачи! Я надеюсь что Asus там заработает. Последняя версия Openfiler вышла в 2011 году, и дравера могут быть устаревшие. Их домашняя страница немножко обманчива с копирайтом 2019 года.
 

SkynetDDS

Cadet
Joined
Apr 20, 2019
Messages
8
Благодарю!
Последняя версия Openfiler
Попробовал. :( Он SSD в М.2 переходнике на PCIe слот не видит вообще, который у меня под систему выделен.
Пробовал ещё и Open-E.
Поставил пока Windows 2019 Server с драйверами с сайта Aquantia. Поднял iSCSI target.
Переброс большого файла на iSCSI диск выше 5 Гбит не дает. (TaskManager показывает)
Можете посоветовать какую-то сетевую карту NIC 10 Гбит которая в NAS4Free и во FreeNAS работает из коробки ?
 

2nd-in-charge

Explorer
Joined
Jan 10, 2017
Messages
94

SkynetDDS

Cadet
Joined
Apr 20, 2019
Messages
8
Заказал тут на месте в Эстонии Intel x550t1. У нас вроде подделок в офф.магазинах я не видел никогда. Да и за 325 евро вряд ли будет подделка. Очень надеюсь что X550T1 заработает из коробки
 

2nd-in-charge

Explorer
Joined
Jan 10, 2017
Messages
94
За такие деньги должна быть настоящая, но не повредит проверить Yottamark, особенно на предмет MAC address и даты производства.
 

SkynetDDS

Cadet
Joined
Apr 20, 2019
Messages
8
Вернул Intel x550t1 в магазин. Производительность вообще 3-4 Гбит не бrольше. Нафиг надо. С Aquantia под Win 2016 Server 5-6 Гбит.
Кстати вышел драйвер для Aquantia для FreeBSD !!! Driver
 
Last edited:
Top