В принципе, если мониторинг дисков налажен, есть запасные диски, и есть админ разбирающийся в сообщениях софта на дисковые ошибки, то mdadm выглядит лучшим решением, с большими возможностями. Конечно, HWRAID "удобнее" тем, что визуально удобно показывает, что с диском что-то не так. Не требует действий в системе, при замене дисков. Но обычно это сервера без поддержки, либо с малоквалифицированными админами.
Т.к. обычно сервера находятся не в визуальной близости - разницы нет, и нужно мониторить состояние сервера. А тут разницы никакой нет.

Покажите мне software raid на 1024 Tb (это и есть 1 Pb)

Насколько я понял, никто, кто делает большие рейды, не выкладывает информацию об этом, в статьях.

А кто делает рейды на Петабайты в одном хранилище?

По тем же netapp мне рассказывали, что у них есть блоки по сколько-то ГБ, которыми можно наращивать общий размер хранилища. Но именно объединение рейдов никто не использует.

Теже дисковые полки в хранилищах рекомендуют объединять по установке в полку, т.е. достаточно небольшим объёмом, - не более чем 24 диска * 4 тб и это 96 тб raw пространства

А почему 4тб?

Sas'ы сейчас есть по 14, ssd да пока 3.9 только распространены.

https://www.hpe.com/ru/ru/product-catalog/storage/disk-enclosures/pip.hpe-d6020-disk-enclosure.1009024698.html

Ёмкость

4200 Тбайт неупорядоченного пространства
максимум с шестью полками

Описание накопителя

(70) накопителей SAS большого форм-фактора и (или)
(70) накопителей MDL SAS большого форм-фактора и (или)
(70) накопителей SAS/SSD большого форм-фактора

По 14 я думаю, развалятся и по скорости будут печальны.

14*25 - всё равно - 350 тб, либо 100-140 тб

Ну в следующем году ssd в продаже должен быть на 8 - 10, может на 21 отложат.

Почему 25?

Так мы про сейчас, а не про возможное будущее.

А какие ещё варианты, кроме 25?

Я тебе кинул полку в максималке имеющую 70 мест

Так там сразу контроллер встроен, и mdadm точно не нужен.

Так я про это и говорю, а мне говорят, что software рулит и hardware фигня.

Идёт разговор про дисковые полки, небольшой ёмкости, а не хранилища эртерпрайз размера.

Аппаратный рейд не равно хранилищу.

Наоборот в "промышленном" надо ставить какую-нибудь проприетарную срань чаще всего чтобы узнать состояние

И эти "аппаратные" рейды обычно ничем не лучше софтрейда, зачастую там тот же mdadm внутри. Единственный плюс хврейда это батарейка, но как правило эникеи не умеющие в софтрейд не следят за ней, а её иногда надо менять