Жёсткие диски сегодня почти полностью ушли с рынка бытовых компьютеров, но в профессиональной среде полное вытеснение HDD твердотельными накопителями — пока туманная перспектива. Причин этому несколько: небольшая вместимость SSD, их ограниченный ресурс и высокая стоимость. Неудивительно, что ведущие производители жёстких дисков сегодня сосредоточились на профессиональном рынке, а если точнее — на отрасли хранения данных. И хотя технологии, применяемые в жёстких дисках, уже изучены вдоль и поперёк, а плотность хранения приблизилась к теоретическому пределу, ставить рекорды всё равно возможно. Мы очень постарались — и взяли очередную планку в форм-факторе 3,5 дюймов с новым накопителем Seagate объёмом 16 ТБ.
Набирающие обороты направления IT, связанные с оперированием большими объёмами данных, требуют всё больше пространства для хранения информации. Но собирать массивы исключительно из твердотельных накопителей — накладно. Поэтому пару лет назад ведущие вендоры СХД стали активно продавать гибридные хранилища, где в рамках массива отлично уживаются жёсткие диски и твердотельные накопители. Это позволяет создавать большое пространство для хранения с быстрым доступом к «горячим» данным. Так что, как видите, рынок HDD ещё далёк от заката.
Seagate как производитель жёстких дисков с мировым именем стоял у истоков этого направления: он если не «папа» винчестера (таковым можно назвать IBM), то уж точно «родной дядя». С самого начала работы с HDD Seagate серьёзно вкладывался в R&D, поэтому именно нашей компании принадлежит львиная доля рекордов. Вот свежая новость: 16 июня 2019 года в Купертино (Калифорния) мы представили новый продукт — жёсткий диск для профессионального применения на 16 терабайт.
Ниже представлены основные технические характеристики новинки (версия объёмом 16 ТБ):
> Полные характеристики на сайте производителя | Datasheet в PDF
Инженеры постарались по максимуму использовать внутреннее пространство накопителя, поэтому он весит всего 680 грамм — меньше, чем модели на 14 ТБ. По торцу диска проходит широкий сварной шов — это гарантия надёжного удержания гелия внутри. По той же причине — за счёт отсутствия винтиков и покатой крышки — Exos 16 выглядит более эстетично.
Правда, из-за этой же особенности диск не подлежит кустарной разборке — что может быть минусом при попытке восстановления данных в специализированных мастерских. Чтобы вы избежали подобного квеста, вот универсальные советы: не забывать вовремя делать бэкапы, создавать дисковые массивы с избыточностью и пользоваться накопителем в штатных условиях.
Плата контроллера тоже соответствует тренду на компактность: это полоска в два сантиметра шириной. На верхней крышке расположена наклейка в «игрушечном» стиле (как у всех современных накопителей от Seagate), где указана вся необходимая информация о модели. На торце, противоположном от контактной группы, также есть стикер с серийным номером, чтобы диск было легко находить в стопке.
Как и все накопители большого объёма, Exos 16 использует технологию гелиевой среды гермозоны. Это даёт ощутимые преимущества — плотность компоновки и общую надёжность накопителя. Эффективное использование гелия в гермоблоках накопителей началось несколько лет назад, когда были разработаны способы надёжно удерживать такое летучее вещество, как гелий, внутри. Молекулы этого инертного газа очень малы, что делает его крайне текучим. За счёт этого гелиевая среда, в отличие от классической воздушной, уменьшает завихрения потоков, турбулентность и прочие спецэффекты во время работы, что увеличивает стабильность позиционирования механики накопителя. А значит, компоновать такие накопители можно более плотно.
Новый 16-терабайтный Seagate Exos X16 позиционируется как накопитель для дисковых хранилищ высокой плотности, сочетающий в себе высокую скорость и рекордный объём за адекватную стоимость.
На сегодня эта модель диска имеет высокую для форм-фактора LFF (3,5") скорость вращения шпинделя — 7200 rpm. Она предназначена как для OEM-поставщиков, так и для конечных бизнес-пользователей. Впрочем, никто не мешает приобрести Exos 16 для дома: по сути это обычный SATA-накопитель, совместимый с абсолютно всеми современными компьютерами, куда можно вставить 3,5-дюймовый диск — никаких enterprise grade интерфейсов и других препятствий. Более того, по сравнению с аналогичными потребительскими моделями этот диск обладает повышенной надёжностью, имеет наработку на отказ при режиме работы 24x7, у него более эффективный кэш и стабильная скорость работы. И хотя профессиональные накопители более шумные, чем домашние, этот диск по сравнению с 10-терабайтным Seagate двухлетней давности стал существенно тише, а его нагрев во время работы не выходит за средние значения. Единственное, при инсталляции диска надо иметь в виду, что у него (как и у всех «толстячков») иное расположение монтажных отверстий снизу корпуса, что ограничивает его надёжный монтаж в некоторых видах корзин и NAS.
Замеры производительности проводились на современном чипсете с SATA-3 интерфейсом и 8-ядерном процессоре от Intel под управлением Windows 10 Pro. Мы использовали последнюю версию хорошо себя зарекомендовавшей утилиты HD Tune Pro с настройками по умолчанию. Была мысль провести замеры на серверном оборудовании, но тогда результаты не были бы показательными, так как SATA-3 интерфейсы потребительских и серверных платформ почти одинаковые. Стоит отметить, что у Exos 16 есть SAS-версия, работающая на линейной скорости интерфейса 12 ГБ/с, но рассказ о ней выходит за рамки нашего обзора.
Публике, избалованной характеристиками SSD-накопителей, результаты теста могут показаться скромными, но напоминаем, что герой нашего обзора — HDD, разработанный для определённой области применения: в первую очередь, в СХД. Вот результаты в цифрах: линейное чтение — от 115 до 271 МБ/с при среднем значении 208 МБ/с, запись — от 113 до 269 МБ/с при среднем значении 208 МБ/с. Среднее время доступа — 11,5 мс на чтение и 5,8 мс на запись.
Время случайного доступа находится в пределах 12 — 14 мс на чтение и десятых долей миллисекунд на запись благодаря отдельному кэшу. Это хороший результат.
Результаты дополнительных тестов на чтение и запись:
Новый Exos станет отличным выбором для СХД, а особенно — для набирающих популярность SDS-решений на базе дешёвых white-label серверных платформ. В условиях борьбы за цену каждого гигабайта массив таких дисков будет хорошим подспорьем, ведь его рекомендуемая нами розничная цена — $629.
Если говорить о домашнем использовании, то диск отлично подойдёт для владельцев сетевых накопителей NAS или для пользователей с большими домашними архивами (RAW-фотографов, музыкантов, видеооператоров) — 16 ТБ хватит надолго.
А вот где не стоит использовать накопитель, так это в условиях тряски: его «начинка» достаточно нежная, и потерять так много данных будет неприятно. В подобных случаях пользуйтесь недорогими накопителями с малой плотностью, а ещё лучше — SSD. И не забывайте делать бэкапы!
Набирающие обороты направления IT, связанные с оперированием большими объёмами данных, требуют всё больше пространства для хранения информации. Но собирать массивы исключительно из твердотельных накопителей — накладно. Поэтому пару лет назад ведущие вендоры СХД стали активно продавать гибридные хранилища, где в рамках массива отлично уживаются жёсткие диски и твердотельные накопители. Это позволяет создавать большое пространство для хранения с быстрым доступом к «горячим» данным. Так что, как видите, рынок HDD ещё далёк от заката.
Seagate как производитель жёстких дисков с мировым именем стоял у истоков этого направления: он если не «папа» винчестера (таковым можно назвать IBM), то уж точно «родной дядя». С самого начала работы с HDD Seagate серьёзно вкладывался в R&D, поэтому именно нашей компании принадлежит львиная доля рекордов. Вот свежая новость: 16 июня 2019 года в Купертино (Калифорния) мы представили новый продукт — жёсткий диск для профессионального применения на 16 терабайт.
Технические характеристики Seagate Exos X16
Ниже представлены основные технические характеристики новинки (версия объёмом 16 ТБ):
| Модель | Seagate ST16000NM001G |
| Интерфейс | SATA 6 ГБ/с |
| Объём накопителя | 16 ТБ |
| Скорость вращения шпинделя | 7200 об/мин |
| Объём кэш-памяти | 256 МБ |
| Высота | 26,1 мм |
| Среднее время наработки на отказ | 2 500 000 часов |
| Макс. постоянная скорость передачи данных по внешнему диаметру | 261 МБ/с, 249 МиБ/с |
| Произвольное чтение/запись 4K QD16 WCD (количество операций ввода-вывода в секунду) | 170 IOPS / 440 IOPS |
| Средняя задержка | 4,16 мс |
> Полные характеристики на сайте производителя | Datasheet в PDF
Внешний вид
Инженеры постарались по максимуму использовать внутреннее пространство накопителя, поэтому он весит всего 680 грамм — меньше, чем модели на 14 ТБ. По торцу диска проходит широкий сварной шов — это гарантия надёжного удержания гелия внутри. По той же причине — за счёт отсутствия винтиков и покатой крышки — Exos 16 выглядит более эстетично.
Правда, из-за этой же особенности диск не подлежит кустарной разборке — что может быть минусом при попытке восстановления данных в специализированных мастерских. Чтобы вы избежали подобного квеста, вот универсальные советы: не забывать вовремя делать бэкапы, создавать дисковые массивы с избыточностью и пользоваться накопителем в штатных условиях.
Плата контроллера тоже соответствует тренду на компактность: это полоска в два сантиметра шириной. На верхней крышке расположена наклейка в «игрушечном» стиле (как у всех современных накопителей от Seagate), где указана вся необходимая информация о модели. На торце, противоположном от контактной группы, также есть стикер с серийным номером, чтобы диск было легко находить в стопке.
Как и все накопители большого объёма, Exos 16 использует технологию гелиевой среды гермозоны. Это даёт ощутимые преимущества — плотность компоновки и общую надёжность накопителя. Эффективное использование гелия в гермоблоках накопителей началось несколько лет назад, когда были разработаны способы надёжно удерживать такое летучее вещество, как гелий, внутри. Молекулы этого инертного газа очень малы, что делает его крайне текучим. За счёт этого гелиевая среда, в отличие от классической воздушной, уменьшает завихрения потоков, турбулентность и прочие спецэффекты во время работы, что увеличивает стабильность позиционирования механики накопителя. А значит, компоновать такие накопители можно более плотно.
Новый 16-терабайтный Seagate Exos X16 позиционируется как накопитель для дисковых хранилищ высокой плотности, сочетающий в себе высокую скорость и рекордный объём за адекватную стоимость.
На сегодня эта модель диска имеет высокую для форм-фактора LFF (3,5") скорость вращения шпинделя — 7200 rpm. Она предназначена как для OEM-поставщиков, так и для конечных бизнес-пользователей. Впрочем, никто не мешает приобрести Exos 16 для дома: по сути это обычный SATA-накопитель, совместимый с абсолютно всеми современными компьютерами, куда можно вставить 3,5-дюймовый диск — никаких enterprise grade интерфейсов и других препятствий. Более того, по сравнению с аналогичными потребительскими моделями этот диск обладает повышенной надёжностью, имеет наработку на отказ при режиме работы 24x7, у него более эффективный кэш и стабильная скорость работы. И хотя профессиональные накопители более шумные, чем домашние, этот диск по сравнению с 10-терабайтным Seagate двухлетней давности стал существенно тише, а его нагрев во время работы не выходит за средние значения. Единственное, при инсталляции диска надо иметь в виду, что у него (как и у всех «толстячков») иное расположение монтажных отверстий снизу корпуса, что ограничивает его надёжный монтаж в некоторых видах корзин и NAS.
Замеры скорости работы накопителя Seagate Exos X16
Замеры производительности проводились на современном чипсете с SATA-3 интерфейсом и 8-ядерном процессоре от Intel под управлением Windows 10 Pro. Мы использовали последнюю версию хорошо себя зарекомендовавшей утилиты HD Tune Pro с настройками по умолчанию. Была мысль провести замеры на серверном оборудовании, но тогда результаты не были бы показательными, так как SATA-3 интерфейсы потребительских и серверных платформ почти одинаковые. Стоит отметить, что у Exos 16 есть SAS-версия, работающая на линейной скорости интерфейса 12 ГБ/с, но рассказ о ней выходит за рамки нашего обзора.
Публике, избалованной характеристиками SSD-накопителей, результаты теста могут показаться скромными, но напоминаем, что герой нашего обзора — HDD, разработанный для определённой области применения: в первую очередь, в СХД. Вот результаты в цифрах: линейное чтение — от 115 до 271 МБ/с при среднем значении 208 МБ/с, запись — от 113 до 269 МБ/с при среднем значении 208 МБ/с. Среднее время доступа — 11,5 мс на чтение и 5,8 мс на запись.
Время случайного доступа находится в пределах 12 — 14 мс на чтение и десятых долей миллисекунд на запись благодаря отдельному кэшу. Это хороший результат.
Результаты дополнительных тестов на чтение и запись:
Вместо вывода
Новый Exos станет отличным выбором для СХД, а особенно — для набирающих популярность SDS-решений на базе дешёвых white-label серверных платформ. В условиях борьбы за цену каждого гигабайта массив таких дисков будет хорошим подспорьем, ведь его рекомендуемая нами розничная цена — $629.
Если говорить о домашнем использовании, то диск отлично подойдёт для владельцев сетевых накопителей NAS или для пользователей с большими домашними архивами (RAW-фотографов, музыкантов, видеооператоров) — 16 ТБ хватит надолго.
А вот где не стоит использовать накопитель, так это в условиях тряски: его «начинка» достаточно нежная, и потерять так много данных будет неприятно. В подобных случаях пользуйтесь недорогими накопителями с малой плотностью, а ещё лучше — SSD. И не забывайте делать бэкапы!
KorP
Уже давно на рынке есть 32Тб SSD, да и про ресурс и ненадёжность это так себе на самом деле… так что у дисков пока только один аргумент — стоимость. т.к. производители SSD предпочитаю увеличить их объём, продавая его за цену старых моделей, чем сильно снижать цены.
MTyrz
Жесткие диски я могу держать в ящике стола время, уже вполне сравнимое с продолжительностью собственной жизни, различия явно меньше, чем на порядок. Исправные HDD, снятые с компов в 90-х, до сих пор спокойно читаются, главное живой IDE-разъем найти.
Что с SSD?
wlr398
Так то диски старые, с малой плотностью записи, с обычным воздухом внутри.
А что будет с современными с высокой плотностью, с перекрывающимися дорожками и прочим, это ещё вопрос.
MTyrz
Гелиевые точно поимеют проблемы.
KorP
А зачем хранить SSD с данными в ящике стола? Они не совсем для этого в общем то нужны.
Osnovjansky
Ну так на чем-то архивы хранить нужно.
KorP
И вы считаете, что оптимальным вариантом для хранения архивов на отторгаемом носителе — это SSD?
Osnovjansky
Нет. Я так не считаю. Но пройдемся по ветке комментариев:
KorP
MTyrz
KorP
И после этого я и написал, что рассматривать SSD с точки зрения хранения в столе придется, если HDD перестанут быть массово доступны
KorP
Ну вы если уж меня читаете, читайте до конца
и это аргумент у дисков будет ещё очень много лет, по тому что перед SSD не стоит задача стать таким же дешёвым, как диски. Но хранение данных «в столе» мне кажется не очень нужная для большинства вещь.
MTyrz
Для меня оптимальный вариант личного хранения архивов — как раз жесткий диск в ящике стола. Поэтому к у дисков пока только один аргумент — стоимость я прибавляю второй: пригодность для такого хранения.
Впрочем, если мне расскажут варианты лучше, я буду совершенно не против.
KorP
Смотря что вы там храните и в каком объёме, а то может и облако.
MTyrz
Что бы я ни хранил, на сроках, превышающих несколько лет, облака попросту ненадежны. Ну и… В общем, у меня много аргументов против. Как дополнительный вариант бекапа — возможно, но вместе с диском в ящике, а не вместо.
KorP
>облака попросту ненадежны
Вот щас обидно было, да. Пруфы то какие?
romxx
«все же знают!» ;)
MTyrz
Хранилища закрываются, как и любые фирмы. Иногда непредсказуемо.
Это можно побороть, обычно они предупреждают загодя: но это уже требует слежения и прочего администрирования. Лишняя нагрузка.
А еще они требуют доступа в Сеть, а еще они на больших объемах платные, что даже за первые несколько лет уже дороже HDD, а еще разбираться с условиями предоставления услуги: что хранить, что не хранить, кто имеет доступ…
Ящик как-то проще и надежнее.
geher
И не только закрываются
https://habr.com/ru/news/t/444134/
playnet
Amazon glacier. Шанс его закрытия около нуля. Другое дело что даже там есть некоторый шанс потерять файлы.
И да, оно основано или на HDD или на лентах, время доступа к данным — несколько часов. В смысле время, через которое в принципе можно будет приступить к чтению.
MTyrz
Я понимаю, что это уже ирония судьбы и ни разу не показатель, но:
katzen
Это облачные хранилища должны пруфы предоставлять. Формальная логика, угу?
katzen
Облако — это чей-то компьютер.
ALF_Zetas
если когда-нибудь приспичит использовать SSD для архивации, то их вполне могут сделать с аккумулятором — для рефреша раз-в-полгода ;)
Exchan-ge
Главное будет — не забыть вовремя заменить/зарядить аккумулятор.
(оглядываясь на полку, где в коробке лежат SATA винты 2004 года)
ALF_Zetas
на моей памяти уже два HDD после годичного лежания на полке так и не включились. Согласно науки Теория надежности гарантированно надежный архив должен соответствовать правилу 3-2-1 — три копии на двух разных носителях и одна из копий должна храниться вне офиса (квартиры) ;)
Exchan-ge
Не, время от времени я их включаю (там файлопомойка, начиная с 1997 г.) — пока все нормально.
А вот с CD-R 2004 года таки проблемы — читаются только те, что были записаны на болванках Вербатум (болванки типа Sky перестали читаться еще лет десять назад).
Osnovjansky
Это те которые «зелёненькие» по технологии SuperAZO?
А что касается чтения CD-R, несколько раз получалось прочитать на CD-RW то, что не читалось на DVD.
Exchan-ge
Они были выкинуты тогда же, когда перестали читаться.
Поэтому про цвет уже не помню.
У меня прямо противоположный опыт — CD-RW я перестал пользоваться еще тогда, когда они были актуальны.
Потому как были случаи, когда CD-RW, совершившие путешествие в другой город в багаже, уже по прибытии оказывались нечитаемыми (один-два дня).
MTyrz
Это уже непохоже на «положил в ящик и забыл до востребования».
Так-то и в облака можно, просто следить за изменениями EULA.
aborouhin
Тем, кому «16 Тб хватит надолго», как раз такой диск совершенно не нужен. RAID из 16-терабайтников будет ребилдиться примерно вечность, и шанс, что в случае замены одного диска в процессе ребилда умрёт ещё один, слишком большой, чтобы его игнорировать.
Так что минимум RAID-6. А чтобы тратить 32 Тб и $1300 на избыточность — общий объём данных должен быть весьма и весьма приличным.
helgihabr
Как вы считаете, что получили «примерно вечность»?
Примерный расчет для 10TB выдает следующий диапазон (начиная от самого оптимистичного):
14 часов — неделя. Пусть для 16TB будет 2 недели, за это время врядли диск выйдет из строя.
Плюс, насколько я понял, RAID5/6 для таких объемов стараются избегать.
aborouhin
Ну да, порядок примерно такой. И всё это время оставшиеся в живых диски будут испытывать повышенную нагрузку от самогo процесса ребилда. Плюс повышенная вероятность выхода из строя дисков из одной партии плюс-минус в одинаковое время.
RAID-5/6 на таких объёмах ровно поэтому избегать и стараются. Помимо рисков, получаем ещё просадку производительности на длительный период. Но тут речь шла про домашнее применение, где альтернатив обеспечить сохранность данных не так много. Никаких распределённых файловых систем нет. Бекапа на ленты нет. Резервная копия в облаке если и есть — то вытягивать терабайты обратно долго, а возможно и дорого (если из Amazon Glacier какого-нибудь тянуть, например).
AlexanderS
Дома только один вариант — 2 таких диска)
Один рабочий, второй на полке с бекапом холодным.
aborouhin
Ну не знаю. Для получения 16 Тб я бы купил 6 дисков по 4 Тб по общей цене чуть дороже одного такого, поставил их в RAID-6 (а если сервер потянет — то лучше ZFS RAID-Z2), а за стоимость второго оплатил бы сколько там по факту сейчас занято Тб в облаке. Собственно, я ровно так для себя и сделал :)
Не теряются данные, изменившиеся с момента последнего доставания резервного диска с полки. Не теряется время на это самое доставание и копирование. Серьёзно уменьшается риск того, что вообще придётся восстанавливать данные. Но при необходимости данные восстанавливаются даже в сценарии «дом сгорел вместе с бекапным диском на полке». При вылете одного диска придётся покупать всего лишь дешёвый диск на 4 Тб, а не дорогой на 16. Ну и т.п.
Yurich
>> Для получения 16 Тб я бы купил 6 дисков по 4 Тб
Это если вам нужно получить 16Тб (тащемта уже неплохо, да).
Проблемы у вас начнутся, когда вас начнет лимитировать число свободных слотов в СХД или (с чем я однажды столкнулся) площадь серверного зала. Свободных юнитов в стойках почти ноль, свободных слотов в СХД ноль, квадратных метров под еще одну стойку не было изначально, и так пришлось в тетрис играть, граждане из бизнес-подразделения сообщают, что через месяц к нам приедет порядка 50Тб данных.
Было очень весело. Пришлось полностью менять все харды в MSAшке, чтобы влезло и то, что есть, и то, что ожидалось.
aborouhin
Ну тут про домашнее использование, вроде… Хотя да, проблемы те же. У меня вот дома в стойку на 24U ещё максимум один сервер влезет, а больше под лестницу не помещается :)
Norno
Я, как обладатель дешевого NAS на 2 диска (2x4Tb) совершенно не понимаю почему основным способом защиты данных дома от выхода диска рассматривается создание RAID. Как правило дома на небольшом количестве дисков хранятся вместе данные совершенно разные по ценности (что это за данные каждый решает сам), одни можно совершенно безболезненно потерять (например торренты с актуальными раздачами) другие терять совсем не хочется (фото архив, переписка, сканы документов, ...).
Применять к этим данным одинаковые методы защиты от сбоя дисков, я считаю бессмысленным. Я выбрал дублирование (на уровне папок) критичных данных на 2-х дисках встроенными средствами NAS-а, и хранение не критичных данных в единственном экземпляре. Это позволяет оптимально использовать место на дисках NAS-а.
При этом можно резервную папку не публиковать пользователям, и настроить на ней версионирование файлов (если позволяет NAS) и получить еще и защиту от программных сбоев в ПО работающем с файлами и шифровальщиков, если они заведутся на компьютерах имеющих доступ к опубликованным папкам.
Вопросы дополнительного копирования на off-line диск, в облако и т.д. в данном случае не рассматриваю.
aborouhin
Ну, по уму RAID — это защита не от потери данных, а от потери времени на восстановление данных. Ибо несколько терабайт восстанавливать из удалённого бекапа (хоть из облака, хоть из тех же торрентов заново качать) как минимум долго. А локальный бекап не обеспечивает достаточной надёжности.
У меня в целом такой же подход, как у Вас. Некритичные данные дублируются в 2 местах, критичные — в 3-4. Тех самых критичных терабайт 5, правда. Но это различие на уровне «на скольки серверах/облаках их дублировать». Без RAID (ну точнее с RAID-0, который надёжности только убавляет) живёт только хранилище записей на сервере видеонаблюдения.
Ваш вариант — это не замена RAID, а способ бекапа. Способ удобный тем, что в одном NAS с диска на диск восстановить данные очень быстро. Но ненадёжный тем, что сценариев, когда умрут оба диска, вставленные в один NAS, возможно с ним вместе, довольно много.
vanxant
второй диск уже мог выйти из строя (начать сыпаться), просто в рейде этого никто не замечал кроме рейд-контроллера. Который просто исправно помечал новые бэд-блоки и брал копию данных с других дисков (рейд жи ну).
А тут таки придётся его прочитать. Весь, целиком. И копий уже нет. И вот тут начинается «запил», от которого диск может сдохнуть уже прям совсем насмерть.
skrimafonolog
В пору моей админской практики дважды наблюдал подобное «невозможное» событие:
Когда после выхода первого диска из массива — вскоре (через пару дней) выходит второй.
Есть мнение, что просто нагрузка на оставшиеся диски сильно возрастает после выхода первого из строя — поэтому.
hjornson
Надо заметить что рэйд частенько собирается из дисков одной серии и производителя.
И если не повезло и попали на что-то вроде знаменитых 7200.11 или MPG — то полетят они вполне синхронно.
sHaggY_caT
Поэтому софтовый рейд и рулит: он позволяет собирать массив из дисков разных производителей и даже размеров, что я всегда и делаю специально.
SergeyMax
Ну не вечность. При скорости записи под 100МБ/с — меньше двух суток.
aborouhin
Не берусь спорить на 100%, но меньше 2 суток — это только запись на новый диск. И не факт, что там характер этой записи будет такой, что в среднем вытянет 100 МБ/с. А надо ещё прочитать данные со всех остальных дисков массива, посчитать parity… Если речь идёт про домашний NAS — там процессор и память на уровне смартфона, сколько у них это займёт?
Так что в реальной жизни я рассчитывал бы на что-то ближе к неделе. А это много. Особенно если бекапа нет (а в домашних условиях бекапа всех 16 Тб нет с большой вероятностью, как бы неправильно это ни было).
chapai22
Аппаратные бу рейды с R6 стоят гроши. У меня два h700 от делла, бонусом кеш cachecade на SSD — нашлось куда ткнуть 256gb ssd. Помимо собственного кеша на гиг. Вместе очень неплохо.
ximik13
Собственный кэш на гиг батарейкой-то хоть защищен? Или на авось, как это часто бывает, используется?
chapai22
это всеж индустриальная шняга. Non-Volatile Cache и батарейка. так что заявляют годы хранения (10). а появится питание — оно сбросит. можно хоть на горячую дергать и носить между серверами с живым кешем.
есть версия на обычной памяти — там только батарейка держит.
aborouhin
У меня дома Adaptec 5805, даже с батарейкой. После замены аппаратного RAID-6 на ZFS RAID-Z2 на тех же самых дисках (подключенных к тому же Adaptec, но как simple volume), к слову, получил прирост скорости на чтение раза в 2, на запись в 1,5. Так что всё лучше домашнего NAS, но вот целесообразность покупки аппаратной карты вызывает сомнения. При прочих преимуществах ZFS к тому же.
chapai22
Не очень понятно, как такое возможно, чтоб софтверные вычисления основной системой были быстрей риск-проца, который и по шине данные не гоняет лишний раз. Скорей всего у адаптека значимая логика в драйверах а в кремнии родовспоможение.
И тем более выйгрыш на чтении (!) за счет чего?
Подозреваю некое кеширование основной системой в оперативке — и завышенные данные тестов.
aborouhin
Ну на основной системе 96 Гб RAM, а ZFS её очень любит использовать, и, видимо, с толком. Не поручусь за 100% точность своих тестов, не ставил такой задачи. Но сама идея поменять аппаратный рейд на софтовый возникла как раз после прочтения ряда постов, что оно ещё и быстрее бывает, помимо прочих полезных плюшек.
chapai22
Дык тогда у вас нет питания или софтина крякнула — нет данных из этих самых 96 гиг. Тем более ресурс жрется в полный рост, и ядра проца греют вселенную и качают трафик по шине. В чем смысл? Если можно просто сменить контроллер на 6Gb (SAS 2.0) вместо 3gb(SAS 1.1) и получить честный прирост производительности. За условные 30-50 баксов.
aborouhin
Ну мне для домашних нужд, честно говоря, производительности и предыдущей хватало с головой, не за ней гнался. Смысл был в обеспечении целостности данных на уровне ФС (контрольные суммы, регулярный scrub), удобных снапшотах. Раньше для этого поверх аппаратного рейда была BTRFS, но за последние полгода она умудрилась глюкануть 3 раза (и это не были проблемы с железом). Так что перешёл на ZFS, ну и заодно избавился от лишнего уровня абстракции. CPU ощутимо не грузит (в сумме 12 ядер, распределяет нагрузку равномерно на все).
Если уж что-то докупать и менять — то там у меня другой системный недостаток: один и тот же физический сервер работает и гипервизором, и СХД. Надо разделять, но это как-нибудь потом :)
chapai22
я переполз с 3ware 9650se — разница заметна. Хотя мотивация была в орании про перегрев батарейки. И тоже домашний комп на зионах и 72 гига. Но из за нагревов озаботился оптимизацией.
Pas
Вообще-то SAS уже 12G.
chapai22
Дык предела нет.
У меня эмпирическое правило — диски, контроллер должны быть в районе полтинника, и не больше. Тогда они покрывают мои потребности.
Как у больших компаний наступает списание оборудования, а это где то пять-шесть лет, — так и мое время приходит.
Tufed
А они умеют работать с дисками объемом 16Тб? 256гб SSD можно воткнуть и разницы HDD/SSD им до лампочки. Но о существовании дисков 10Тб+ они явно не знают, и их производители 100% не закладывали в мануал информацию о совместимости с дисками такого объема. Так что с каждой железкой нужно будет опытным путём определять — сможет или не сможет.
chapai22
Вероятно H700 с 16T не умеют. Дык было в качестве примера. Можно поискать посвежей.
В смысле купить пачку новейших дисков по 500-600 долларов штука, тыщ на несколько и затем втыкать их в 40-долларовый контроллер 8 летней давности?
Tufed
Наоборот не логичнее? 1 новый диск и десяток дешёвых контроллеров.
katzen
Если массив при этом должен работать, то скорость фонового ребилда рейда на 4 ТБ дисках предыдущего поколения, с потоковой скоростью 110-150 МБ/сек составляет 20-22 часа, если все ресурсы отдать на перестройку — 8-9 часов. С этими (гелиевыми) дисками скорость чтения/записи примерно в 1,5 раза выше, так что «вечность» — яркое преувеличение.
Если бы да кабы… У моего наса 16 гигов и ай-пятый на борту. У всех разные насы, так что не стоит брать крайние случаи, пожалуйста.
И, кстати, если перестройка будет неторопливой, то вероятность сбоя остальных дисков будет ниже, не так ли? По крайней мере от температурных причин.
OpenMind4423
NASы уже не те… это походу только я пользуюсь в качестве NASа Atom 510/4 gb ram да ещё и интернет по 1 гбит сети с вайфаем раздает?
Norno
Ну как вам сказать… 800MHz SoC, 128MB DDR II… Dlink DNS-320, торренты качает, файлы раздает.
katzen
А вы попробуйте, когда он будет хотя бы полгигабита в сеть и наружу гонять, с него же кино с блюрей-рипа посмотреть.
OpenMind4423
в начале, когда я только пихал туда диски, они поочередно по одному форматировались с NTFS в EXT4. и все туда копировалось. Я уже решил, что и то что в облаке, будет тоже там. Потому всё копировалось и с дисочков, и с облака, с браузера тупо сохранялось в шару. Потом я ещё с торрентов сразу поставил на скачивагие. Скорость на сервере показывало 871 мбит общей скорости в локальной сети(OpenWRT x64), на компе 60-109 мбит моргало. Если что — внутренняя сетевуха 1 гбит реалтек смотрит в интернет 1 гбит, в PCI внихнута 2х портовая Intel pro1000mt. Первый диск из хитач, новый, ноутбучный, 1 тб, второй старый wd зеленый года 2009 на 1 тб. Оба на 5400 оборотов, у первого кеш 128 мб, у второго 64.
Вопрос в другом. Хочу зеленый поменять, на например на 12 тб диск. Будет ли работать с материнской платой на intel510MO? Вроде поддержка больших дисков идёт из операционной системы, а тут линукс и ему всё равно, но nm10 всё же не внугает доверия.
katzen
Не подскажу, к сожалению. Надо смотреть мануал на SATA контроллер.
scruff
6TB-ное зеркало на несовременных красных WD-6000 ребилдится примерно сутки. Значит 16TB — при такой же скорости — чуть меньше 3 суток — в принципе терпимо для среднего энтерпрайса. Но за это время получаем колоссальное падение производительности и более того — надежности. Всё больше прихожу к мысли, что вкладываться в аппаратную часть единичного сервака — так себе инвестиция. А вот «взять количеством» и «запилить» SAN-кластер из дешманских «без-рэйдовых» серваков — это сила!
ximik13
Сильно зависит от заполненности зеркала. Да и ребилд зеркала это скорее поточное чтение + поточная запись. С тем же Raid6, который рекомендую под такие диски многие производители СХД, все не так радужно будет.
Gasaraki
140 IOPS = 4k*140 = ~560кбайт случайного чтения/записи.
если хранилка нагружена, то вы такую скорость и получите.
Так что вечность, либо снижать нагрузку во время ребилда.
SergeyMax
Это большие диски на 7.2K. Их используют для хранения бэкапов или редко используемых архивных данных.
erty
Рейд ребилдится не пофайлово, а поблочно (если мы о стандартных рейдах, а не на уровне фс, хотя там наверняка тоже как-то оптимизирован процесс).
Там нет произвольного доступа, тупо линейно читаем все блоки от первого до последнего.
Gasaraki
При нагруженной хранилке вы не получите линейное чтение. У вас очередь и куча клиентов которым надо вот прямо сейчас отдать данные (вот этот кластер, и еще вот тот на той дорожке и еще вот там на третьей и т.п.). Поэтому линейный блок выкачается только в короткие промежутки простоя (ребилд снижает свою скорость когда на хранилище идет нагрузка).
Про то что толстые диски используются только в архивах — это не так. Промышленные решения с ssd кешами перед дисками вполне себе существуют и продаются (всякие там netapp, vmware vsan и т.п.). Хотя я сейчас для хранилки корпоративного уровня вижу только флеш. Работал и с дисковыми хранилищами и с ssd+диски и с all-flash.
KorP
А вы с современными СХД вообще дело имели? Ну не считая некоторых Low-end моделей, уже почти все отказались от использования RAID на целых дисках и режут их на мелкие кусочки, что позволяет повысить эффективность хранения и увеличить время перестроения.
dinarv
Может все же чтобы уменьшить время восстановления?
KorP
Ну да, что бы уменьшить. Нельзя писать до первой чашки кофе :)
aborouhin
Дома? Увы, нет… Не та ценовая категория. Тут весь разговор начался с приведённых в статье рекомендаций по домашнему применению.
KorP
Я думаю, что в контексте статьи, предполагалось, что пользователи будут использовать его как единственный диск, но не как часть raid5/6
aborouhin
Я тоже так понял, и попытался намекнуть (вероятно, слишком тонко :( ), что рекомендовать домой для хранения <16 Тб данных один такой диск вместо RAID из более мелких — так себе рекомендация...
Boomburum
Я бы с удовольствием такой дисочек поставил для видеонаблюдения ) Позволит хранить видео за более долгий срок, а помрёт — скорее всего там ничего важного не будет (а просто архив видео «по движению», на котором ничего не произошло).
aborouhin
Для этой задачи 4 диска по 4 Тб в RAID-0 (a) дешевле, (б) быстрее, (в) в случае гибели одного диска затраты на замену не так печальны.
Хотя если диск ставится в какой-нибудь аппаратный регистратор, где всего один слот и никаких RAID — то да, вариант.
Boomburum
Ну вот у меня как раз несколько дисков по 4Тб и 4 диска выйдут как раз как один на 16 ) Но да, всё упирается в регистратор — у нас там аппаратный девайс с одним слотом. Хотя будь моя воля — поставил бы условный qnap/synology в шкаф и забыл.
navion
12 ТБ Ультрастар ребилдится 17-18 часов без нагрузки и при окне простоя в 8-12 часов получаем 2-3 дня.
А там где диски лопатит 24/7 используют DDP/DRAID или вообще объектное хранилище, где такой проблемы не возникает.
Heian
Влажные мечты сигейта? С такой надежностью и стоимостью они не заместят старые-добрые HDD еще лет дцать. Платить 25к за то, чтобы утром проснуться и обнаружить, что потерял все данные при отличном смарт — нет уж, увольте… лучше я заплачу пять тыщ и буду юзать отличный жесткий диск от Hitachi пять же лет.
P.S. Ну и диски от сигейта брать можно только если данных не жаль… у сигейта и сверхнадеждые, по сути, HDD сыпались. Конторка хуже даже, чем WD, которые сами по себе таксебешные.
helgihabr
Как-то вы слишком резко высказались насчет сигейта:
kisaa
Неприятен большой разброс показателей надёжности у разных, хоть и родственных, моделей Seagate. А 2,28% — это весьма плохо. Хотя, бесспорно, 4,64 у WD ещё хуже.
Tufed
Таблица неполная, т.к. не отображает временную составляющую. Это работа в течении квартала всего штата дисков. Но в этом штате имеются как старые так и новые диски. 4TB-ные диски, могут быть 1-2-3 а может и более лет. И новые 12TB-ные диски, которые явно помоложе. Ровно как и выборка не ровная, т.к. модели с 0% выходов из строя просто имеют малое количество экземпляров и для сравнения не совсем подходят.
REPISOT
Судя по таблице — сигейт самые ненадежные диски. Подтверждено практикой. У нас в конторе за сколько-то лет вышли из строя только сигейты.
skrimafonolog
Чего это?
Они как раз в обратном заинтересованы — как можно дольше работать на том рынке.
Gasaraki
5+ лет ssd дома в 1Тб. Ничего не делалось для оптимизации. На нем лежит все чем постоянно пользуюсь (OS, игры, браузеры). 23тб записанных данных (после перестановки системы, хотя может он со смарта берет). оценочно еще 530тб можно записать.
HDD диски у меня успели умереть за этот срок.
Так что мой выбор — SSD под систему и все с чем работаешь, 2 HDD диска в зеркальном рейде под фильмы и т.п.
И на этот же рейд делается бэкап (через veeam agent) основной ssd (полные и инкрементальные бэкапы).
Alexsandr_SE
Новые диски SSD похоже хуже в плане выносливости. У меня при наличии SSD и диска под файлопомойку за год на SSD записано больше 17тб. Без жесткого диска скорее всего было бы больше раза в два как минимум.
Gasaraki
Торренты льются на hdd. Вся ssd забита установленными играми и виртуальными машинами.
Tufed
60гб SSD Kingston 3Dnow. Одна из первых и не самая удачная, были проблемы с контроллером, отваливался в процессе работы. Приходилось накатывать прошивки. Вроде бы устранилось. Работает под системой Win7 и софтом с 2012 года до сих пор. Из оптимизаций: много оперативки и потому совсем отключенный файл подкачки.
MTyrz
Нет, правда хорошие диски были. Муха це-це им стала первой ласточкой, извиняюсь за высокий штиль.
skrimafonolog
Немного не так:
MTyrz
Все так.
Диски IBM были впереди планеты всей по скорости и надежности. DJNA, DTTA, DPTA, DTLA… Ба-бах! Дятлы полетели, репутация полетела вдогонку — а тут заодно случилась тенденция избавляться от непрофильных активов. Поэтому производство и продали. Знамя выпало. От дисков Hitachi тоже долго шарахались по старой памяти.
Там еще рядышком по времени стоит такой же впечатляющий фейл от Fujitsu, которые MPG. Тоже избавились от производства в итоге.
lubezniy
А что, с HDD так проснуться не получалось никогда? Когда SMART норм, а башка на диске сделала из поверхности наждачку… Видать, всё ещё впереди.
avelor
>отличный жесткий диск от Hitachi пять же лет
а через 5 лет встанете перед выбором — WD, сигейт или тошибк. или SSD. потому что нет никакого хитачи, уже даже как wd-шного бренда.
navion
HGST = WD Ultrastar и все гелиевые диски. Скорее они уйдут из потребительсого сегмента, похоронив наработки WD с разноцветными наклейками.
whyme
Эхх, тоже всегда брал Hitachi, вот только их больше нет, с недавнего времени выпускали wd под брендом Hitachi (по моим ощущениям по качесвту не отличались от wd), а теперь и бренд закрывают.
vrnvorona
Я так и не понял, это был бросок в сторону твердотельных или сигейта? Если в сторону сигейта — так все уже на твердотельных на бытовых, если в сторону ССД, то написана глупость ибо нельзя вот так проснуться и потерять все не проработав хотя бы 65% ресурса перезаписи. Для бытовых ССД неумираемые, мой 256 диск живет 3 года и даже 10% не потратил. Если не баловаться торрентами постоянно то на 10 лет спокойно хватит.
Firz
Потом сильно не удивляйтесь, когда на 11% неубиваемого ресурса окажется что там внутри еще и контроллер есть и куча всего, что может внезапно сдохнуть даже во время перезагрузки.
vrnvorona
Я еще не слышал о контроллере как об обычном способе смерти ССД, а тесты показывают что в большинстве случаев ССД проживает как минимум заявленный ресурс, а если крутой контроллер то часто в разы больше. Обесточка влияет, да, но говорить «вот у тебя отвалится контролллер поговоришь» как минимум глупо.
Exchan-ge
См., например https://habr.com/ru/post/434702/
vrnvorona
Где описаны даже не смерти, а багло возникающее в несерверном железе из-за нагрузки без перерыва. Причем, многие по словам возвращались к жизни — значит не отказ железа, а баги связаные сложно сказать с чем. В тестах ССД на серьезных площадках вроде 3д я не встречал упоминаний «смерти» контроллеров, а там *куча* тестов.
Exchan-ge
«Что беспокоит меня больше всего по поводу этих резких отказов SSD – так это насколько они непонятны, и что я не могу сам себе объяснить, что именно пошло не так. Когда жёсткий диск крутится, он тоже может внезапно помереть, но, по крайней мере, можно составить объяснение того, что случилось перед этим – заклинило мотор, или случился другой физический отказ, приведший к резкому останову. SSD – твердотельные и таинственные, и у меня нет никаких объяснений тому, что пошло не так, особенно когда диск ещё молод и не должен был подходить к исчерпанию лимита жизни флэш-ячеек»
vrnvorona
Цепляйтесь дальше к одному куску без конкретики. Нельзя использовать информацию о «у нас тут что-то мистически умерло» и аргументировать этим смерти контроллера. Может у них политика охлаждения была фуфло и там все валилось из-за этого, может еще что итд. Не знаю почему из этого поста можно или нужно делать вывод о чем-то связанным с ссд кроме очевидного «дерьмо на сервера не ставь».
AlexanderS
Судя по кешу — диск с SMR технологией записи?
gibson_dev
Естественно при таких объемах
nev3rfail
Эмм, что?
NetBUG
С рынка, а не из бытовых (что это? БК-0010? Там их и не было) компьютеров :)
Хотя не берусь оценить продажи
Exchan-ge
Это достаточно важный момент, что бы рассказать о нем подробнее (например, я использую систему с быстросъемными карманами, в которых диск крепится винтами снизу).
Как минимум нужно фото со стороны отверстий, нормально же — дать чертеж с габаритами и положением крепежных отверстий на корпусе.
Спасибо!
kisaa
https://www.google.com/search?q=exos+x16+sata+product+manual
Первая ссылка, стр. 26 (27)
Ну что же вы, в самом деле. Пора уже учиться гуглить )
Exchan-ge
Скажите, а в чем тогда смысл этой статьи?
mkevac
О каких именно решениях речь?
OldarKose
Ceph например, или из проприетарного — vSAN, ScaleIO.
mvv-rus
Интересно, как именно мерялись вот эти технические характеристики в спецификации:
Вопрос такой, потому как для семитысячника (7200 об/мин) они ни в какие ворота не лезут. Вот в тесте, результаты которого приведены в тексте статьи, характеристики получились вполне адекватные тому, что обычно предполагается для семитысячников: для произвольного доступа с блоком по размеру сектора (4КБ, как я понимаю) получилось 74 IOPS и ~13ms для времени доступа.
Поэтому хотелось бы узнать методику, по которой получены цифры из спецификации, чтобы понимать, что именно я не понимаю.
0lom5zhdovdv
Интересно, пластины стеклянные, как у 12Тб-ных WD?
tronix286
Нужен нипель, куда гелий закачивать. И книжечка ТО.
vesper-bot
Через этот нипель гелий радостно улетучится, поэтому его и не делают. Но таки да, нужен замер давления гелия внутри диска, чтобы определить, когда диску хандец по причине потери среды.
Serge78rus
Гелий же не для понтов используется, как азот в шинах. По мере утечки должны меняться какие-то параметры и контроллер вполне может по косвенным признакам определить утечку.
thatsme
Вот эта фраза, — целиком оксюморон. Интересно как долго гелий будет держаться в этом корпусе? Гарантия 5 лет? Если да, то вполне нормально.
sumanai
У гелевых дисков есть специальный аттрибут смарт и кажется даже переход в режим только чтения при ухудшении значения меньше порога.
wsdx
А что там с монтажными отверстиями-то? Можно поподробнее и желательно с размерами.
amarao
Визуально он напоминает старые HDD (2Gb):
THT
Возможно вам покажется, что я зануда (нет), но каждый раз, когда компания, представитель бизнеса, публикует скриншоты из Trial версий программ, это как то настораживает. Что то похожое на — мы АтомСтройИнвест Лимитед Корпорейшен, лидер в передовых технологий на рынке, и в подписи для контактов — username@mail.ru
ANPolter
Что толку от объёма, если по статистике, Сигейты самые ненадёжные?
Eddyson
Seagate из практики — ненадежные диски. Особенно они гибнут в ноутбуках, даже мой Seagate на жомашнем пк, уже с бедами, так же проблемы с дисками 2.5 были на сервере. А вот WD, который стоит у меня на ноуте, после нескольких падений жив, цел, орел. У товарищей тоже проблем с WD не было. Также хороший опыт с дисками Samsung.
Ну HGST пробивает дно в плане надежности. Если Seagate набирает беды, то HGST с большей долей идет в отказ по механике.
avelor
только HGST нету больше. есть только wd ultrastar. но кстати с HGST в моей личной практике проблем было меньше чем с сигейтами и wd (как «домашних», так и сервачных). а вот самсунг в своё время был лидером по сдохшим винтах. зато пепельницы из них нром получались :) разумеется, у меня не очень большая выборка, и всё сугубо ИМХО.
Eddyson
Я описал лишь свой опыт и наблюдения, на домашнем компе до сих пор крутятся жесткие диски Samsung с 2007-го (эххх...) на 500Гб и Seagate 2013-го на 1Тб, и вот со вторым уже проблемы, пришлось разбивать его на два тома, с неразменным пространством. Ну и про сервер я тоже писал. А HGST уже два штуки у меня щелкающих в коллекции (совпадение?). WD на ноутбуке стоит, с момента его покупки, в 2011. Еще купил Toshiba (из за скидки) родителям, на 320гб или что-то подобное, спустя 6 лет тоже полет нормальный.
force
Мы стараемся закупать в компанию что-то отличное от сигейтов, но, когда у поставщика ничего подходящего нет, брали сигейты. В результате огромная коробка мёртвых дисков и почти все сигейты. Мрут при этом очень мерзко. Если Тошибы и Хитачи постепенно начинают сдыхать, то тут сразу или полная смерть или псевдоработа с ребутом при попытке обратиться не туда.
navion
Топовые модели никогда не были про экономию — тут цена за терабайт на четверь выше, чем у дисков на 12 ТБ.
sumanai
И ещё выше, чем у самых дешёвых дисков на 4ТБ, которыми я сейчас и запасаюсь.
Borismedia
Крайне быстро сыпятся Сигейты, а также Хитачи и стали теперь и Тошибы, Самсунг и ВД пока самые живучие в плане долгожительству. Это чистая правда.
younghacker
В районе 2011 года я потратил больше 20 тыс долларов на терабайтники с надписью Seagate.
До окончания гарантии вылетело примерно 50% закупленных дисков. Поставщик менял их исключительно на refurbished, которые вылетали уже через пару месяцев. После окончания гарантии в течении около года ушло около 90% закупленных дисков. Причём диски были из нескольких разных партий. Диски самой первой партии продержались больше всего. А более поздние дохли очень быстро. Пару дней назад заменил самых долгожителей из тех партий.
Поэтому c грустью констатирую — «морским воротам» я больше не доверяю. Пруфы свалены в коробках. Хочется этими дисками сложить нехорошее слово и снять с квадрокоптера.
С другой стороны, в некоторых серверах у меня до сих пор крутятся сигейты в которых счётчик отработанных часов скоро переполнится второй раз. Умели же делать.
3aBulon
>> по сути это обычный SATA-накопитель, совместимый с абсолютно всеми современными компьютерами
Но очень жаль что его не поймут сетевые хранилища, по крайней мере не все.