Эта же ситуация наблюдалась и в 2018 году в плане корпоративных решений. Продажи SSD и общая доля хостинговых предложений, проникновение твердотельных накопителей в корпоративный сегмент и в целом доминирование этой технологии только усиливалось. Особенную тревогу у производителей вызывал сегмент 2,5" HDD-накопителей, которые находятся в большей опасности по сравнению с полноформатными 3,5" в плане поглощения сектора SSD-дисками. Продажи же HDD планомерно падали, как по показателю отгруженных изделий в абсолютном выражении, так и по объемам памяти проданных жестких дисков.
В прошлом году все изменилось.
Давайте обратимся к цифрам из отчета аналитики рынка от TrendForce.
Первое: доля отгруженных SSD по числу изделий сократилась с 12% в 2018 до 10,4% в 2019 году. При этом общий объем памяти реализованных твердотельных накопителей вырос на 60%, что в абсолютных числах составляет ~16 690 Петабайт памяти.
Второе: доля nearline-HDD (SAAS HDD) выросла до 89%, а их совокупный объем памяти в абсолютном выражении увеличился на 83% по сравнению с прошлым годом и составил ~138 200 Петабайт.
Динамика абсолютно ясна и прозрачна. Даже при уменьшении числа продаж, которое, кстати, прогнозировалось производителями еще в середине 2019 года, увеличивается их емкость — то есть объемы реализованной памяти. Этот тренд наметился еще в районе 2018 года, когда флеш-память стала стремительно дешеветь и на потребительском рынке появились SSD-накопители емкостью свыше 256 Гб, для покупки которых не надо было продавать почку. Ускорило рынок и появление новых интерфейса и форм-фактора для SSD-чипов — NVMe и m.2 соответственно, что, очевидно, облегчило производителям некоторые аспекты создания и сборки накопителей.
Слева направо: два SSD-накопителя с интерфейсом SATA и mSATA, накопитель SATA m.2 и накопитель с интерфейсом NVMe m.2. Важно помнить, что m.2 — форм-фактор, когда как SATA и NVMe — интерфейсы передачи данных
Снижение продаж SSD — на самом деле достаточно странный тренд который, по мнению многих, не закрепится в долгой перспективе. Даже если отбросить статистику и обратиться к собственному опыту, как крупного дата-центра, можем с уверенностью сказать: популярность решений на базе SSD только растет. Банально в пример можно привести поисковые запросы, по которым к нам приходят клиенты. Если отбросить из списка специфические, которые касаются аренды стоек, то в топ-3 уверенно входят «аренда виртуального сервера спб», «vps спб» и «выделенный сервер спб».
То есть практика показывает, что сейчас наибольшим спросом среди потребителей пользуются именно VPS-решения, которые уже как несколько лет любой уважающий себя и своих клиентов хостер поставляет на базе SSD. Но растут продажи именно HDD-дисков. И тут хостеры или рядовые потребители уже ни на что не влияют: вверх HDD толкает Enterprise-сегмент.
Что повлияло на рост продаж HDD
Если бегло проанализировать новостную повестку за прошедший год в сфере оборудования, то можно увидеть, что Seagate, Western Digital и Toshiba совершенно не собирались сдаваться и умирать под напором производителей флеш-памяти. Можно сказать больше: благодаря SSD-накопителям, которые наконец-то растолкали гигантов, последние перестали наслаждаться жизнью, клепая 250 и 500 ГБ диски, и занялись серьезной разработкой новых решений. При этом решения эти были далеко не только потребительские: производители жестких дисков уверенно идут по пути работы на нужды больших корпораций.
В конце прошлого года мы уже писали о новой линейке HDD от Toshiba объемом до 6 ТБ, но этим новости сегмента далеко не ограничиваются. За последние 12 месяцев Seagate представила диски линейки IronWolf и IronWolf Pro для малого и среднего бизнеса объемом до 16 ТБ, замахнулась на диски объемом до 20 ТБ уже в 2020 году. При этом как Seagate, так и Toshiba ведут работы по использованию технологии HAMR — метод записи через подогрев магнитных дисков HDD лазером. Также Toshiba планирует увеличить количество «блинов» HDD со стандартных для корпоративных решений 9 дисков, до 10 в одном корпусе форм-фактора 3,5".
Western Digital тоже не спит. За 2019 год они подтвердили свою готовность инвестировать одновременно в разработку технологии HAMR и MAMR (запись с помощью микроволн, а не лазера).
Также WD стали крупнейшим поставщиком корпоративных дисков на 14 ТБ и еще в декабре 2019 года начали ознакомительные поставки корпоративных HDD объемом 18 и 20 ТБ.
Все это, в совокупности с ростом объемов хранимых данных, благотворно влияет на рынок больших по размерам и более стабильных HDD на фоне флеш-памяти. По сути, мы получили парадоксальную ситуацию сосуществования двух поколений технологий на одном временном отрезке в далекой перспективе: пройдет не менее пяти-семи лет, когда SSD догонят по стоимости за гигабайт своих старших братьев из числа HDD-дисков, а последние к этому моменту уйдут еще дальше. При этом спрос будет только расти: во времена, когда десять строчек кода оборачивают в Electron и получают приложение или расширение, которое потребляет ресурсов больше, чем было у целой рабочей станции еще десять-пятнадцать лет назад, размениваться на такую «мелочь», как оптимизация хранения данных и экономия дискового пространства, никто не собирается.
glowingsword
В принципе, всё логично. Не подходят SSD под долговременное хранилище данных, а если SSD не в RAID, то даже как более-менее надёжное. Вот бизнес и профессионалы и используют SSD под систему и документы, с которыми часто работают на локальных ПК(под хомяк, грубо говоря) и HDD для долговременного хранения на ПК. Плюс NAS, которые всё чаще появляются даже дома у более-менее продвинутых пользователей. Где диски уже в RAID, и упор сделан не на скорость, а именно на надёжность. Ведь стоимость работы обычно намного выше стоимость железа. Когда SSD только появились, народ не сразу осознал отличие этих накопителей от традиционных(в том числе и в плане надёжности), а потому некоторые весьма фривольно хранили данные только на SSD, и даже на внешних, очень редко подключаемых SSD(это вообще безумием попахивает, учитывая природу SSD). А потом кто-то потерял данные, кто-то осознал преимущества HDD. И стали срочно закупать новые диски HDD и хранилища на их основе для хранения того, что не разумно хранить только на SSD, но опасно сливать в облако. В таких случаях проще подстраховаться, и иметь свой NAS, чем однажды оказаться с поломанным накопителем и без данных, что стоят как 10-ки и сотни NAS...
safari2012
Как бы только с более плотными с дисками не произошла такая же деградация, как в случае с SSD — SLC->QLC
glowingsword
Время покажет. Я подозреваю, что таки да, напоремся на деградацию, при при том, как всегда — внезапно. Но осознаем проблему, только когда народ массово потеряет данные, и денежки потеряет.
navion
Давно произошла в виде PMR > SMR, причем для потребительских дисков не всегда указывают технологию записи.
Mad__Max
SMR сейчас почти не применяют, технологию уже почти «списали». Выигрыш от нее оказался небольшой (всего около 15%-20% на практике), а скорость падает сильно и покупали такие диски плохо. В результате с SMR считанные модели остались среди самых емких серверных линеек ориентированных в основном на длительное «архивное хранение».
В «бытовых» линейках дисков сейчас насколько знаю их вообще не производят.
navion
Некоторые WD Blue и Seagate Barracuda с SMR.
Mad__Max
В плане появления существенной деградации при записи может и повторится, т.к. резкий и сильный нагрев (в HAMR / MAMR) в моменты записи, при каждой операции вряд ли пройдет бесследно.
А вот в плане надежности хранения уже записанных данных эти новые технологии наоборот могут существенно улучшить ситуацию. Т.к. они позволяют (собственно это и есть основная цель) перейти на использование в пластинах дисков очень «жестких» магнитных материалов, которые с большим трудом перемагничиваются в обычных условиях (и чтобы их все-таки перемагнитить их как раз нагревают до высоких температур в моменты записи). В результате вероятность случайного размагничивания/перемагничивания при хранении данных резко снижается.
В отличии от SSD на базе Flash памяти, где скорость деградации и сохранность записанных данных тесно связаны — одновременно растет и скорость деградации и снижается время сохранности записанных данных.
s37
у ssd есть ещё момент что RAID из них умирает практически одновременно, т.е. чтобы сделать копию SSD нужно иметь или такой же запасной (но не в RAID) или HDD, который выигрывает по соотношению цена/объем.
legolegs
Почему?
maverickcy
Потому что пишутся одновременно, и поэтому изнашиваются одновременно
Charg
А на HDD в том же рейде будет писаться (и следовательно изнашиваться) не одновременно?
maverickcy
А на HDD циклов перезаписи столько, что скорее один из HDD сдохнет, просто потому что. Вроде так
balamutang
нене, как только сдох хард в зеркале надо все гасить и на минималках копировать на подменный, иначе очень много шансов что второй помрет тут же от того же износа и нагрузки от копирования
Am0ralist
Механика дохнет не так линейно. Если только прошивки, ну и есть рекомендация не ставить в рейды из одной партии
navion
Из-за вибрации или перегрева могут одновременно вылететь соседние диски в полке, которые являются зеркальной парой для RAID10.
s37
если диски одинаковые, то TBW у них одинаковый, соответственно если стоят в зеркале то выходят из строя практически одновременно, люди пробовали делать, разница в выходе из строя от часов до дня, как уже ответил maverickcy. Можно, конечно, ставить разные (один более дорого), но принципиально вряд ли вы сможете выиграть.
legolegs
Но износ же мониторится, в чём проблема заменить планово? А от внезапной смерти контроллера RAID должен таки защитить.
s37
Износ, разумеется, мониторится, теоретически можно подготовиться и планово поменять оба диска, но практически раздолбайство побеждает всё, а раздолбайство и жлобство (какая замена дисков, если он ещё работает?) вообще всё. В этом случае системного администратору не выгодно ставить SSD, мороки много.
Для себя мы выбрали один SSD + ежедневный бекап на HDD (а иногда пару раз в день).
legolegs
В качестве лекарства от жлобства можно планово менять SSD между разными массивами по принципу из анекдота "В лагере смена белья! Первый барак меняется со вторым!"
Am0ralist
Так ведь ещё проще вариант есть: вынимаешь из зеркала через полгода первый, втыкаешь замену, а вынутый в резерв втыкаешь. Уже не сойдутся.
s37
Если вы системный администратор на полный день и фиксированном окладе, к тому же вам скучно, то почему бы и нет :-)
saege5b
Особенно легко, когда они 24/7 крутятся.
Mad__Max
Плохо мониторится. Посмотрите тесты по живучести SSD — работает, работает, вроде все неплохо, ну какие-то мелкие проблемки только намечаются но диск рапортует, что он еще живчик и готов еще столько же проработать сколько уже проработал. А на следующий день — оп, и уже вместо диска кирпич не подающий признаков жизни.
Если только настраивать мониторинг в режиме параноика — отправлять диск под замену при появлении самых первых ремапов сбойных блоков флэша. Или после исчерпания гарантированного производителем ресурса.
Но тут уже параноика может передушить жаба.
somebody4
Можно менять диски в ssd raid после некоторого времени использования. Т.е. Если например raid из трех дисков, мы покупаем пять, через полгода меняем один из действующих на новый, ещё через полгода ещё один заменяем на новый и после этого делаем похожую ротацию.
Nick_Shl
glowingsword
Скажем так, когда диск подключен постоянно, вероятность что данные с него читаются всё же повыше. У меня, к примеру, прога, что занимается индексированием данных, любит шариться по дискам, особенно по том, что монтируются в хомяк. Какой-никакой, а источник обращений к файлам уже есть.
Am0ralist
Так вроде уже делают. Самсунг даже обновлял прошивки своих дисков из-за подобного.
Вот только жалоб на то, что холодные данные перестали читаться с постоянно подключенного ссд я как-то не встречал, кроме того случая, а вот что перестали читаться без подключения — как раз таки были.
Mad__Max
У меня уже было, дважды и не на самсунгде (один Silicon Power другой кажется Kingston были)- «холодные» данные переставили читаться или считывались битыми, хотя диск работал каждый день и под низкой нагрузкой (так что времени на отработку фоновых задач у него было предостаточно).
А вот «горячие» данные все читались без проблем, хотя по значительному росту WA понял что диск уже неоднократно их «обновлял» самостоятельно в фоне.
Один из случаев — родителям в компьютер поставил SSD в качестве единственного диска, среди прочего была выкачена локальная библиотека Либрусека (= огромная куча zip архивов в основном лежаших мертвым грузом, из которых обычно читается 1-2 штука раз в несколько дней-недель). Потом (меньше чем через год) получил жалобы что некоторые книжки не открываются и комп в эти моменты «вешается». Полез проверять — так и есть, уже 10-15% архивов библиотеки оказались битыми и диск очень сильно тупил при обращении к ним. Подробный скан всей поверхности чтением выявил еще пачку нечитаемых данных на диске, которые допоры до времени оставались незамеченными (как раз потому что почти не используются).
Но после ручной принудительной перезаписи всего объема — все снова ОК и диск работает до сих пор продолжая показывать отличные показатели «здоровья» в SMART.
Lendges
Чем проверяли и как можно сделать принудительную перезапись всего объема?
Mad__Max
Это же zip архивы, прогнал встроенный тест читающий файлы и считающий контрольные суммы файлов.
Перезаписал «Викторией» (вообще она изначально для HDD разработана, но и с SSD все базовые функции работают, по крайней мере для SATA дисков) в режиме теста записи. Но в принципе можно просто все данные с дика удалить и забить «под завязку». Еще у производителей иногда в фирменных утилитах обычно бывает «Secure Erase» затирающий весь объем диска.
Am0ralist
А когда я писал среди рецептов работы с ссд — перенос холодных папок с дровами в винде и с хелпами от VS на hdd — мне столько отписалось людей, о том что я не прав))) (а там реально десяток гигов был при том, что сам ссд всего на 120 хоть и 850 про)
прошивку SSD обновляли?
Не, я вообще к тому, что в один момент прям волна пошл, особенно с самсунгами, производители на ус намотали и прошивки подправили, что сейчас под горячим подключением контроллер бдит.
А вот без подключения уже ничего не сделаешь — утекать будет, вопрос только скорости
Mad__Max
Какие же драйвера «холодные» если каждый раз грузятся?
Или речь про архив драйверов, которые винда хранит «про запас»?
Прошивку не обновлял, на тот момент новее чем та, что была залита из магазина на сайте не было.
Firz
habr.com/en/post/379345
Mad__Max
Какие-то точно делают. Раньше думал что вообще все, но это оказалось либо не так, либо есть проблемы с алогритмами такого фонового обслуживания. Но по крайней мере у SSD с питанием вероятность потерять данные во много раз ниже, чем на выключенном. В отличии от HDD, где ситуация обратная.
Читать весь диск полностью в фоне не обязательно, SSD хранит кучу разной метаинформации по каждому блоку флэша, как минимум — сколько раз он уже был перезаписан, что нужно для работы алгоритмов «выравнивания износа», а так же разные служебные метки по нему, контрольные суммы (точнее избыточные коды для коррекции ошибок чтения) и т.д.
Достаточно добавить еще одну метку — временную, показывающую когда последний раз данный блок стирался/перезаписывался. И потом проверять на читаемость только самые старые блоки — в которые дольше всего не было записи. А при плохом считывании(что определяется по уровню ошибок чтения, до применения кодов коррекции ошибок) — перезаписывать данные в другое место или туда же обратно — это уже как алгоритм выравнивания износа решит.