Уже давно на многих своих серверах я перешел на ssd диски, в одно время пробовал мейнстрим провайдера впс на ssd дисках digitalocean и был сказать честно разочарован производительностью дисковой подсистемы, конечно она была лучше чем hdd, но намного хуже чем на моих же впсках, которые я продавал своим клиентам.
Время от времени вижу кто то кидает громкие слова иди на того провайдера потому что у него ssd и супербыстрые диски. И я решил проверить, а правда ли они быстрые? А нет ли лимитов? А что происходит при высокой нагрузке на диски?
Я выбрал наиболее распространенных провайдеров встречающихся в моей практике flops.ru, vultr.com, vscale.io, digitalocean.com, simplecloud.ru, vdsina.ru.
Результаты тестирования вас сильно удивят, проследуем же подкат, ну или если вам лень читать можно сразу посмотреть сравнительную таблицу ssdtest.stufently.com, в конце поста так же голосовалка, если не сложно проголосуйте для статистики.
Сперва я хотел сделать много разных тестов, чтение, запись, последовательные, рандом, mysql, но потом решил ограничиться обычным dd на чтение/запись, большими и маленькими блоками. Тесты оказались очень показательными и легко выявили аутсайдеров и лидеров.
Все тесты проводились на файле размером 37 гигов, чтобы исключить влияние кешей, размер был получен опытным путем.Использовалась операционная система ubuntu x64 14.04
flops.ru
Они дают бонус 500 рублей при верификации своего телефона. Это первый провайдер, которого я тестировал и он поверг меня в ужас. Лимит на запись 40 мегабайт в секунду, лимит на чтение 70 мегабайт в секунду, при не длительной активной работе с диском производительность срезают до 150 килобайт в секунду Карл, я бы понял такое поведение на hdd хостинге, но ведь флопс пишет:
Все серверы FLOPS обслуживаются системой хранения данных на основе SSD накопителей. Мы гарантируем — у нас ваши сайты будут работать быстрее, чем где-то еще.
А на деле это у него самые медленные диски и можно с утра просто проснуться с сайтами в дауне, потому что скорость дисков вам уменьшили до 150 килобайт в секунду.
Тестировался тариф за 1000 рублей в месяц с 2GB memory, 2 CPU CORE и 64GB ssd disk.
vultr.com
Дают 50 долларов при регистрации с их промо страницы www.vultr.com/freetrial, бонус падает на счет после подтверждения кредитной карты, я свою подтвердить не смог и просто закинул туда денег с пейпала для теста.
Вультр в последовательной записи большими блоками показал 336 MB/s, а на чтение 275 MB/s, что конечно странно и должно было быть наоборот. Запись маленькими блоками 13.6 MB/s и чтение маленькими блоками 269 MB/s
Тестировался тариф за за $20 в месяц с 2GB memory, 2 CPU CORE и 45GB ssd disk.
vscale.io
Сказать честно вскале попахивает украденным логотипом вультура, по крайней мере в браузере я постоянно их путаю, рекомендовал бы им сменить его.
Вскале на диск пишет очень нестабильно скорость скачет от 50 до 500 мегабайт в секунду, средняя 297 MB/s. На чтение большими блоками 1.2 GB/s это лидер моего теста. Маленькими блоками пишет 16.8 MB/s, а читает 728 MB/s.
Вообще вскале это проект компании selectel.ru, я пользовался услугами этой компании и сервис облачных впс у них тогда хромал очень сильно и мне в этой компании нравился только amarao с его убер постами на хабре. Они дают 400 рублей бонуса при регистрации через рефку, после пополнения счета на 100 рублей.
Тестировался тариф за 800 рублей в месяц с 2GB memory, 2 CPU CORE и 40GB ssd disk.
digitalocean.com
Ну это можно сказать первооткрыватель ssd впсок по низкой цене, в свое время тестирование digital ocean меня сильно разочаровало, скорость ssd была совсем не айс видимо из за плотного размещения клиентов. Пишет на диск большими блоками очень стабильно без скачков 232 MB/s, читает 348 MB/s. С маленькими блоками конечно все похуже на запись 5.4 MB/s и на чтение 327 MB/s.
При регистрации по рефке они дают 10 долларов на аккаунт. Тестировался тариф за $20 c 2GB memory, 2 CPU CORE и 40GB ssd disk.
simplecloud.ru
Последовательная запись большими блоками сильно колеблется 60-120 мегабайт в секунду в среднем 84.0 MB/s, чтение 282 MB/s. При недлительной нагрузке симлклауд срезает скорость дисков то 1.5 мегабайта в секунду. Что переводит его в аутсайдеры как и flops.ru.
Тестировался тариф за 1000 рублей в месяц с 4GB memory, 2 CPU CORE и 80GB ssd disk, такой высокий тариф был выбран, потому что на тарифах ниже только одно ядро CPU.
vdsina.ru
Вдсина аффилирована с известным макхостом, который когда то поругался с нашим наверно первым мощным русским клаудхостингом(забыл как их звать) и потерял кучу данных клиентов. С другой стороны я всегда рассматриваю любого провайдера как временного и готов в течении часа или двух переехать на любого другого. Пользоваться я ими начал больше года назад по одной единственной причине, у них была лучшая производительность дисков и CPU из всех провайдеров. И я крутил у них несколько галера кластеров mysql на толстых впсках и производительность была просто шикарная. Именно тогда я проводил тесты кластера галеры у разных провайдеров ссд, но к сожалению не хватило сил написать статью и данные были утеряны, а спустя год наверно они уже и не актуальны.
Вдсина вроде бы дает бонус 150 рублей при регистрации с рефки.
Запись большими блоками стабильно выдает 501 MB/s, чтение 1.1 GB/s. Запись мелкими блоками 20.9 MB/s, чтение 768 MB/s.
Тестировался тариф за 799 рублей в месяц с 2GB memory, 2 CPU CORE и 40GB ssd disk.
Выводы
- Не пользоваться simplecloud.ru и flops.ru, потому что при небольшом оверлоаде дисков они жестко лимитируют скорость дисков.
- digitalocean.com и vultr.com являются середничками по производительности ssd дисков.
- Если хотите выжать максимум производительности из дисков используйте vdsina.ru и vscale.io
Для наглядности я свел все данные в таблицу
ssdtest.stufently.com
Все вопросы и пожелания можно отправить мне на почту pumainthailand.com@gmail.com или в комментариях к статье.
Из планов на будущее:
- Будет время расширю количество тестов.
- Проведу тесты других хостеров.
- Потестировать производительность CPU у vps.
- Потестировать ssd на 200-400 GB.
- Было бы интересно пообщаться с хостерами о том как у них устроена инфраструктура и насколько она облачная.
Только зарегистрированные пользователи могут участвовать в опросе. Войдите, пожалуйста.
Комментарии (55)
jonywtf
28.03.2016 13:56+1Спасибо, интересный обзор… не ожидал что flops медленнее всех
flops.ru
про это не совсем правда… зарегался, верифицировал мобилу, оплатил сам, запустил сервачок, увидел эту "акцию", попросил эти 500р. Имели наглость написать такое:
Они дают бонус 500 рублей при верификации своего телефона.пришлите скан или фотографию удостоверяющего личность документа, для рассмотрения нами возможности активации пробного периода вашего аккаунта
opium
28.03.2016 14:01Везде кидал денег и тестил без бонусов, так что возможно и требуют, про бонусы писал для тех кто захочет потестировать бесплатно.
ilukyanov
28.03.2016 14:12-2У нас есть определенный набор критериев, которые ограничивают получение триала. Ваш аккаунт некоторым из этих критериев соответствовал, и мы попросили вас представиться.
Происходит это тогда, когда мы сомневаемся, что человек получает триал в первый раз или в том, что у него благие намерения. Не стал бы называть это наглостью — таким образом мы защищаемся от спамеров/кардеров/геймеров/анонимов и других товарищей, которые нам не товарищи.
В вашем случае триал был автоматически ограничен одним из фильтров. Мы активировали его вручную, и сейчас вы можете приступить к использованию.
ilukyanov
28.03.2016 13:56+2А с какой целью вы тестируете линейные операции, они для вас имеют большее значение, чем iops'ы и latency?
И еще момент — как тестируете, dd if=/dev/zero вестимо?opium
28.03.2016 14:03иопсы и латенси достаточно велики для ссд, тесты как и год назад показали лидеров.
год назад тестил галерой в большом кластере, практика показала что и линейные тесты все показывают довольно наглядко и хорошо.
да обычный дд, с блоками 2мб и 2к.ilukyanov
28.03.2016 14:18А откуда брали входные данные для dd, if=/dev/zero или как то иначе? Это важно.
opium
28.03.2016 14:20конечно с зиро взял чтобы было быстрее.
ilukyanov
28.03.2016 14:29+4Никогда такого не было и вот опять :)
Тестирование с if=/dev/zero не несет особого смысла — у половины хостеров система хранения данных отдетектит эти нули и не будет физически их записывать на накопители. У кого детект нулей работает — отлично видно по тестам. Детект нулей это хорошо, но измеренная таким образом скорость не имеет отношения к реальной производительности СХД. Тестировать нужно данными, а не нулями.opium
28.03.2016 14:32Этот тест коррелирует с тестом mysql так что увы. Если бы он не коррелировал то я бы не выложил результаты.
ilukyanov
28.03.2016 14:51+4Ну а количество суицидов в США например прямо кореллирует с затратами на науку: http://i.imgur.com/k1cWMH0.png
Тестирование нулями бессмысленно, оно имеет систематическую ошибку в виде неучтенной оптимизации нулей. Как говорит нам логика, из ложной предпосылки может следовать как верное, так и ложное следствие. Поэтому то что где-то там нарисовалась корелляция ваших тестов с производительностью mysql — абсолютно неважно, метод тестирования и результаты от этого верными не становится.opium
28.03.2016 14:53-9не мешайте яблоки с грушами
предложите любое другое быстрое решение.
KorP
28.03.2016 15:15+4Метод, упомянутого вами amarao, предложенный ещё в 2012-м году и не потерявший своей актуальности https://habrahabr.ru/post/154235/
opium
28.03.2016 15:26очень у него тесты не подходят для того чтобы выжать максимум из небольшой впс.
суть вопроса как получить большое количество данных которые можно записать на диск, фио тесты тоже есть, но не уверен что люди готовы вникать и как то анализировать под свои задачи их результаты, так же как и результаты галера кластера.
То есть статья показала достаточно реальные результаты. Если вы проведете тесты описаные у того же амарао вы получите примерно тот же самый топ.KorP
28.03.2016 15:28+1Ну тогда с тем же успехом можно файлик с диска на диск копировать, для многих это ещё более простой и наглядный метод оценки...
opium
28.03.2016 15:31-1Там нет второго диска.
Я же вам сказал тесты коррелируют с тестами галеры, фио тесты тоже были, но я их не анализировал так как они для меня не показательны ни в чем.
То есть я много и часто пишу и читаю большие и мелкие файлы.
Я очень много работаю с тяжелыми таблицами в mysql
То есть если вы хотите максимум производительности на любой дисковой активности то вам в вскале и вдсину, при любой высокой дисковой активности на симплклауде и флопсе и вы получите дикие даунтаймы, ну и средние результаты вы получите в дигитале и вультуре, это покажут любые тесты.
хоть фио, хоть галера кластер.
silention
28.03.2016 14:00+1с DO тоже недавно был печальный опыт, iowait был > 50%
потом они видимо обиделись и установили лимиты тк появился еще и достаточно большой steal.
После чего перенес клиента к себе на сервер с > 10 VPS на обычных сата.
Теперь никаких проблем :-)
victor1234
28.03.2016 14:28+1А что с AWS?
opium
28.03.2016 14:34+1У aws все сложно, производительность дисков там зависит от размера диска и размера инстанса плюс у амазона есть гарантированные иопсы за деньги. Ну и в целом амазон находится в самой дорогой категории из облаков.
rockin
28.03.2016 15:01+1Честно говоря, удивлён крайне, не увидев тут OVH
Потыкал по приведённым хостинг-провайдерам… да там цены-то какие высокие, вы что?
Вы платите 5 евро за 0.5рам? За лимитированный траф?
А консоль у вас, случайно, не тормозит? Видел я такие впс, запускаешь apt-get update и наблюдаешь тормоза…
Вот откуда надо тесты подобные начинать
www.ovh.ie/vps/vps-ssd.xmlopium
28.03.2016 15:09+1Это же не оплаченный обзор, ничего удивительного что тут некоторых нет.
У овх к сожалению есть проблемы дикие с суппортом и работой в североамериканских датацентрах, ну и даже немного в европейских. Так что сейчас нахожусь в процессе миграции с него, а большу. часть проектов уже смигрировали.
Ничего не высокие 5 баксов за впску это стандартная цена и все ее взяли с digitalocean.
Консоль летает всегда.
Смотря на их тарифы очевидно что они как то хитрят с памятью.rockin
28.03.2016 16:39Да нет, у меня нет претензий.
Просто каким-то странным обзор выглядит без такого монстра. OVH — это не "некоторый".
У меня там дедик (за 70), впс нет. Но знакомый недавно по моему совету взял впс — полёт отличный просто.
Суппорт не пробовал, честно говоря. Дедик там арендован примерно полгода, претензий не было, следовательно, не было и повода обращаться.
До OVH арендовал у hetzner и webtropia (бюджетный проект от myloc.de) — всё это монстры, но их тоже в обзоре нет (есть только DO, а остальные все уровня "неуловимый джо"). Там вот с поддержкой наобщался по самое не хочу.
Не знаю, кто там что "хитрит с памятью", и у хетцнера, и у вебтропии абсолютно такие же тарифы. По 4 евро, но не 0.5 рам за 5.
https://www.webtropia.com/de/vserver/vergleich.html
http://ru.hetzner.com/hosting/produkte_vserver/cx10
Причём, при этом каналы не хиленькие "сто мегабит на всю кучку впс поделим", а выше ста мегабит всегда.
Я использовал это всё хозяйство под стриминг, поэтому и память, и проц были забиты на всю катушку. "Хитрость" было бы видно мгновенно. А хитрят там больше с трафиком и полосой пропускания. Это да, не отнять.rockin
28.03.2016 16:46Извините, редактировать нет возможности, но надо сразу добавить про вебтропию, чтобы не искушался никто.
Впс у них на нормальном железе, а дедики — на старье уровня "я зависну пока, а вы терзайте саппорт"
Минусы хетцнера и так известны всем — десктопные компоненты они активно используют, но у меня лично там проблемы были не с железом, а с работой сети, причём, они гарантируют скорость в пределах датацентра (по их словам), наружу они вообще ничего не гарантируют.
Mithgol
28.03.2016 15:02+1Пометил «использую другого хостера», и вот в комментариях подробности: этот хостер — БериVDS, неплохо подходящий для заказа виртуальных серверов с малым объёмом памяти (? гига), но зато с десятком гигов SSD за небольшую оплату.
Node + Express на них крутятся, не особенно тормозя.
Пинг сибирский.opium
28.03.2016 15:11Что то у них тарифы с опенвз не доступны за 58 и 82 рубля с 256 мегабайтами памяти.
zapimir
28.03.2016 17:44А у них скорость по Сибири вообще нормальная? А то взял у них VPS, ну для распределения своего сервиса по России. И когда качаются обновления туда из Киева то скорость аплоада вообще 100 КБ/сек, при том что по спидтесту, скорость в Томск порядка 30 МБит показывает.
Потому в раздумьях, стоит ли там оставаться.Mithgol
28.03.2016 18:43Скорость в направлении «на сервер» там действительно маловата, я замечал это не раз.
Mrprof
28.03.2016 15:20+1У flops.ru скорость дисков зависит от оперативки, ответ саппорта:
«Величина полосы и лимит IOPS растут как корень от объема оперативной памяти сервера.»
На 512 оперативки копирование дает такое:
dd if=/dev/zero of=tempfile bs=1M count=1024;
1073741824 bytes (1.1 GB) copied, 52.6129 s, 20.4 MB/sinkvizitor68sl
28.03.2016 16:491073741824 bytes (1.1 GB) copied, 22.4912 s, 47.7 MB/s
1G RAM
1073741824 bytes (1.1 GB) copied, 25.3845 s, 42.3 MB/s
2G RAM
Ну черт его знает про корень от объёма =)
Впрочем, flops берет не скоростью дисков (она действительно от тарифа зависит), а ужасающей для такого рода услуг стабильностью виртуалок. А в последние года полтора — и сети.
teraflops
28.03.2016 17:00+1Мы сейчас переезжаем в новый Tire3 Дата-центр поэтому наша стабильность станет просто адски ужасающей;)))
inkvizitor68sl
28.03.2016 17:02+1root@fvds2:~# uptime
17:02:20 up 372 days, 21:01, 1 user, load average: 0.18, 0.15, 0.18
Вообще и так хватает =) Надо бы ядро обновить, да.
ilukyanov
28.03.2016 16:54-1Сейчас действительно достаточно сильно шейпим диск. В течение 1-2 месяцев выкатим в паблик новую систему хранения данных, где этих ограничений не будет.
ClearAirTurbulence
28.03.2016 15:20Интересный тест, но очень не хватает сводной таблицы результатов, желательно отсортированной. Провайдер услуг \ цена \ бонус \ скорость чтения \ скорость записи \ ограничения, как-то так.
вскале попахивает украденным логотипом вультура
Честно, не очень заметно ) А уж если читать их — vultr (читается «валчр», по аналогии со словом vulture, на которое намекает и форма буквы V), и vscale (вискейл) и рядом не стояли. Но это все, естественно, мелочи.opium
28.03.2016 15:21Так есть таблица сводная, ссылка вначале и в конце.
имел ввиду favicon у них очень похожий.
Alukardd
28.03.2016 15:31+4Хотелось бы увидеть команды которыми тестировали с теле статьи.
А так же пояснения того как вы уткнулись в "Overload limit".
Почему тетсирование проводилось нулями, когда их может squash'ить куча слоёв по дороге?
Запись шла с O_DIRECT или где? Сколько раз повторялся каждый тест?opium
28.03.2016 15:35-3обычныцй дд с зиро с одриектом блоками по 2мб и 2к
делаешь тест на запись чтение по одному разу на 37 гиговый файл и уже следующий тест оверлоад лимит показывает.
практика показала что скваша нет, как вот проверить есть скваш или нет?
2-3 раза, значения во всех разах были в пределах погрешности и взял средние результаты.Alukardd
28.03.2016 15:54+1Что происходит с записью данных в реальные диски сильно зависит от:
- наличия thin pool'а и подобных технологий;
- наличия дедупликации;
- наличия кэша на уровне хранилища.
O_DIRECT тоже не через всё проходит, я как минимум знаю, что SCST nv_cache ни как не следуюет DIRECT флагу и всегда кэширует данные.
Далее не понятно зачем Вам потребовалось больше одного ядра? Ведь dd, как я понимаю, Вы запускаете в один поток, да ещё и читаете с /dev/zero, упираться в проц тут абсолютно негде.
Какая такая практика Вам показала что ни какой из слоёв не занимается укрупнением блоков записи по дороге? И как проверялось отсутствие sparse'а нулей?
Проводить тесты надо нормально, а не выполнять dd if=/dev/zero.opium
28.03.2016 16:04-11) сказать честно я тут столкнулся с thin pool и производительность у него довольно удручающая и судя по всему у этих провайдеров его нет.
2) не могу точно сказать как отловить дедупликацию, но в тестировании галера кластера дедупликация невозможна, а результаты там примерно теже, сказать честно сейчас нет возможности собрать кластеры на каждом провайдере и проверсти, тесты, это требует чертовски много времени.
3) ну 37 гигов как раз был выбран, чтобы его нивелировать, какие то заоблачных значений и не получилось в тестах из за этого.
Два ядра на всякий случай, что исключить упирание в проц.
Никакой информации хостеры о внутреннем устройстве не выкладывают, так что выводовы об укрупнении можно сделать только глядя на тесты записи мелкими блоками, а они показывают, что укрупнения нет, есть другие способы?
Как точно проверить наличие спарсе? Просто если оно есть то тесты должны были бы показать такие невероятно дикие результаты, а тут максимум 1.2 гига в секунду, в целом это производительность двух SSD на SATA3.
Готов выслушать любые предложения по готовому тесту с адекватным выводом по его результатом.Alukardd
28.03.2016 16:18+2И вы реально считаете что придя на работающий хостинг, где куча других пользователей, и создав виртуалку, реально получить производительность ДВУХ SSD дисков?! Я даже не знаю как тут продолжать разговор.
Все мои замечания сводятся к тому, что в тестах надо использовать random-read/write. Случайными данными, а не последовательное dd нулями. Так же показать IOPS'ов всё же важен, хотя их премерное значение можно получить из Ваших результатов. Да и latency хочется знать. В общем все эти параметры не просто так существуют.
fio Вам в руки.
Ну и про корреляцию, Вам уже выше всё ответили.opium
28.03.2016 16:25-2Я же написал выше, что тест показал у кого больше, а у кого меньше дисковой производительности, тот же фио покажет больше у вскале чем у симлклауда.
Alukardd
28.03.2016 16:26+2Дело не в том у ког больше, а в реальном сравнении на сколько больше. Данная статья показывает на сколько хостер хорошо работает с потоком нулей.
serf
28.03.2016 17:45+3Если решите расширить список, еще пара-тройка довольно известных хостеров с почасовой оплатой:
https://www.linode.com/pricing
https://www.atlantic.net/cloud-hosting/pricing/
https://www.lunanode.com/pricing
Правда в подобных тестах не вижу слишком большого смысла, потому что в разный промежуток времени на нодах хостеров результаты могут разниться.
wizardsd
28.03.2016 18:05+1Пользуюсь Timeweb. Особых проблем не замечал, хотя и восторга особого не вызвает.
silention
28.03.2016 20:22Тех поддержка у них ужас ужас — похоже что в 18-19 часов админы уходят домой и ответа не дождаться, ресайз ВМ? — 3-и часа лежит ВМ тех поддержка откровенно динамит в итоге ВМ запускается с прежним размером диска.
И тп — у них даже функции из панели не всегда работают и приходится ждать несколько часов чтобы проблема была решена — сайты в это время лежат + лимит скорости сети в 10 мбит
я все что можно от туда увез.
bestxp
Тогда еще добавить бы серию тарифов ihor.ru в ваше тестирование)
opium
Они до этого мельками у меня пару раз, тоже не рекомендую их, не думаю что сильно лучше стали сейчас.
bestxp
в каком плане и по каким причинам не рекомендуете? я как активный пользователь их услуг хотел бы услышать причины, так как вроде никаких нареканий уже за год с лишним к ним не было, хотелось бы услышать ваше ИМХО или других
opium
все по поводу той же производительности ссд дисков.
opium
У них нет почасовой оплаты, если у вас есть там впска с тарифом от VDS SSD Argentum дайте доступ я приложу результаты тестирования.
NoobLoser
Может лучше опишите методику тестирования, чтоб желающие могли повторить у себя? Я в свою очередь могу протестировать hetzner (тариф CX10) и выложить результат.