Привет Хабр! Меня зовут Андрей! Я работаю архитектором ИТ инфраструктуры в компании Балтийский Лизинг.
Я как потребитель уважаю только честный маркетинг, честные сравнения, честное тестирование различных систем. Зачастую, когда я читаю различные пресс-релизы от различных вендоров то понимаю, что надо читать сноски-звездочки и опираться на независимые источники. Наверное, этим грешат все и это печально. В сравнении гипервизоров отчет от Microsoft покажет, что Hyper-V лучше всех, Vmware скажет, что лучшее решение для виртуализации – ESXi так далее.

Сугубо мое мнение — надо опираться на реально независимые отчеты, такие как Magic Quadrant, это серия отчетов об исследованиях рынка, опубликованных ИТ‑консалтинговой фирмой Gartner, которые основаны на собственных методах анализа качественных данных для демонстрации тенденций рынка, таких как направление, зрелость и участники.

В свете происходящих событий многие озадачились такими вопросами как импортозамещением в сфере ИТ. Ой, скажу сразу что, это не просто, не быстро и не дешево. Пришлось озадачится подобным вопросом, а именно поиском возможной альтернативы Vmware. Для организации, плотно использующей различные решения Vmware такая задача может существенно сказаться на темпах развития всей ИТ инфраструктуры, тем самым создать риски поступательного развития бизнеса в целом, так как смена ключевого элемента ИТ инфраструктуры, это равносильно смене ERP или CRM системе, что увы не всегда проходит гладко.

В свете этого, я начал рассматривать отечественные альтернативы Vmware, а именно систем виртуализации, и на глаза попалось решение, позиционируемое как альтернатива Vmware. Если в поиске Яндекс забить поисковый запрос, то на первой странице будет довольно интересный материал о продукте vStack (первая маленькая буква v и вторая заглавная как под копирку напоминаем название продуктов VMware, надеюсь это только совпадения а не попытка быть казаться похожим на лидера рынка).

Прямо с ходу в первый абзац безапелляционно говорит: «БЕЗ АЛЬТЕРНАТИВ: ПОЧЕМУ РОССИЙСКАЯ ПЛАТФОРМА VSTACK МОЖЕТ ЗАМЕНИТЬ VMWARE
В 2021 году платформа vStack — российский аналог VMware, обошла лидера мирового рынка по показателю Multi‑Core Score у Geekbench.»

Эту фразу можно считать вызовом, тем боле что автор статьи — сам vStack. Всем, конечно, хочется более детальной информации, как минимум по самой методике тестирования, потому как многие пользователи Vmware уже обдумывают…. хм, надо брать а сама Vmware начала нервно купить в сторонке. В самом тексте статьи находим небольшую конкретику:
«В июне 2022 года бесплатный кроссплатформенный тест производительности Geekbench показал более высокую производительность vStack по сравнению с VMware. Показатель Multi‑Core Score у vStack достиг 6640, в то время как у VMware он находится на уровне 4196.» Эти результаты так‑же можно найти на странице самого продукта vStack.

В интервью CNEWS было озвучено тоже самое: «В 2022 году тест Geekbench показал Multi‑Core Score у vStack 6640 при 4196 у VMware на полностью идентичном оборудовании.»

Полагаю любой посмотревший указанный материал и ознакомившись с указанными метриками сделает для себя однозначный вывод — на одинаковом оборудовании, под управлением одинаковых операционных систем, на одинаковых тестах решение vStack обеспечивает почти 50% преимущество показателю Multi‑Core Score в тесте Geekbench, что сулит немалую экономию при переходе на решение vStack.

Наверное, маркетинг подумал я и решил перепроверить, в противном случае надо переходить на vStack уже завтра. К участью в статье КОМПЬЮТЕРРЫ есть ссылки на результаты, их так‑же можно найти поиском на сайте geekbench.com.

По результатам первого тестирования мы видим заявленные 6640 “попугаев”, 
Тестирование Geekbench 5.4.5
Operating System Microsoft Windows Server 2022 Standard (64-bit)
Model vStack SmartDC vStack bhyve
Name Intel Xeon E5-2630 v4
Topology 32 Processors, 32 Cores

Запоминает, Win 2022 St, 32 виртуальных сокета по 1 vCPU, процессор E5-2630 v4

А что‑же с результатами Vmware с жалкими 4196 очками? Так вот же они.

И что же мы видим, идентичные процессоры, идентичные операционные системы, идентичная топология? НЕТ, НЕТ и НЕТ! Разные процессоры, разная топология, 4 ядра вместо 32, серьезно? Стойте, стойте, дайте еще раз процитирую мою любимую фразу "на полностью идентичном оборудовании".

Ну серьезно, неужели только я обратил на это внимание, неужели информация уже почти год размещенная на официальном сайте vStack, информация, размещенная на таких порталах как CNEWS, КОМПЬЮТЕРРА не проверена? Как может быть, что представленные тесты не показательны и не противоречат собственному описанию? Лично мне в это мало верится.

Мне это напоминает рекламный буклет, который обещает при покупке нового автомобиля расход топлива не более 10 литров, а по факту он не будет ниже 15, мотор в машине который по паспорту мощностью 150л.с. а на деле получается 100.

Зачем так поступать? Это вопрос риторический. Но я пошел дальше и развернул максимально сопоставимый тестовый стенд для проведения аналогичного тестирования. Стенд отличается процессором, и то поколение одно Е5–26**, у него чуть больше базовая тактовая частота. Да, можно сказать, что у 2680 больше ядер особенно при тестировании на 2х процессорной системе. Но в обоих топологиях тестирования используется 32vCPU. Все ядра не задействуются. В результате получено 13 578 баллов! Это вдвое выше результата vStack на сравнимой топологии 32vCPU и максимально похожими процессорами. Хотя по логике vStack — Vmware может разместить и такой результат с формулировкой, «vStack повержен».

Я не против любых альтернативных решений, я не против импортозамещения, но меня жутко раздражают некорректные, а иногда и ложные тезисы о конкурентных преимуществах. Ведь какое будет разочарование у конечного пользователя и/или потенциального клиента если вскроется несоответствие заявленным параметрам и характеристикам.

Еще немного, цитата с CNEWS: «Нам важны очные встречи с потенциальными потребителями на нейтральных площадках в первую очередь потому, что общение в этих условиях происходит в открытом формате, почти без галстуков. Такое взаимодействие является взаимовыгодным: потенциальный потребитель имеет возможность получить уточнения в отношении неявных моментов продукта или возможностей его эксплуатации, а мы в свою очередь отметим для себя те области информационного или маркетингового обеспечения продукта, которые обладают недостаточной содержательной нагрузкой, в силу чего не сразу находят понимание у потребителя», — сказал Евгений Гаврилов, руководитель проекта vStack.

Я спросил о несоответствие заявленных показаний и результатов тестирования руководителя проекта vStack. Резюме было такое — наверное это маркетинг что‑то напутал. Странно, конечно, я такое был готов услышать от любого, но не от руководителя проекта vStack.

Конечно, может я преувеличиваю, буду рад если ошибаюсь и мне укажут на мою ошибку, но опубликованные разнородные результаты приведенного тестирования самим vStak, и сравнения себя с убийцей конкурентом Vmware должны давать однозначные выводы. Те результаты, которые я вижу, не соответствует заявленному, гораздо хуже если сотрудники vStack знали об этом несоответствии, которое легко проверяется и не пресекли указанные манипуляции с данными.

Несомненно, vStack имеет право на существование, я это только приветствую, но хотел бы чтобы любой потенциальный покупатель|заказчик любого решения (особенно по линии импортозамещения) самостоятельно сравнивал, тестировал и ни в кой мере безусловно не доверял «маркетинговым материалам», т.к. от Ваших изысканий зависит поступательное развитие и масштабирование бизнеса вашей организации.

Благополучия Вашей ИТ инфраструктуре.

P. S. Любители минусовать, а также а так‑же @itglobalcom добро пожаловать в комментарии.

P.P.S. Ставлю символический 1$ что конкретики от вендора по указанным фактам не будет.

Комментарии (38)


  1. ivankudryavtsev
    00.00.0000 00:00
    +11

    Так это же известный факт: первый в мире, второй по Сибири. Щеконадувательство - основной инструмент продаж, не только в РФ. А Вы молодец. К сожалению, в современном online-мире инструмент репутации почти разрушен: битву за клиентов выигрывают не лучшие по качеству, а самые наглые, хитрожопые и беспринципные.


    1. kichrot
      00.00.0000 00:00
      -1

      ... Щеконадувательство - основной инструмент продаж, не только в РФ. ... битву за клиентов выигрывают не лучшие по качеству, а самые наглые, хитрожопые и беспринципные. ...

      Так всегда и везде было, так везде и во всем есть, так всегда и везде будет.

      Не обманывать глупо. Но еще более глупо самообманываться, что возможен мир без обмана.

      Так, что все нормально, по иному быть не может. :)


      1. ivankudryavtsev
        00.00.0000 00:00
        +4

        Не обманывать глупо. 

        Феноменально. В конце концов, каждый живет как хочет. Я вот считаю, что не обманывать - это вполне себе нормально.


        1. dizatorr
          00.00.0000 00:00
          -3

          Не подмажешь - не поедешь. Не слукавишь - не продашь. Обман - одна из основ правильного маркетинга. К тому же, он бывает разный, не всегда это открытая и наглая ложь, иногда можно просто недосказать.


        1. venanen
          00.00.0000 00:00

          Так речь то не про вас с нами, людей с наличием моральных границ и уважения к окружающим. Речь о маркетологах.
          Скажите честно, что ваш двигатель ест как полковая лошадь - и никто не оценит честности, и купят у соседней компании, которая имеет меньшую социально-нравственную ответственность и заявляет, что ее двигатель питается энергией свободного эфира.


      1. Anton_Olegovich
        00.00.0000 00:00
        +6

        Не обманывать глупо.

        Ловите сейлз-менеджера! (с) :-)


  1. net_racoon
    00.00.0000 00:00

    А разве сейчас это имеет значение? Они сейчас все что угодно писать могут, альтернатив то нет.


    1. ivankudryavtsev
      00.00.0000 00:00
      +3

      Ой, да ладно. Если трактовать слово "Альтернатива" широко (в бизнес-смысле, что лопата - это альтернатива экскаватору), то это целая куча продуктов, начиная от KVM, oVirt, Cloudstack, OpenStack и так далее.


      1. 0000168 Автор
        00.00.0000 00:00
        +1

        Тогда наша LADA Vesta Sport 145л.с. однозначно альтернатива какой-то нищебродской Audi A7 3.0 340 л.с., а дайте еще вспомним пропиаренную альтернативу нашего планшета, который показывали ВВП и ряд других убийц айфонов производства РФ?
        Ну не получается сделать хорошо и качественно, ну сделайте цену в 2-3 раза ниже зарубежных аналогов, что мешает?


        1. net_racoon
          00.00.0000 00:00

          Дык зачем, если и так купят?


        1. ivankudryavtsev
          00.00.0000 00:00
          +2

          Именно, что альтернатива, но не полноценная замена, само собой. Просто в нашем сознании (видимо особенность человеческого мышления) сложилось так, что мы приравниваем "альтернатива" к "аналог/равноценная замена".


        1. DMGarikk
          00.00.0000 00:00

          Тогда наша LADA Vesta Sport 145л.с. однозначно альтернатива какой-то нищебродской Audi A7 3.0 340 л.с.,

          ну тут всетаки разные классы авто, это хотябы с гольфом gti сравнивать надо (не сильно за этой сферой тюнингованных вариаций таких авто слежу, просто первое что в голову пришло в этом формфакторе)


      1. net_racoon
        00.00.0000 00:00

        В широком смысле трактовать то можно, но потом это еще эксплуатировать. В широком смысле можно сказать что Qtech альтернатива Cisco, но вот когда берешь это в руке, получается та самая лопата только сделанная из непонятно чего и гнутая. И она вроде копает, но мы то знаем что где-то там есть экскаватор...


  1. inkvizitor68sl
    00.00.0000 00:00
    +1

    мотор в машине который по паспорту мощностью 150л.с. а на деле получается 100.

    Вы точно водите автомобиль) ? Сотня - это ещё хорошо, на самом деле ездить будете на 40-60 л.с. -)


    1. 0000168 Автор
      00.00.0000 00:00

      #Сотня - это ещё хорошо, а лучше две!
      Владислав, согласен в большинстве случаев да, в пробке мне не нужна эта мощность, но все меняется при выезде на трассу, обгоне или старта со светофора. И заплатил то я за 150 лошадок, раз пошло такое сравнение. Уверен что на Вашем автомобиле Вы однозначно не захотели-бы бесплатно урезать своих резвых лошадок, т.е. понизить мощность.
      Тут я тоже считаю, ну зачем из конечных потребителей делать дураков и раздавать розовые очки? Я хочу чтобы наш, отечественный продукт был крутым и востребованным не только в РФ, но хочу чтобы он был крутым на деле, а не на словах.

      Off topic: напомнило это, посмотрите все, это весело, если бы ни было так грустно.


      1. inkvizitor68sl
        00.00.0000 00:00
        -1

        Я к тому, что 90% автовладельцев никогда не раскрутят двигатель до купленных 150л.с. -)


        1. mblp
          00.00.0000 00:00

          просто вы плохо представляете как устроен автомобиль и в какие моменты достигается максимальная мощность, те самые 150 лошадей. Спойлер: это возможно и на первой передаче, и да, большинство автовладельцев её достигали.


          1. inkvizitor68sl
            00.00.0000 00:00

            Возможно, я плохо представляю, как устроен автомобиль, зато знаю, где лежат графики мощности двигателей -)

            Много вы знаете людей, которые нынче пользуются кикдауном и крутят двигатели до 5к ? VAG-овский dsg вообще обороты на турбомоторах держит в диапазоне 1.5-2k, постоянно сваливая его в турбояму, а sport там никто не включает (не удивлюсь, если многие не знают как).


            1. venanen
              00.00.0000 00:00

              Вообще да, забавно. Знакомый бегает, ищет двигатель помощнее, я говорит заколебался на овоще ездить. Говорю покажи как - на 4 передаче газ в пол и никуда не едет, сказал, мол передачу сбрось, он сбросил и теперь доволен как слон, выжимает все бешенные 104 силы с бедной шведской старушки.
              Впрочем, я - такой человек. И своими 150 силами пользуюсь регулярно - например, при выезде на автостраду газ в пол, кикдаун и полетели набирать скорость потока. Или на обгоне, где 3 или 2 полосы в сумме.


              1. inkvizitor68sl
                00.00.0000 00:00

                104 силы с бедной шведской старушки.

                О, привет им от моих корейских 102 со снятым ограничителем -) Правда, когда я теперь ещё до них доберусь, ыех.

                Впрочем, я - такой человек.

                Ну, будем честны - далековаты вы от среднестастических водителей.
                Я куда больше вижу тех, кто выпирается на встречку и не может обогнать за разумное время спокойно себе бредущую фуру. Мне на встречке чот трындец страшно, я там обычно секунд 5 нахожусь, не больше -) А эти секунд по 30-40 катятся мимо фуры.


                1. venanen
                  00.00.0000 00:00

                  Ну тут еще дело в коробке. Если автомат, но инстинктивное нажатие на газ он все сделает сам и поедет (ну или не сделает, привет японскому автомату), а на механике надо уметь сбрасывать передачу, поэтому тупят в основном на механике, кмк.


                  1. inkvizitor68sl
                    00.00.0000 00:00

                    привет японскому автомату

                    Да если б только. DSG на октахе'14 начинает ускорять автомобиль, когда уже не нужно и ты приехал, куда нужно. 1 series 2008 принципиально не крутит больше 4к в D, даже с тапкой в пол (но там S работает хотя бы правильно).


              1. DMGarikk
                00.00.0000 00:00

                а я поездив на 250л.с. теперь крайне опечален, для меня теперь почти ни одно авто слабее 200л.с. не едет, газвпол с понижением передачи — 'отлично едет', на 200+л.с. авто это едешькак обычно, нажал чуть посильнее… и без всяких 'жжжжжжжж 4000 оборотов… ухпрёт'… оно просто так едет как обычное авто без всяких спецзвуков и манипуляций.


                пока авто было в ремонте, ездил на каршеринге… разные автомобили поперебирал, прям слезы одни...


                1. venanen
                  00.00.0000 00:00
                  +1

                  Ну дык у вас в моменте те же самые 150 сил, что и у меня. Просто мой автомат раскручивает двигатель, а ваш - нет.

                  А ещё, есть т.н. паровозная тяга - от момента зависит, очень приятное ощущение, в любой момент чуть нажал - и сразу поехало. В частности, этим очень круты электромобили - момент доступен сразу, и никаких провалов


                  1. DMGarikk
                    00.00.0000 00:00

                    Ну дык у вас в моменте те же самые 150 сил, что и у меня. Просто мой автомат раскручивает двигатель, а ваш — нет.

                    ну да, только из-за того у меня 250, то 150 как у вас у меня находятся внизу и ехать с ними комфортнее, без всяких жжжжужаний из под капота и дерготни коробкой по 100500 передачам вперед-назад (а автомат у меня довольно неудачный в этом смысле… хотя могу сказать что почти все автоматы на которых я ездил в этом смысле неудачные… и чем меньше он щелкает по передачам тем лучше)


                    также (ну это уже для любителей погонять) на авто с 200+, если при скорости 130кмч нажать тапку то в сиденье вжимает до тех пор пока отсечки не будет (или ограничителя, как у меня на 190кмч) и динамика вся на месте, а не превращается в пшик когда на 150кмч смысла уже нет в пол ты жмешь или не совсем — не тянет… более слабые авто заканчиваются гораздо раньше. — очень редко этим пользуюсь потому что негде

                    на электромобиле очень хочу гденить прокатиться


            1. Satyricon
              00.00.0000 00:00

              Как бывший обладатель 350 л.с. полноприводной машины с вами не согласен. И в городе со светофора тапку в пол, и на трассе любая колонна из фур за 5 секунд обгоняется. И вообще кайфово, когда на 6 передаче на 2000 оборотах по трассе 140 едешь. Теперь всё, что ниже по мощности - вообще не едет. Ну может дизель какой на низах, но потом сливает.

              Переехал в другой город и машину продал. Не нужна она тут.


      1. Javian
        00.00.0000 00:00

        Как-то попадалась история из 1960-х. На завод МЗМА стали приходить отзывы о новом двигателе 408. В одних благодарили за необычно мощный двигатель, а в других отзывались, что новый двигатель маломощный даже в сравнении с предыдущей старой моделью.
        С конвейера стали снимать двигатели на испытания случайным образом в разные смены. Результаты для производителя были необычные -среди двигателей соответствующих паспортной мощности встречались и намного мощнее и намного маломощнее. Их разбирали и все детали измеряли — оказалось, что они все находятся в пределах допуска. Брака не было.
        Объяснили феномен тем, что иногда точность изготовления деталей, использованных в конкретном двигателе, совпадала так, что получались как необычно хорошие так и необычно плохие характеристики.


        История выглядит достаточно достоверной.


        1. Tarakanator
          00.00.0000 00:00

          среди двигателей соответствующих паспортной мощности встречались и намного мощнее и намного маломощнее.

          оказалось, что они все находятся в пределах допуска. Брака не было.

          Нет. Судя по логике оказалось что либо допуски неверные, либо указанные характеристики мотора.

          Если я продаю ножи с длиной 20+-1 см
          с ручкой длинной 10+-1 см
          и лезвием, длинной 10+-1см

          А в магазин попадает нож общей длинной 21.5см, то это не значит что брака нет, раз ручка и лезвие по отдельности в допусках.


          1. Javian
            00.00.0000 00:00

            Видимо так и получалось. Где-то степень сжатия увеличивалась и уменьшалась за счет суммы таких допусков в нескольких деталях — вероятность как выиграть в лотерею.


  1. mblp
    00.00.0000 00:00
    +1

    на такое количество ошибок даже жалко ресурс ctrl+enter тратить, Вы хоть бы сами перечитали перед публикацией.


  1. sukharichev
    00.00.0000 00:00
    -1

    Ваша статья, на мой взгляд, максимально некорректна. Вы сами-то серьезно? Где, в таком случае, результаты vStack для 2680? Xeon 2680 и 2630 это очень разные по производительности процессоры, мы недавно старую часть инфраструктуры ровно так и проапгрейдили. Даже в расчете на ядро разница драматическая. У 2680 + 35 Мб кэша против 25 у 2630, +200 Мгц базовой частоты + 200 Мгц максимальной, частота шины выше, частота памяти выше. Ваша статья по уровню необъективности абсолютно равна необъективности рекламы vStack


    1. 0000168 Автор
      00.00.0000 00:00
      +4

      Так в том и суть, как может крупный вендор сравнивать результаты на 2630 в конфигурации ВМ на 32ядра с ВМ на i7 с 4мя vCPU? Вот тут то и бред.


  1. hardim
    00.00.0000 00:00

    :) Там еще и винда 10ка про :)


  1. DrKovalex
    00.00.0000 00:00

    А можно сравнить на современных поколениях процессоров, а не со старым бедным 2630v4? ...Ах, да, есть же один нюанс...


  1. resetsa
    00.00.0000 00:00

    Кто-то верит маркетингу еще. vmware vs vstack, ну-ну.

    Сколько там в мифическом vStack сотрудников и какое кол-во RnD там занимается?

    А как же поддержка?

    Это импортозамещение, не больше. Очень жаль, но импортозамещение в большинстве случае сейчас, синоним слова обман и очередной распил.


  1. jobs1
    00.00.0000 00:00

    А в чем смысл сравнивать системы управления виртуализации в тестом производительности cpu?

    Сравнивать по перфомансу процессора надо гипервизоры, т.е. Esxi и то, что под капотом vStack (подозреваю, что это все тот же qemu). Вангую, что разница будет на уровне погрешности, потому что и esxi и qemu уже давно приблизились к голому железу. Расхождение в тестах скорее всего связано с плохой настройкой параметров или особенностями теста. Хоть и не очень понятно, что там можно запороть, кроме инструкций процессора и очереди выполнения.

    Системы управления виртуализацией надо сравнивать по эффективности работы с переподпиской и плотности размещения сред. Интересно может ли vStack в автоматический балунинг, сжатие памяти и KSM, как умеет VMware. Не говоря уже про DRS.


  1. Kruggerr
    00.00.0000 00:00
    +1

    Мерять производительность в попугаях, причем на разных аппаратных платформах, с разными ОС - та еще субъективщина. Тут же могут влиять десятки факторов, от размера кеша, ядер, частоты, дисков, да в конце концов один сервер может не обслуживаться годами и банально снижать производительность от перегрева.
    Понятно, что каждая платформа использует свой гипервизор и в первую очередь на скорость влияет именно он.
    У vStack - это bhyve, у VMware - esix, а нас в проде развернут Vmmanager - у него KVM.
    Прогнал я ради любопытства аналогичный тест на ноде с похожими, опять же - похожими, характеристиками https://browser.geekbench.com/v5/cpu/20910145
    Получил 7345 попугаев... Много это или мало? )))

    Мы сидели на варе, все устраивало, но стало дорого и неудобно, ну и бесперспективно.
    Сейчас Vmmanager, по функциям до vCenter со всем его обвесом далеко, но наши задачи закрывает. Да и без тестов на попугаи работает адекватно, без неожиданностей.

    А так, по сути маркетинга от vStack - агрессивно и не особо объективно, по сути статьи - тоже автор без проведения личных тестов обеих платформ делает выводы.
    Мы сейчас все немного заложники тех решений, которые остались, выбираем, что привычно, удобно и субъективно понравилось.


    1. 0000168 Автор
      00.00.0000 00:00

      Это еще раз доказывает, что отдел маркетинга у vStack нужно или разогнать или номинировать на премию врем в глаза беспощадная реклама) А ведь можно копнуть глубже... "Внедрение vStack позволило Serverspace стать топ-1 по производительности ВМ" как думаете, это правда или опять, смотря с какой стороны и под каким углом посмотреть?

      Ни внятного, ни невнятного ответа от них vStack | itglobalcom так и не поступило, хотя в эпоху активного импортозамещения в среде потенциальных клиентов, это обратная связь, это нужно и важно.

      Что сложно сказать, уважаемый Автор, все это фигня потому, что.....