Много памяти не бывает? Кто-то может возразить, что хоть и хочется установить большой объем памяти, но мы все равно упремся в ограничение числа каналов работы памяти процессора, повышенную нагрузку и другие характеристики. С другой стороны, встает дилемма о том, сколько модулей памяти использовать одновременно и что выгоднее — поставить много недорогих планок, но меньшего объема, или несколько, но максимального. Если для бытовых ПК обычно мы можем использовать максимум 4 планки, то для серверов такое ограничение будет не так существенно и вопрос выливается в плоскость экономики.
Модель на подиуме
Сегодня (нам представилась возможность) мы рассмотрим интересную и одновременно увлекательную платформу от фирмы GIGABYTE, а именно R283-ZK0-AAL1.
Компания Gigabyte в прошлом году анонсировала серверы на аппаратной платформе AMD EPYC Genoa, которые выделяются наличием сразу 48 слотов для модулей оперативной памяти DDR5 RDIMM. Стандартные платформы обычно имеют только 24 слота памяти (по 12 слотов на 12 каналов на каждый процессор), при этом разница в стоимости платформ составляет от силы пару тысяч евро.
Модели R183-ZK0 и R283-ZK0 выполнены в стандартных форматах 1U и 2U соответственно. Наш рассматриваемый сервер имеет формат 2U.
Выделенные серверы с процессорами 4 поколения AMD EPYC 9354 / 9554 / 9654 / 9754 от 32 до 256 ядер в каждом сервере.
Арендуйте высокопроизводительный выделенный сервер с большим количеством ядер на базе процессоров AMD EPYC последнего поколения, с оперативной памятью DDR5 и хранилищем NVME. Серверы доступны для заказа в ультрасовременном дата-центре в Москве и Амстердаме.
Инсталляционный платеж: Бесплатно
Индивидуальная конфигурация
Скидка до 12% в зависимости от срока аренды
Время сдачи: 1-3 рабочих дня
Разбираемся в платформе
В чем же, собственно, особенность этой платформы? Взглянем на характеристики с сайта производителя:
Два слота для процессоров AMD EPYC™ серий 9005/9004.
12-канальные DDR5 RDIMM, 48 слотов.
Архитектура Dual ROM.
2 x 1Gb/s LAN портов Intel® I350-AM2.
8 x 2.5" Gen5 NVMe/SATA/SAS-4 корзин с горячей заменой.
4 x 2.5" SATA/SAS-4 корзины с горячей заменой на задней стороне.
2 x M.2 слота PCIe Gen3 x4 и x2 интерфейса.
4 x FHHL PCIe Gen5 x16 слотов.
2 x OCP NIC 3.0 PCIe Gen5 x16 слотов.
Источник питания с резервированием 1+1 2700W 80 PLUS Titanium.
Уже с первого взгляда видно одну из главных особенностей материнской платы, а именно 48 слотов RAM, которые работают в 12-канальном режиме. В общей сложности каждый из серверов Gigabyte R183-ZK0 и R283-ZK0 поддерживает установку до 24 Тбайт ОЗУ — 48 модулей по 512 Гбайт, что является абсолютным преимуществом перед аналогами на текущий момент.
Итак, как это работает и работает ли вообще? Нужно в этом более подробно разобраться. В нашем примере мы не будем стараться забить машину памятью на 24 Тбайт, ограничимся лишь 3 Тб.
Под капотом у нашего сервера следующие компоненты:
2 процессора AMD EPYC 9554.
48 планок памяти DDR5 SAMSUNG объемом по 64 Гбайт и частотой 4800 МГц.
2 диска NVMe по 2 Тбайт каждый.
Экономично ли?
3 терабайта ОЗУ мы можем «набрать» с помощью различного числа планок памяти. В нашем случае мы используем сравнительно бюджетные 64 Гб планки стоимостью в районе 300 евро за штуку. То есть, набрав данный объем такими планками, мы затратим 14400 евро.
Если мы будем использовать планки объемом по 96 Гб (стоимость которых будет уже 500 евро), то тогда задействуем 32 слота, но на тот же объем потратим уже 16000 евро.
В случае «обычного» сервера с 24 слотами для получения такого объема памяти нам бы пришлось использовать уже далеко не бюджетные планки по 128 Гб стоимостью от 1000 евро за штуку и потратить на это уже от 24000 евро.
Экономия только на памяти может составить до 10000 евро, а напомню, что цена такого сервера лишь пару тысяч евро дороже.
Тестируем
Для тестов поставим на сервер ОС Windows Server 2022 и попробуем погонять его с помощью бенчмарка ОССТ. Хоть у нас и будет тест памяти, но ведь самое интересное в этой платформе – слоты памяти, не так ли?
Запускаем часовой тест при полной нагрузке памяти. Нам необходимо узнать, будет ли машина держать эти нагрузки, а также какая температура будет на ней. Ее реально много, и возможно, что даже уже из-за такого количества планок будет страдать охлаждение.
Но производитель заявляет: «Индивидуальные скорости вращения вентиляторов будут автоматически регулироваться в соответствии с датчиками температуры». Мы хоть и верим Gigabyte, но просто обязаны это проверить.
По тестам видно, что всё работает и проблем не наблюдается. Но нагрузка еще не полная, да и времени пока прошло мало.
Обратите внимание, что температура памяти держится на уровне всего лишь 34 градуса, при том, что на момент начала тестов температура была 31 градус.
Ждем еще немного и смотрим, как обстоят дела дальше при полной нагрузке.
Восемнадцатая минута тестов. Нагрузка 99 процентов, температура чуть подросла в сравнении с прошлым итогом и теперь составляет 39 градусов.
Ошибок нет, машина чувствует себя замечательно. Дождемся окончания тестов и посмотрим на общие результаты.
После часа тестов получаем такие значения: температура памяти 42 градуса, что в рамках нормальных значений, ошибок по памяти не наблюдается, все тесты пройдены на отлично.
Проведем завершающий тест на скорость работы памяти.
Результат: память работает на хорошей скорости. Средняя скорость работы памяти — 2787 Мбайт/с, прекрасный показатель, не правда ли?
Дальнейшая эксплуатация сервера показала, что память работает стабильно, значение температурного режима и скорость держатся без аномальных скачков и в пределах ожидаемых значений.
Что в итоге?
GIGABYTE сумела выпустить очень интересную и уникальную платформу, которая может работать при больших нагрузках без ошибок, имея при этом в два раза больше слотов памяти, чем обычно.
Для такой платформы найдется применение в огромном количестве компаний и для абсолютно разных задач, будь то необходимость в большом объеме вычислительных мощностей или под работу в сфере виртуализации. А пока будем дальше ждать еще более интересных и необычных серверных платформ на рынке.
Выделенные серверы с процессорами 4 поколения AMD EPYC 9354 / 9554 / 9654 / 9754 от 32 до 256 ядер в каждом сервере.
Арендуйте высокопроизводительный выделенный сервер с большим количеством ядер на базе процессоров AMD EPYC последнего поколения, с оперативной памятью DDR5 и хранилищем NVME. Серверы доступны для заказа в ультрасовременном дата-центре в Москве и Амстердаме.
Инсталляционный платеж: Бесплатно
Индивидуальная конфигурация
Скидка до 12% в зависимости от срока аренды
Время сдачи: 1-3 рабочих дня
Комментарии (8)
sukharichev
31.01.2025 13:10Интересные сервер и статья, спасибо! Но самая главная проблема в серверном сегменте, это репутация и опыт производителя. И у Асуса и у Гигабайта есть очень интересные модели, и дешевые при этом. Но что с надежностью? Искал отзывы, ничего, кроме чахлого треда на reddit не нашел, и там тоже все такие "не знаем, не пробовали". Купили в результате супермайкру. У них есть косяки, но ничего фатального, и все они давно известны и либо есть исправления, либо обходные пути. Поэтому самая интересная информация - не сколько памяти туда можно впихнуть, а сколько таких серверов (или других этого же производителя) установлено на крупных площадках, как они себя ведут, сколько времени отработали и сколько засбоило. Как отчеты backblaze по дискам.
lex899
31.01.2025 13:10У нас на ~сотню суперов приходится один асус, навскидку вспомню вылет сетевухи и один отлетевший bios на суперах, асус ... работает, но он один так что это ни о чем не говорит.
CherryPah
31.01.2025 13:10Попадался как-то в прошлом гигабайт вроде 250 серии, 2 юнита под 8 GPU
Не знаю что там за кулера стояли, но орал он как свинья из касперского и в одиночку перебивал шум всего машзала. Вернулись к супермикре xD
RatsM
31.01.2025 13:102.8 Гб/с ? Пахнет скоростью м.2 nvme 3.0.
Но никак уж не 24 каналами ddr5. Там должно быть больше терабайта в секунду.
Приводить в пример DDR1 даже не стал. Ибо даже она в 24 канала будет значительно быстрее
Thomas_Hanniball
Судя по всему это отличный вариант для In-memory database, например, SAP HANA или Apache Ignite.
Moog_Prodigy
Или для запуска хороших таких LLM, не будем упоминать лишний раз, каких именно :)
krids
Еще бы SAP HANA поддерживала бы AMD :(