![](https://habrastorage.org/webt/96/y4/nj/96y4nj3l6k5hmmxt79onmytav2y.jpeg)
Каждому хостеру время от времени приходится обновлять железо. Тут мы не отличаемся от обычных людей, которые следят за выходом новых процессоров и ценами. Мы тоже всё это отслеживаем, а когда наступает нужный момент — делаем апгрейд.
Последняя новинка в нашем парке — популярный двухпроцессорный 2U-сервер Lenovo ThinkSystem SR650, о которой сама Lenovo уже рассказывала на Хабре. Но там был обзор первой версии сервера, а в 2021 году Lenovo выпустила более продвинутую вторую версию, которую мы и приобрели для своего дата-центра.
Lenovo ThinkSystem SR650 V2 оснащается последними процессорами Xeon, что стало одной из основных причин его покупки. Фотографии в этой статье — именно второй версии сервера. Но заодно мы приобрели и первую версию SR650 в нескольких разных конфигурациях: это хорошие «рабочие лошадки», которые отлично себя зарекомендовали.
![](https://habrastorage.org/webt/ae/sz/kk/aeszkkobvkd_7rspmvdphh0rhy4.jpeg)
![](https://habrastorage.org/webt/id/am/ys/idamys0kfvj1kc5x-f0hopgh2nk.jpeg)
▍ Процессоры
ThinkSystem SR650 первой и второй версий отличаются по техническим характеристикам (подробнее см. ниже). Например, в первой может быть установлено два процессора Xeon Scalable 2-го поколения. Это максимум 28 ядер с 205 Вт на процессор и 48 линий PCIe 3.0 на процессор.
С другой стороны, во второй версии сервера можно поставить пару процессоров Xeon Scalable 3-го поколения, а это совершенно другое дело. Здесь уже получается до 40 ядер (270 Вт) и 64 линии PCIe 4.0 на каждый CPU. На два процессора — 80 ядер/160 потоков.
![](https://habrastorage.org/webt/qc/vt/wx/qcvtwxrjitog-zazsxvkz0m5unu.jpeg)
![](https://habrastorage.org/webt/d1/es/o-/d1eso-wzxoktivajjt8puf_dmnm.jpeg)
Все слоты памяти заполнены под завязку (обычная оперативная память плюс энергонезависимая Intel Optane)
Для сравнения, процессоры Xeon Scalable 2-го поколения выпускались преимущественно в 2019 году, а последние вышли в I кв. 2020 года. Затем начали выпускать новые CPU, что и продолжают делать вплоть до настоящего времени по техпроцессу 10 нм (для Intel это практически вершина достижений).
![](https://habrastorage.org/webt/ix/3g/gi/ix3ggilc1qxdtsazjfgzfpuuuoc.jpeg)
Список процессоров Xeon Scalable 3-го поколения насчитывает 53 штуки, из них 15 штук увидели свет в 2020 году, остальные — в 2021, это процессоры гораздо более высокого класса.
![](https://habrastorage.org/webt/fd/sc/ba/fdscba7-qcs7xiidjfzyraulkoo.jpeg)
![](https://habrastorage.org/webt/kd/i2/d4/kdi2d49qszm4dnbetcdkubc5zck.jpeg)
Банки памяти между двумя процессорами
Вот сравнение некоторых технических характеристик Xeon Scalable 3-го поколения разных серий, которые можно поставить в Lenovo ThinkSystem SR650 V2. Для примера возьмём процессоров разных серий и совершенно разных ценовых сегментов: Xeon Platinum 8358, Xeon Gold 6314U и Xeon Gold 5315Y. Они также дают примерное представление о ценообразовании Intel.
Xeon Platinum 8358 | Xeon Gold 6314U | Xeon Gold 5315Y | |
---|---|---|---|
Поколение | 3-е поколение Xeon Scalable, Ice Lake | ||
Техпроцесс | 10 нм | ||
Дата выпуска | II кв. 2021 | ||
Ядер/потоков | 40/80 | 32/64 | 8/16 |
Частота (базовая/турбо) | 2,30/3,40 ГГц | 2,30/3,40 ГГц | 3,20/3,60 ГГц |
Кэш | 60 МБ | 48 МБ | 12 МБ |
Память, макс. объём, каналов | 6 ТБ, DDR4-3200, 8 каналов |
6 ТБ, DDR4-2933, 8 каналов | |
Сокет | FCLGA4189 | ||
TDP | 270 Вт | 205 Вт | 140 Вт |
Макс. температура корпуса CPU | 83°C | 81°C | 81°C |
Рекомендованная цена | $8099 | $2600 | $895 |
Более подробное сравнение
![](https://habrastorage.org/webt/8i/wz/la/8iwzlaczu6yxjvgieo0rqqpllkw.png)
В таблице показаны различия между CPU. Можно понять, почему Xeon Platinum считается моделью более высокого класса, хотя и разница в цене тоже значительная. В любом случае, во вторую версию сервера ThinkSystem SR650 можно поставить любой процессор на сокете FCLGA4189.
![](https://habrastorage.org/webt/ha/2m/cy/ha2mcyqrs-ukbd6sjkgyxpafqta.jpeg)
![](https://habrastorage.org/webt/xx/lq/44/xxlq44g4cmekyhsobimfqfs4ch8.jpeg)
▍ Разные комплектации
Кроме доступных процессоров, первая и вторая версии ThinkSystem SR650 отличаются и по остальным характеристикам: максимальному объёму памяти, количеству доступных HDD и SSD разного типа.
В нашей конфигурации на лицевой стороне сервера двенадцать отсеков 3,5". На фотографии порядок размещения отмечен цифрами от 0 до 11. Дополнительные отсеки можно добавить с задней стороны, если есть потребность установить максимально возможное количество накопителей. К тому же, дюжину отсеков 3,5" с фронтальной стороны можно заменить две дюжины отсеков 2,5".
![](https://habrastorage.org/webt/f7/xk/cx/f7xkcxprs7igw9h1cgvspzbs-gu.jpeg)
В первой версии сервера у нас было 6 каналов памяти на CPU, а во второй стало 8. Соответственно, раньше можно было поставить максимально 24 модуля TruDDR4 (R/LR/3DS) 2933 МГц. Максимум выходило 3 терабайта памяти, если заполнять модулями по 128 ГБ. В качестве энергонезависимой памяти использовалось предыдущее поколение Intel Optane PMem 100.
На вторую версию можно поставить уже 32 модуля (3200 МГц), то есть максимум 4 терабайта. Плюс более быстра и Intel Optane PMem 200.
Конфигурация накопителей тоже немного изменилась ко второй версии сервера. Раньше на него ставилось максимум 26 дисков: 12/24 спереди и 2 сзади (опционально). А сейчас немного другая картина: до 40 дисков, в том числе 12/24 спереди. Поддерживаются 3,5" или 2,5" SAS/SATA/NVMe и два внутренних M.2 с опциональным RAID 1.
![](https://habrastorage.org/webt/zt/2n/io/zt2niovapxunlxv7y12tfzorlbs.jpeg)
![](https://habrastorage.org/webt/0z/el/r_/0zelr_9pnasepedse1olgd6fhsa.jpeg)
Некоторые детали первой версии Lenovo ThinkSystem SR650:
- RAID-контроллер ThinkSystem RAID 930-16i 4GB Flash PCIe 12Gb
RAID-контроллер на второй версии сервера
- Два блока питания ThinkSystem 750 Вт (230/115 В)
На краю материнской платы рядом с БП при желании можно поставить райзер
- Вентилятор DBPG0638B2U (1,84А, 12В)
Система охлаждения с шестью вентиляторами
Вот схема внутреннего устройства сервера с основными компонентами из официальной документации:
![](https://habrastorage.org/webt/pn/8p/z0/pn8pz0uccewkhhfascajjanz3xw.png)
Ниже более полная схема материнской платы (фото с корпуса сервера). Здесь указаны все 38 компонентов и порядок установки.
![](https://habrastorage.org/webt/ko/qo/pn/koqopntsocayypebf6praeb4390.jpeg)
![](https://habrastorage.org/webt/fm/mk/2o/fmmk2oj6y8dc2w-qs8hqsefohbk.jpeg)
По центру материнской платы встроен RAID-контроллер (на схеме "internal storage controller"), защищённый радиатором. Во второй версии сервера используется новый контроллер Intel VROC (Intel Virtual RAID на CPU) для SATA RAID и NVMe RAID.
![](https://habrastorage.org/webt/zc/ch/gp/zcchgpa1xvs0blmbgkrg0cbgqwu.jpeg)
Рядом с ним на материнской плате ещё один большой радиатор.
![](https://habrastorage.org/webt/ue/4h/9f/ue4h9fayn2x-g3pgvf0xgihp-w0.jpeg)
На передней панели корпуса находятся отсеки для накопителей, порты USB 3.1 и USB 2.0 с поддержкой xClarity Mobile, а также диагностический разъём для внешнего телефона.
![](https://habrastorage.org/webt/8u/kk/l_/8ukkl_qos_j393x99eu5d8aahos.jpeg)
На задней — разъёмы VGA, USB 3.0, USB 2.0 и RJ-45 (Ethernet 1/10 Gb).
![](https://habrastorage.org/webt/dn/cn/06/dncn06ju7tepi8_zii3qhkk-v7s.png)
Вот как они выглядят на сервере второй версии:
![](https://habrastorage.org/webt/km/25/ib/km25ibgcrey6bv4hwahqy2labi4.jpeg)
![](https://habrastorage.org/webt/_f/sg/0i/_fsg0icm_mie_u02zthg5y-gzre.jpeg)
В комплекте с сервером поставляются заглушки-наполнители для дисков 2,5", которые мы ставим в отсеки 3,5" на фронтальной панели.
![](https://habrastorage.org/webt/3g/c3/kn/3gc3knpzak6n6eutv13vjgomxqi.jpeg)
SSD 960GB в заглушке-наполнителе 3,5"
![](https://habrastorage.org/webt/vd/8-/q8/vd8-q8gd5t9kdlhc6c-gblkhmla.jpeg)
Дисковый массив и система охлаждения
▍ Вторая версия. Lenovo ThinkSystem SR650 v2
![](https://habrastorage.org/webt/c-/ag/ys/c-agystl5pryoabqlm7_8r-vqba.jpeg)
Как мы уже говорили, во второй версии сделано очень много усовершенствований по сравнению с первой версией: новое железо и один из новейших процессоров Xeon Scalable 3-го поколения, новая энергонезависимая память Intel Optane Persistent Memory 200. Одна только память обеспечивает до 25% прироста скорости данных при неизменном энергопотреблении — не более 18 Вт TDP для модуля объёмом 512 ГБ. Появилась поддержка PCIe 4.0.
![](https://habrastorage.org/webt/jm/tt/jk/jmttjknl2zzhrklhizrt4ifyi8c.png)
![](https://habrastorage.org/webt/wd/av/st/wdavstwrro8oobgif5nus-7dxw0.png)
В качестве Intel Optane Persistent Memory по факту работают те же модули DDR4 RDIMM, но в режиме прямого доступа от CPU и приложений. Кроме того, в этом режиме можно работать с памятью как с SSD и в том числе загружать с неё сервер.
В сервере 32 слота памяти DDR4, то есть он поддерживает до 4 ТБ с 32 планками 3DS RDIMM по 128 ГБ; до 16 модулей Intel Optane 200.
![](https://habrastorage.org/webt/b0/co/6i/b0co6iqvtitueve1stf6qjkjvwq.jpeg)
![](https://habrastorage.org/webt/jc/fz/ky/jcfzky_tgzbusm_bflwivrd3v7k.jpeg)
ThinkSystem SR650 V2 отлично подходит для любых рабочих нагрузок: базы данных, виртуализация и облачные вычисления, инфраструктура виртуальных рабочих столов (VDI), корпоративные приложения, потоковое мультимедиа, веб-приложения и т. д. Кроме CPU, в него можно установить до восьми графических карт NVIDIA T4.
![](https://habrastorage.org/webt/pz/oz/i-/pzozi-uww-phwnbbxrccggjyiwu.jpeg)
Теоретически, в других комплектациях этот сервер поддерживает до двадцати 3,5-дюймовых или до сорока 2,5-дюймовых накопителей, до 32 накопителей NVMe с адаптерами-переключателями NVMe, два загрузочных накопителя M.2 (RAID 1), два 7-мм загрузочных накопителя сзади (RAID 1). Дополнительные 2—8 отсеков можно установить на задней панели, вдобавок к 12/24 отсекам спереди.
![](https://habrastorage.org/webt/tg/l8/lu/tgl8luodqozbfzqzgk1ddsc1ytk.jpeg)
Нужно отметить, что в этих серверах используется фирменная технология Lenovo AnyBay, которая позволяет установить в один отсек накопители с различными интерфейсами: SAS (Serial Attached SCSI), SATA или U.2 и U.3 NVMe PCIe. Например, можно в одних отсеках установить SSD PCIe, в других — SAS высокой ёмкости, а позже заменить некоторые HDD на SSD PCIe.
![](https://habrastorage.org/webt/dh/dn/4y/dhdn4yb4v38t-8qixmilolskpks.jpeg)
![](https://habrastorage.org/webt/gq/ka/x7/gqkax7wv68jprks72ig2nh5sk4s.jpeg)
Здесь новая материнская плата ThinkSystem SR650 V2, встроенный режим RAID на плате + Intel VROC (VMD NVMe RAID) для Intel SSD и другие улучшения.
![](https://habrastorage.org/webt/lj/hv/to/ljhvtoo9yplpfv8fiebk4-nmcmg.jpeg)
Монтаж сервера в стойке простой и удобный, в комплекте идут все необходимые детали.
![](https://habrastorage.org/webt/9m/yb/l5/9mybl5ku2mwsfr7qhf0bd2vjdo0.jpeg)
![](https://habrastorage.org/webt/kb/yy/ba/kbyybaezrrnz9tq4q1xiv5rj4tw.jpeg)
![](https://habrastorage.org/webt/bg/gc/a8/bggca8subk_zog_kuhlos7m4msg.jpeg)
▍ Удалённое управление
Основная программа для управления — Lenovo xClarity Controller. Это круглосуточный удалённый доступ и управление сервером, удалённое управление независимо от состояния управляемого сервера и удалённый контроль оборудования и операционных систем.
![](https://habrastorage.org/webt/tx/ac/a5/txaca5asm-mpnpvev7kuwrew5e4.png)
Среди функций xClarity Controller:
- Возможность выбора выделенного или совместно используемого подключения Ethernet для управления системами
- Диспетчер XClarity Provisioning Manager
- Удалённая настройка конфигурации с помощью интерфейса командной строки XClarity Essentials или XClarity Controller
- Возможность локального или удалённого доступа к XClarity Controller для приложений и инструментов
- Расширенные функции удалённого присутствия
- Поддержка API REST (схема Redfish) для дополнительных услуг в интернете и программных приложений.
Функциональность xClarity Controller зависит от уровня установки: Standard, Advanced или Enterprise. Для примера, вот некоторые эксклюзивные функции самого высокого уровня:
- Фиксация загрузки
- Управление качеством/полосой пропускания
- Совместная работа на виртуальной консоли (шесть человек)
- Чат виртуальной консоли
- Подключение ISO или IMG с файл-сервера (HTTPS, CIFS, NFS) к хосту в качестве накопителя DVD или USB
- Ограничение энергопотребления
- Удалённое развёртывание с помощью Lenovo XClarity Administrator.
Особо стоит отметить очень удобный интерфейс командной строки xClarity Essentials. Почти всё, включая диски с массивами RAID, можно диагностировать и настроить из CLI.
![](https://habrastorage.org/webt/ih/oj/eu/ihojeujaw94pny3aha7ek37h5js.png)
Для удалённого управления создан Lenovo xClarity Administrator, он не требует установки драйверов на управляемые системы и работает сразу «из коробки».
Есть даже приложение Lenovo xClarity Mobile для управления серверами с мобильного устройства.
![](https://habrastorage.org/webt/bi/kd/ut/bikdutmqpttvm-wvkn1yb5m98we.png)
Вот такой сервер — «универсальный солдат», как его называет Lenovo.
P/s мини видео об этом сервере можно посмотреть в нашем тик-токе обзоре
![](https://habrastorage.org/webt/o_/zl/av/o_zlav9mngepyxvxwmst8k0gtea.jpeg)
![](https://habrastorage.org/webt/zp/pn/nv/zppnnvqipnje5riqceqaa8aeelo.jpeg)
![](https://habrastorage.org/webt/rj/lk/0-/rjlk0-uyawto_8r0rcxwruizq8c.jpeg)
![](https://habrastorage.org/webt/ou/g5/kh/oug5kh6sjydt9llengsiebnp40w.png)
Комментарии (3)
amarao
01.11.2021 16:55"Это круглосуточный удалённый доступ и управление сервером"...
Как интересно! Неужели у остальных вендоров BMC работает в графике 5/8?
/сарказм
kovserg
А зачем 12 слотов для DIMM на процессор, если память 8-ми канальная?
stranger169
В первом поколении, если я всё верно понял память шестиканальная и выходит по 2 слота на канал.
Во втором поколении уже по 16 слотов памяти на сокет.