Серверы «Тринити» — это готовое, полноценное, протестированное решение, которое мы поставляем клиентам с несколькими типами мониторинга, в том числе с вариантом, основанном на макрос-шаблоне Zabbix. С помощью него можно «из коробки» быстро отслеживать состояние серверов, а также изменять параметры, даже не имея специальной подготовки. Теперь клиенту не придётся настраивать мониторинг самостоятельно или просить это делать администратора. А так как наши платформы используют протокол управления Redfish, шаблон подойдёт пользователям не только серверов «Тринити», но и любых серверов с Redfish. Это RnD «Тринити», мы немного расскажем про этот шаблон.

Как работает шаблон для мониторинга

Шаблон отслеживает состояние аппаратной части серверов с Redfish: температуру процессоров, температуру зон на материнской плате, напряжение в шине, напряжение в CPU, состояние памяти и другие показатели, которые наша плата может отдать в зависимости от наличия сенсоров. 

Напомним, что Redfish — это протокол управления серверами и их мониторинга, надстройка в IPMI (OpenBMC). В основном серверы используют протокол SNMP, поэтому у Zabbix готового решения работы с Redfish нет. Наш шаблон работает только для серверов с Redfish. Под каждое железо и даже каждую версию IPMI нужен свой шаблон, потому что из версии в версию адреса источников данных могут меняться. Если Zabbix задать правильные параметры, то на выходе получится информация, которую мы поймём и сможем занести в базу данных. Если же использовать шаблон для сервера с другим протоколом, то из-за других адресов расположения данных будет приходить непонятная информация, с которой мы не сможем ничего сделать. Этот нюанс имеет значение, по крайней мере до тех пор, пока Zabbix не сделает полную поддержку Redfish. 

У Zabbix есть универсальные макросы, которые могут обрабатывать информацию. Наш шаблон представляет собой внутреннюю настройку Zabbix через эти макросы. Zabbix берёт информацию у сервера по HTTPS, обрабатывает её и кладёт в свою базу данных. Он рисует графики и хранит эту информацию в своей БД.  

Так в шаблоне отображается информация, которую отдаёт сервер. Это список датчиков, которые имеются в сервере: 

В каждый датчик можно зайти и посмотреть более подробную информацию. Например, напряжение в шине. Оно отмечено на вертикальной шкале этого графика: максимальное, минимальное, плюс запас. 

Если будет скачок до 10 Вольт, шкала уменьшится. Горизонтальная шкала — это временной промежуток. Шаблон ставит точку, когда в шине было достигнуто определённое напряжение. Эту информацию Zabbix заносит в базу данных. Временной интервал можно настраивать, у нас стоит промежуток в 4 минуты. 

Далее — график со шкалой температуры и временным интервалом: 

Снизу — последнее показание: минимальное, максимальное и среднее. Если температура скакнёт выше установленной, левая шкала графика уедет вверх. Отметим, что Zabbix собирает и хранит информацию о самих температурах, а не графики, поэтому для наглядного отображения данных ему нужна графическая система.

Немного о процессе реализации шаблона

Его можно было сделать одним из двух способов: через скрипты или через настройки Zabbix (при помощи встроенных макросов). Второй вариант оказался более быстрым, к тому же внешние скрипты могут быть запрещены службой безопасности компании-заказчика.  

Буквально за один рабочий день мы сделали шаблон через макросы, добавили туда триггеров и написали инструкцию о том, как прикрутить готовый шаблон к любому Zabbix-серверу. На основании этих триггеров заказчик может делать и свои. При срабатывании триггеров, программа выполняет действия, например, подсвечивает строку с «красной» температурой, мигает. В шаблоне мониторинга серверов «Тринити» предусмотрены разные варианты оповещений, например, SMS на телефон, письмо на почту. 

В общем, шаблон, сделанный через макросы, — это быстрое и работающее решение. Работа по изменению его в случае обновления OpenBMC или Redfish займёт 20 минут. Мы можем быстро создать и доработать систему мониторинга под нужды заказчика.

Ссылки: 

• Шаблон

• Шаблон для материнских плат с 24 DIMM

• Инструкция