SberDevices сегодня перезапустили собственную платформу умного дома, отказавшись от сторонних инфраструктурных решений и сделав ее полностью автономной. Также с сегодняшнего дня в продажу поступило первое устройство умного дома Sber нового поколения – самая популярная лампа А60.

Мы анонсировали разработку новой инфраструктуры для своей платформы умного дома полгода назад. Основной задачей было обеспечить бо́льшую надежность работы: элементы сторонних поставщиков ограничивали гибкость в развитии и создавала ненужные риски. Эта задача решена: сейчас все составляющие платформы контролируются нашей командой и работают на российских серверах.

В этой статье мы хотим рассказать, как устроена наша платформа и как с её помощью мы выпускаем свои устройства и интегрируем устройства партнёров.

Передаю слово моему коллеге, Борису Папиняну, PO платформы умного дома SberDevices.

Что умеет и из чего состоит платформа умного дома

Если коротко — платформа умного дома умеет отправлять на умные устройства Sber и девайсы партнёров команды и получать от них ответ. На первый взгляд, довольно просто.

Но давайте всмотримся пристальнее:

С пользователями мы взаимодействуем с помощью самих конечных устройств, управляющих устройств и нескольких мобильных приложений. Это наш фронтенд.

В бекенде платформы — более 60 микросервисов, составляющих ядро платформы: сервис интеграции, сервис обновления прошивки, сервис подключения устройств, сценарный движок, сервис голосовых команд, сервис аналитики и многие другие.

Бекенд может взаимодействовать с облаками партнёров и программируемыми контроллерами: транслировать команды, которые пользователи отдали через приложения и устройства Sber, в партнёрское облако или на контроллер, и получать оттуда статус. С помощью такого взаимодействия пользователи получают возможность управлять через умный дом Sber не только устройствами нашего производства, но и сторонними девайсами.

Ниже — подробности о ключевых частях платформы.

Умные устройства Sber

Платформа умного дома не обязательно должна включать устройства своего производства: вы вполне можете обойтись интеграцией с партнёрами и управлять только сторонними лампами, розетками и другими девайсами.

Мы же, в дополнение к партнёрским девайсам, сами производим устройства — и стараемся сделать их одними из лучших на рынке. Для этого в нашей команде есть инженеры, которые проверяют аппаратные компоненты, выбирают и инспектируют фабрики, создают процедуры и стенды для приёмочных испытаний.

Вот как (очень укрупнённо) выглядит процесс производства девайсов:

  1. Продуктовая команда делает бизнес-анализ и определяет, какое устройство, с какими характеристиками и по какой цене нужно произвести.

  2. Инженеры помогают выбрать несколько фабрик, которые могут изготовить устройство в соответствии с нашими требованиями. Фабрики инспектируют, у них заказываются тестовые партии устройств.

  3. Устройства из тестовой партии тщательно тестируются. Например, на картинке ниже — сферический фотометр. Внутренняя часть этого шара оснащена датчиками, с помощью которых проверялись световой поток и равномерность освещения прототипов ламп. Также у тестовых устройств проверяются электрические характеристики, температуры работы и многие другие параметры.

  1. Как правило, даже самые лучшие образцы не устраивают нас полностью, поэтому наши инженеры дорабатывают схемотехнику и конструкцию устройства.

  2. Фабрика, сделавшая лучшие устройства и готовая внести необходимые нам доработки, получает заказ на производство. Пока она готовит производственные линии, мы тоже не сидим без дела — нужно подготовить протоколы для приёмки девайсов.

    Например, у всех устройств обязательно проверяется базовая функциональность. У ламп это: включение, выключение, изменение цветов и непрерывная работа в течение заданного времени. А ещё мы разработали программу самодиагностики — она встраивается прямо в прошивку и проверяет, подключены ли к плате все необходимые компоненты. В партии ламп, которая сейчас поступила в продажу, этот тест помог отсеять несколько десятков неправильно собранных устройств.

Прошивка устройств

Чтобы производимые на фабриках девайсы стали умными, недостаточно железа. Нужна прошивка — её тоже пишут наши инженеры.

На прошивке нужно остановиться чуть подробнее, потому что этот компонент нашей платформы по-своему уникален. На рынке России крайне мало поставщиков облачных умных домов, самостоятельно разрабатывающих своё системное ПО, а не использующих проприетарные версии. Это не только вопрос престижа: прошивка определяет, из какого облака устройство будет получать команды, поэтому без неё говорить о независимой инфраструктуре нельзя. 

Проприетарная прошивка накладывает и многие другие ограничения: можно ли обновить устройство «по воздуху», можно ли усилить алгоритм шифрования и прочее. Самостоятельно разрабатывая прошивку мы получаем бо́льшую гибкость и можем выбирать решения, лучшие для наших пользователей.

Несколько примеров того, что нам уже удалось реализовать, используя это преимущество:

  • Лампа и другие наши устройства используют только российскую облачную инфраструктуру.

  • Мы используем стойкий криптографический протокол на уровне приложения после подключения к лампе по BLE — нативный механизм шифрования BLE обладает уязвимостью и уже не может считаться надёжным. Кроме того, мы внедрили криптографическую подпись в образ прошивки.

  • Модуль безопасного OTA-обновления не только позволяет дистанционно обновлять ПО, но и защищает лампу в момент инсталляции прошивки: даже если пользователь выключит питание лампы во время обновления (а такое, увы, не редкость), она не выйдет из строя.

  • У нас появился таймер времени выключения: теперь лампа знает, когда она выключалась в последний раз. Это помогло победить проблему «спонтанного пейринга», когда лампа переходила в режим подключения по пяти включениям и выключениям подряд, не различая при этом, что эти переключения случались с разницей в несколько часов. Что важно — проблему решили установкой простейшей RC-цепочки и изменениями прошивки, без впаивания аппаратного таймера и заметного удорожания устройства.

Ещё одна ключевая особенность прошивки — возможность переиспользования. Она состоит из трёх слоёв: слой с приложением для управления устройством, слой IoT-платформы и физический слой с реализацией радиомодулей и хранилищами. Последние два уровня — универсальные. Они не меняются от устройства к устройству, кастомизируется только слой приложения. Это будет экономить нам время при выпуске следующих девайсов.

А вот так выглядит разработка прошивки. Сверху — лампочка, но на открытой плате, на которой собраны все модули и чип, его можно извлекать и перепрошивать. Если присмотреться, то можно увидеть и светодиоды лампы. Снизу — уже почти готовая лампа с портом для перепрошивки.

Сервис интеграции

Это ещё одна очень важная часть платформы. Мы производим не все категории устройств, которые нужны нашим пользователям, и готовы делиться технологиями, которые полезны нашим партнёрам. Для взаимодействия с партнёрскими облаками разработана подсистема интеграции — она позволяет подключать к платформе умного дома Sber девайсы других производителей и управлять ими так же, как и нашими собственными устройствами: голосом или через интерфейс в приложении и устройствах Sber.

А ещё мы не решаем за пользователя, как ему организовывать свой дом, поэтому эта подсистема умеет работать с разными технологическими стеками: Wi-Fi, Zigbee, Bluetooth, MQTT.

Взаимодействие строится на базе открытого API — любой вендор может реализовать интеграцию и дать своим пользователям возможность использовать все технологии нашей платформы: множество поверхностей, голосовое управление, сценарный движок. С нами уже интегрированы больше десятка производителей, включая Aqara, Digma, HIPER и Yeelight.

Для компаний-интеграторов и DIY-энтузиастов, автоматизирующих дома с помощью программируемых контроллеров Wiren Board и LogicMachine, мы максимально упростили подключение к облаку Sber: разработанное нами приложение можно установить на контроллер — и оно обеспечит трансляцию команд от умного дома Sber на контроллер и в обратном направлении. После этого даже проводными устройствами можно будет управлять голосом и через интерфейс устройств и приложений от Sber.

Поверхности для управления

Пользователь должен иметь возможность управлять умным домом на любой удобной ему поверхности: через мобильное приложение, телевизор, умную колонку. Для этого мы встроили свои разделы в приложения для Android и iOS, а также в GUI устройств Sber: SberBox, SberPortal, SberBox Time, телевизоров с Салют ТВ и других.

Кажется, что читателям Хабра нет необходимости расписывать нюансы мобильной разработки. Но точно стоит отметить, что эта часть нашей платформы не только обеспечивает интерфейс с пользователями и взаимодействуют с API, но и отвечает за системообразующие задачи — например, за подключение девайсов.

На картинке — схема экранов подключения лампы. Не всматривайтесь в каждый экран — просто посмотрите на их количество. И это только одна из множества функций.

Голосовое управление

Сейчас уже недостаточно иметь управление устройствами только через интерфейс — пользователи ждут от поставщика умного дома и голосового управления. Для его реализации мы используем два сервиса.

Первым команду пользователя слышит голосовой ассистент семейства Салют: Афина, Джой или Сбер. Ассистенты используют технологию синтеза и распознавания речи SaluteSpeech (кстати, вы тоже можете использовать её). На этом этапе классификатор определяет, к какому сервису Sber относится команда: к умному дому, или, например, к приложению кинотеатра на приставке.

Затем команды умного дома передаются в платформу умного дома и в дело вступает сервис голосовых команд. Он полностью написан нами: пришлось отказаться от сторонних решений, чтобы лучше учесть специфику голосовых запросов умного дома.

Главная задача сервиса — определение намерения (интента) пользователя. Умный дом Sber поддерживает несколько десятков категорий устройств, и для каждой категории существуют свои интенты. Например, лампочку можно захотеть включить, выключить, сделать ярче или теплее, поменять насыщенность и т. д. Всего сейчас мы поддерживаем больше сотни интентов.

Кроме разнообразия самих интентов, при определении намерения приходится решать и другие сложности: например, у пользователя может быть несколько устройств с одинаковыми названиями, название устройства может дублировать название комнаты или дома, команда может подходить к нескольким устройствам и пр. Сервис проходит по дереву интентов, и, учитывая все составляющие фразы, отбрасывает неподходящие ветви и выбирает тот интент, который подходит больше всего.

Есть и ещё одна особенность: каждый интент можно выразить разными словами. Мы не стремимся учить пользователя фразам управления умным домом, а сами стараемся подстроиться под пользователей. Чтобы быть готовым к самым неожиданным формулировкам, мы постоянно пополняем корзину запросов — как с помощью групп дикторов, так и с помощью регулярного анализа массива нераспознавшихся фраз. Так, например, мы поняли, что пользователи иногда произносят мультикоманды: отдают две команды в одной («Салют, выключи свет и открой шторы») — и научили наш сервис их поддерживать. Насколько знаем, так не умеет больше ни один сервис голосового управления умным домом.

Сценарный движок

Разные поверхности и голосовое управление — это хорошо. Но умный по-настоящему дом должен не только выполнять ваши команды, но и работать самостоятельно. Поэтому в платформе реализован ещё один важный компонент — сценарный движок. Он запускает устройства по расписанию, голосовой команде или в зависимости от зафиксированных датчиками событий.

Движок умеет управлять не только нашими устройствами, но и устройствами партнёров. Например, можно собрать датчик движения Aqara, лампы Yeelight и розетки Sber в один сценарий, который будет выключать свет и электроприборы, если дома долго нет движения.

Мы активно занимаемся развитием движка и уже скоро запустим кое-что новое — следите за новостями.

Как это всё работает вместе

Как мы говорили выше, бекенд платформы умного дома включает более 60 микросервисов. Микросервисная архитектура не в последнюю очередь выбрана, чтобы эффективнее утилизировать ресурсы и минимизировать паразитный трафик — мы придерживаемся подхода Green code и максимально оптимизируем платформу.

Бекенд умного дома работает с небольшими умными девайсами, и их очень много. С каждым нужно поддерживать соединение и обмениваться сообщениями — это сотни тысяч запросов. Для их обслуживания можно было пойти стандартным путём и использовать тяжелые enterprise-решения, но это привело бы к избыточному расходованию ресурсов. Вместо этого мы пишем лёгкие микросервисы на Go.

Все микросервисы — stateless и горизонтально масштабируются. Чтобы повысить устойчивость платформы, для каждого микросервиса запускается минимум два инстанса и балансировщик. Инстансов высоконагруженных микросервисов может быть больше.

Бекенд платформы хостится в облачной инфраструктуре на территории России — мы используем облако Cloud. Это тоже обеспечивает устойчивость.

Сервисы регулярно проходят аудит безопасности — как внутренний, так и внешний. Внешний выполняет компания BI.ZONE, мы проходим его в режиме White-box: у аудиторов есть доступ ко всей кодовой базе и они могут выполнять любые проверки, включая аутентифицированное сканирование.

Заключение

Платформа умного дома — это масштабно и интересно. Особенно, если вы проектируете и делаете её полностью сами. Скучать не приходится никому и у каждого из команды найдётся масса историй о вызовах, с которыми приходилось и приходится справляться.

Если вам интересно почитать про какой-то из аспектов нашей платформы подробнее — напишите об этом в комментариях, пожалуйста. Мы постараемся сделать отдельную статью на эту тему.

Комментарии (16)


  1. Ivnika
    28.11.2022 13:37
    +12

    Двоякое чувство после прочтения - информации много, но для кого она?

    Для айти сообщества? Тогда как-то обо все и ни о чем.

    Для партнеров? А разве хабр это площадка ваших партнеров? А остальным что делать.

    В общем непонятна цель статьи, как итог не очень интересно читать..

    Для потребителя? Тогда мало описания фишек и что получит пользователь.


    1. ZekaVasch
      28.11.2022 14:43
      +4

      Для контента. Работа такая - генерировать контент и за это получать деньги.


      1. Ivnika
        28.11.2022 14:52
        -1

        Есть такая профессия - Генерировать контент! (почти С)


  1. abutorin
    28.11.2022 13:38
    +19

    Умный дом Sber теперь полностью автономный

    Я то в начале подумал: "революция! никаких облаков", ан нет. Автономность от другого.


  1. shifttstas
    28.11.2022 13:42
    +1

    А зачем? есть Thread и Matter спеки - открыты и привязки к облаку нет. Какой смысл городить что-то что не совместимо с ними?


    1. mlu
      28.11.2022 22:48

      По Thread не все доки открыты простым смертным:
      https://www.threadgroup.org/thread-group#Membershipbenefits


    1. Tsvetik
      29.11.2022 12:31
      +1

      Спеки-то открыты, но matter предполагает единый центр сертификации и раздачу ключей за денюжку. В любой момент по желанию западный партнеров ключики могут "протухнуть"


      1. shifttstas
        29.11.2022 21:46

        И что? Отказываемся от LE сертификатов и идем на гостSSL? несколько странный подход.


  1. TheRaven
    28.11.2022 13:42
    +21

    Умный дом Sber теперь полностью автономный

    … сейчас все составляющие платформы контролируются нашей командой и работают на российских серверах

    «Автономный» — это когда я из роутера WAN выдёргиваю и всё продолжает работать.
    А порванная совместимость с Tuya иначе называется.


    1. olartamonov
      28.11.2022 17:52
      +9

      Надо для всех этих уникальных экосистем вводить «сортирный тест» как обязательный.

      Заключается в следующем: если выдернуть из роутера шнурок WAN, свет в сортире будет включаться?


  1. dcrm
    28.11.2022 14:29
    +9

    > Умный дом Sber теперь полностью автономный

    А можно ваши устройства напрямую подключить к domoticz/home-assistant? минуя всякие облака, что бы без интернета на моём raspberry pi/SLS шлюзе можно было спокойно всем управлять?

    Да, это идёт в разрез с коммерческим интересом абсолютно любого производителя. Но повышает безопасность и устойчивость систем.


  1. Mike_666
    28.11.2022 14:33
    +4

    Какая ж это автономность... Нужны открытые прошивки (с возможностью их обновления пользователем) и открытая реализация управляющего сервера, а то получается что покупаешь устройства-то умные, но в итоге они как бы не совсем твои.


  1. vagon333
    28.11.2022 17:21
    +5

    ...автономный

    Прочитайте определение слову "автономный".
    Вы вводите в заблуждение, а автономный Сбер при потере интернета становится "тыквой".


  1. beho1der
    28.11.2022 17:51
    +2

    Как и большинство прочитал, автономный и хотел увидеть как без интернета управлять устройствами сбера и возможность подключать любые другие с открытым API,а в статье все про облако! Мне кажется в сбере могли бы статьи пропускать для начала через технарей..... Более правильно название,как мы из китайского облако,которое нас заблокировало,переехали в свое.


  1. Measurer01
    28.11.2022 18:55
    +6

    В свете последних событий, я тоже готов покупать устройства IoT только если они будут работать при выдёргивании шнурка WAN. Пусть даже если будет определённый геморрой при разворачивании АВТОНОМНОЙ системы управления этими девайсами.

    Лично мне хотелось бы, чтобы шнурок WAN был бы нужен ТОЛЬКО для голосового управления.


  1. serafims
    28.11.2022 21:03
    +8

    Краткий вывод для тех, кому лень читать: умный дом сбера не покупать.