08.11.2019 11:16
marks 20 10800 Источник

Amir Cohen / Reuters

Исполнительный вице-президент и руководитель блока «Технологии» Сбербанка Давид Рафаловский заявил, что банк создал самый мощный в России суперкомпьютер. Правда, это не чисто отечественная разработка, проект реализовывался совместно с американской компанией Nvidia. Назвали систему Christofari в честь первого клиента Сберкассы Николая Кристофари.

Суперкомпьютер, по словам представителя Сбербанка — 29-й по мощности в мире и 7-й — в Европе. Производительность суперкомпьютера составляет 6,7 петафлопса. К сожалению, о стоимости реализации проекта его разработчики ничего не сообщили. Зато известно, для чего он создан.

Использовать систему будут для ускорения разработки сервисов и процессов, которые основаны на искусственном интеллекте. Сейчас возможности суперкомпьютера задействованы для распознавания и синтеза речи при анализе обращений клиентов в колл-центр банка, а также для автоматизированного робота-оператора.

«Использование ресурсов суперкомпьютера повысит эффективность решения задач в широком спектре областей, например обработке естественного языка, компьютерном зрении, автоматизированном принятии решений, оценке и управлении рисками, выявлении мошенничества, предиктивной аналитике, создании голосовых помощников и чат-ботов и др.», — сообщил Рафаловский.

По словам специалиста, система дает возможность ускорить процесс разработки продуктов на основе искусственного интеллекта, с недель и месяцев до часов и минут. Сейчас Сбербанк внедряет искусственный интеллект во многие свои сервисы и продукты, плюс сами технологии постоянно совершенствуются. Поэтому возможности Christofari нужны организации, как никогда ранее.

Кроме банка, суперкомпьютер используется клиентами SberCloud (облачная платформа Сбербанка). Кроме того, тестируют систему и представители VisionLabs — компании из экосистемы Сбербанка, которая занимается разработкой технологий распознавания лиц. «Сейчас, на базе традиционной архитектуры, они (VisionLabs) могут одновременно наблюдать на своих мощностях до 64–68 видеопотоков, с суперкомпьютером показатель увеличивается до 15 000», – отметил Рафаловский.

Представитель компании заявил, что с 12 декабря мощности суперкомпьютера смогут получить и другие компании. Правда, это не бесплатно — минута машинного времени обойдется клиентам в 5750 рублей. «У крупных компаний есть масштабные задачи, которые они хотят решать максимально оперативно без потери временных ресурсов, поэтому огромная мощность и скорость вычислений для них – это самое главное, это то, за что они готовы платить», – сообщил представитель банка. Получить доступ к компьютеру можно будет через облако.

В текущем году в рейтинг самых производительных вычислительных систем в мире вошли два российских суперкомпьютера. Они попали в рейтинг Top500. Первый из суперкомпьютеров «Ломоносов-2» Московского государственного университета. Второй суперкомпьютер принадлежит Росгидромету. Первый занимает 93-е место, его производительность 2,478 петафлопса, второй занял 364-ю позицию (1,2 петафлопса).

Суперкомпьютер Сбербанка — часть совместной с Nvidia программы сотрудничества в области искусственного интеллекта.
«NVIDIA выступила технологическим партнером проекта, предоставив Сбербанку комплексную экспертизу в области искусственного интеллекта: передовое оборудование, необходимый стек программного обеспечения, рекомендации в области создания эффективной инфраструктуры для суперкомпьютера и не только», — рассказал руководитель направления профессиональных продуктов NVIDIA Дмитрий Конягин.

По оценке специалистов компании «Инфосистемы Джет» разработка суперкомпьютера обошлась в $15–20 млн исходя из оценки в $1 млн за 0,42 петафлопс.

Кроме Сбербанка, разработала суперкомпьютер и группа «Тинькофф». Правда, эта система работает только внутри компании, мощности суперкомпьютера не сдают сторонним компаниям. «Однако использовать суперкомпьютер могут студенты финтех-школы «Тинькофф», стажеры и школьники в рамках совместных программ с региональными вузами и лабораторией искусственного интеллекта в образовательном центре «Сириус», — уточнил представитель банка.

По словам игроков рынка, разработка Сбербанка вполне может быть самым мощным суперкомпьютером в РФ. Если его производительность соответствует заявленной, то он займет место в топ-50 по СНГ.

Комментарии (20)


  1. ferosod
    08.11.2019 14:39
    #20863498
    +9

    По словам игроков рынка, разработка Сбербанка вполне может быть самым мощным суперкомпьютером в РФ. Если его производительность соответствует заявленной, то он займет место в топ-50 по СНГ.


    То есть, самый мощный суперкомпьютер РФ входит лишь в топ-50 суперкомпьютеров СНГ?


    1. Alexus819
      08.11.2019 14:45
      #20863534
      +13

      ага. и при этом:

      Суперкомпьютер, по словам представителя Сбербанка — 29-й по мощности в мире и 7-й — в Европе.


      и все это не противоречит друг другу.


    1. tmin10
      08.11.2019 19:56
      #20864818

      Судя по рейтингу и оценке мощности, он может войти в топ 50 по миру, а не снг. Автор совершенно за заморачивается проверкой фактов.


  1. staticmain
    08.11.2019 15:05
    #20863652
    +14

    NVIDIA выступила технологическим партнером проекта, предоставив Сбербанку комплексную экспертизу в области искусственного интеллекта: передовое оборудование, необходимый стек программного обеспечения, рекомендации в области создания эффективной инфраструктуры для суперкомпьютера и не только

    А что при этом сделал Сбербанк и почему заголовок говорит что это сбер что-то разработал?


    1. lexnekr
      08.11.2019 15:11
      #20863686
      +4

      Удивительнее только при чём тут «Инфосистемы Джет», которых даже постоять рядом не позвали, но они что-то комментируют.


    1. iluxa1810
      08.11.2019 15:12
      #20863690
      +4

      Схему освоения бюджета =D


    1. DrunkBear
      08.11.2019 15:14
      #20863702
      -1

      В магазинах лежат горки железа (передовое оборудование), в интернете — драйвера и оупенсорс-решения для MPP (необходимый стек ПО), рекомендации можно найти на тренингах или купить — почему же в гаражах ещё не собирают десятками суперкомпьютеры? /sarcasm
      Даже если вывезли 90% разработчиков Nvidia в Россию — вас же не смущает, что фильмы <любой> кинокомпании делают абсолютно разные люди со стороны, которым эта кинокомпания дала денег и озвучила пожелания, но в титрах на первом месте звучит гордое «продукция кинокомпании <прям вообще любой>»?


      1. duronus
        08.11.2019 15:48
        #20863894
        +4

        в любом случае, почему сбарбанк то разработал?
        Супер компьютеры не собирают в гараже потому что у гаражной фирмы нет ни опыта ни денег создать такую систему. Так же как и у сбербанка кстати


        1. DrunkBear
          08.11.2019 15:56
          #20863928
          +2

          Видимо, окончательные решения сбер принимал?
          Рекомендации — рекомендациями, а собрать, запустить и отладить многокластерную штуку == разработать.
          Хоть и не ===
          PS мне немного странна реакция: если люди говорят: вот, мы разработали новую штуку, которой не было* — всё ок, никто не смущается. Если это сказал сбер — начинаются возмущения «а причём тут сбер».
          Господа, вы же профессионалы, будьте выше личной неприязни — сбер, конечно, не корпорация добра, но только у него, росатома и газпрома есть деньги и специалисты на большие и интересные проекты.
          *на основе существующих библиотек, драйверов, железа и фреймворков, с использованием компетенций приглашённых людей
          PPS нет, я не работаю в сбере.


          1. TheShock
            08.11.2019 16:02
            #20863956
            +2

            Сбербанк купил или заказал. А не разработал


            1. DrunkBear
              08.11.2019 16:16
              #20864002
              +2

              Суперкомпьютеры не продаются на Али, их нельзя привезти, поставить в угол дома (подальше от бассеина с бегемотами), включить и работать — нужно подготавливать помещение, разбираться данными (без них суперкомпьютер — это модерновый обогреватель), протянуть пару километров оптоволокна, интегрировать его в существующие системы, настраивать разделение ресурсов и прочие очереди с приоритетами и решить ещё пару тысяч задач — тут приехавшие звёзды не справятся. Про архитекторов систем вообще молчу — думаю, это был очень весёлый челленж, формата «а теперь со всей этой х… ей мы попробуем взлететь».
              Поэтому и пишут «совместно с ..».


          1. ElvenSailor
            12.11.2019 11:43
            #20875970

            Поддержу предыдущего оратора.


            При всей нелюбви к сберу, и при всём огромном желании орать "да это им нвидиа собрала, а сбер рядом постоял", всё же там есть и хорошие инженеры.


            Даже если собирали из готовых "кирпичей", ±доступных — спроектировать, правильно закупить, приткнуть его к существующим системам и не зафакапить при этом ничего, тоже задачка не так проста как кажется.


            Что они на нём делать будут, это уже другой вопрос.


    1. tuxi
      08.11.2019 17:34
      #20864336

      оплатил наверное.


  1. waisberg
    08.11.2019 15:15
    #20863708
    +4

    Сбер, ты опоздал с майнингом :)


    1. silvestr22
      08.11.2019 16:23
      #20864034
      +3

      Скупали карты тоннами, а когда все таки собрали оказалось что майнинг уже не выгоден.
      Что же делать чешут голову менеджеры?
      И вот он ответ!
      — Сбербанк разработал самый мощный в РФ суперкомпьютер!


  1. namikiri
    08.11.2019 16:24
    #20864040
    -1

    Теперь тырить таблички из Way4 можно с большей скоростью!


  1. ideological
    08.11.2019 17:26
    #20864304

    Обычно такие компании ничего не разрабатывают. Всё покупают через контракты, даже мелочи вроде поднять sql-базу на серваке.


  1. nomadmoon
    08.11.2019 20:21
    #20864880

    Надеюсь когда его включат он прогреется, проанализирует данные и скажет «Сбербанковцы! Хватит впаривать ваш Сбербанк Премьер всем подряд по три раза»!


  1. alexunder
    10.11.2019 06:17
    #20867970

    Замечу, что и в рейтингах суперкомпьютеров участвуют далеко не все суперкомпьютеры. Как пример, представьте мощности Amazon, Microsoft, Google etc


  1. a5b
    10.11.2019 07:30
    #20867982

    В публикации https://nplus1.ru/news/2019/11/09/christofari-sberbank есть заявление неясного происхождения, что в составе компьютера "Christofari" используется 75 машин DGX-2:


    Christofari состоит из объединенных в систему 75 узлов NVIDIA DGX-2, каждый из которых, в свою очередь, включает 16 полностью связанных графических процессоров NVIDIA Tesla V100. Модули DGX-2 сами по себе являются полноценными компонентами для решения задач масштабных машинного обучения и других видов высокопроизводительных вычислений. Всего в Christofari, таким образом, используется 1200 графических процессоров.

    Каждый DGX-2 имеет пиковую скорость в 120 TFLOPs на формате FP64, именно такие операции измеряют для рейтинга Top500 — https://www.anandtech.com/show/12587/nvidias-dgx2-sixteen-v100-gpus-30-tb-of-nvme-only-400k. 2 петафлопса на каждый dgx-2 получают только при использовании тензорных ядер "Tensor: 1920 TFLOPs" (точность fp16; "Tensor cores perform a fused multiply add, where two 4 x 4 FP16 matrices are multiplied and then the result added to a 4 x 4 FP16 or FP32 matrix. The result is a 4 x 4 FP16 or FP32 matrix")


    75 dgx-2 дают общую теоретическую скорость в 9 пфлопс, и на задаче для top500 вполне могли достичь 6.7 пфлопс, т.е. порядка 75% ("Производительность суперкомпьютера составляет 6,7 петафлопса").
    V100 использовались в 10% систем top500 https://www.top500.org/statistics/list/ -> Category Accelerator/Co-Processor.


    В статье https://www.cnews.ru/news/top/2019-11-08_sberbank_zayavil_o_sozdanii запутались в разных флопсах, но приводят приблизительную стоимость одной DGX2 — "… ее стоимость на момент анонса составляла $399 тыс."