Мы побывали на презентации «Алиса, что нового?», на которой Яндекс представил новые нейросетевые функции. Показали универсальную нейросеть Алиса AI, которая доступна не только в чате, но и в браузере, и скоро появится в носимых устройствах. В этой статье рассказываем обо всех анонсах.

Алиса AI

Алиса AI — универсальная нейросеть, в чате с которой можно решать повседневные задачи. В ответ на запрос пользователь получает текст, картинки, видео и полезные данные из «Яндекс Карт». Новая нейросеть уже доступна в «Поиске», в приложении «Алиса» и на сайте alice.yandex.ru. 

В ближайшее время она научится помнить дела пользователя, напоминать о важных событиях и выполнять поручения с помощью агентов. Например, можно будет надиктовать голосом, что предстоит сделать, а Алиса разложит поток мыслей и списков в структурированную запись с напоминаниями. Для доступа к функции в числе первых надо зарегистрироваться в очереди.  

Кроме того, Алиса AI теперь лучше помогает по школьным предметам: русскому языку, литературе, истории, математике, геометрии и английскому языку. Например, с помощью нейросети можно проверить пунктуацию, разобрать слово по составу или решить систему уравнений. Она распознаёт таблицы, формулы и рукописный текст. Обучать нейросеть для образовательных задач помогали учителя.

Мы выяснили технические детали Алиса AI. Под капотом работают самые производительные модели «Яндекса» — теперь они называются Alice AI LLM, Alice AI Art и Alice AI VLM. Для улучшения и оценки качества ответов Алисы AI разработчики собрали корзину, состоящую из тысяч наиболее востребованных у пользователей ИИ-продуктов задач. Например, согласно внутренним замерам на собранной корзине, Алиса AI превзошла китайскую DeepSeek.

Alice AI LLM — языковая модель на базе архитектуры MoE (Mixture of Experts). В разработке использовали метод обучения с подкреплением с многокомпонентными наградами. Для этого компании потребовалось перестроить свою ML-архитектуру. В результате в попарном слепом сравнении ответов новая модель побеждает предыдущую в 70 из 100 случаев.

Технологию генеративного поиска и LLM объединили в новый пайплайн. Это позволяет нейросети использовать в инференсе не только текст, но и другие объекты — изображения, карточки организаций, карты, видео. LLM может отправлять последовательные запросы в «Поиск», чтобы собрать недостающую информацию для ответа.

Alice AI VLM — визуально-языковая модель, которая отвечает за распознавание образов. Для её обучения разработчики собрали новый датасет, состоящий из изображений, текстов и мультимодальных документов. Для тренировки использовали метод Reinforcement Learning (RL). В полной мере модель раскрывается в задачах по геометрии, которые обычно включают в себя как текст, так и схематичные иллюстрации, а также при распознавании рукописного текста. 

Alice AI ART — новая «картиночная» модель, в которой инженеры улучшили соответствие сгенерированных изображений запросам пользователей. Для этого пересобрали датасет, чтобы он содержал примеры картинок для всех популярных у пользователей стилей и направлений с подробными описаниями. Также разработчики добавили в модель механизм экспертов: одна копия модели дообучена на генерацию низкочастотных деталей (например, общая композиция), а другая — высокочастотных (детали, текстура). Всё это позволило повысить релевантность ответов модели на 40%. 

Агенты в Алисе AI

В раннем доступе появились ИИ-агенты, с помощью которых можно бронировать столики в ресторанах, записываться в салоны красоты, находить товары дешевле или проводить подробные исследования. Для доступа к агентам надо зарегистрироваться в очереди.

Для бронирования столика или слота в салоне красоты или парикмахерской достаточно написать в чате: «Забронируй на 19 часов стол для 4 человек в ресторане с римской пиццей на Парке Культуры» или «Запиши меня на женскую стрижку на завтра в 10 часов в тот же салон, что и в прошлый раз». Нейросеть проверит информацию, сопоставит её с историей посещений, уточнит детали и оформит бронь. Если указанное время уже занято или в заведении нет мест, то Алиса предложит альтернативные варианты с учётом предпочтений пользователя.

С помощью Алисы AI можно будет забронировать слот в 40 тысячах бьюти- и других организаций, а также стол в более чем 30 тысячах ресторанов России.

Для поиска более низкой цены в чат надо отправить ссылку на товар или нажать кнопку «Найти дешевле» на странице в «Яндекс Браузере». После этого Алиса изучит предложения от маркетплейсов и локальных сайтов, найдёт более выгодные позиции и выведет их в чат.

Если пользователю нужно детально разобраться в теме, сделать расчёты или анализ, поручить задачу можно будет агенту исследования. Нейросеть изучит и проанализирует множество сайтов и документов в интернете, а также файлы, изображения и ссылки, которые пользователь сможет добавить для более подробной оценки. Если для ответа нужно будет сделать расчёт или проверить итоги анализа, Алиса AI напишет и запустит код.

Алиса AI в «Яндекс Браузере»

В «Яндекс Браузере» также появилась поддержка Алисы AI. Она может решать задачи пользователей с текстовыми документами, видео, открытыми страницами, совершать действия во внешнем мире с помощью ИИ-агентов и отвечать на вопросы в умной строке на стартовом экране.

Алиса AI может работать с содержимым открытой вкладки. Например, можно попросить нейросеть найти все нужные цитаты о «Евгении Онегине» в 500-страничной PDF-статье или узнать, что лектор рассказал о чёрных дырах в видео про космос. Если пользователь захочет продолжить изучение темы, сделать это можно будет в том же чате.

Носимые устройства с Алисой AI

Финалом мероприятие стал анонс носимых устройств с поддержкой Алиса AI. Пользователи смогут проговаривать идеи, планы, заметки и любую информацию, которую важно не забыть. Нейросеть будет преобразовывать их в структурированные списки, заметки и напоминания. К ним можно будет в любой момент вернуться в чате с Алисой AI или через голосовой интерфейс носимого устройства. С помощью гаджета также можно будет создавать задачи для агентов. Например, попросить записать на стрижку.

Устройства поступят в продажу в следующем году.