«Яндекс» представляет масштабное обновление голосового помощника «Алиса AI». Нейросеть научилась подстраиваться под стиль общения собеседника, запоминать важные факты из диалогов и доводить пользователя до конкретного результата, а не просто выдавать справочную информацию. Кроме того, компания адаптировала Live-режим для незрячих и слабовидящих — теперь с помощью камеры смартфона они могут в реальном времени узнавать, что их окружает. Обновление было представлено на молодежном фестивале Яндекса Young Con, который проходит сегодня в Москве.
Теперь Алиса AI ориентирована не просто на выдачу справочной информации, а на достижение конкретного результата. Например, при запросе о коммунальных платежах помощник не показывает нормативы, а предлагает алгоритм расчета суммы.
Нейросеть научилась подстраиваться под стиль общения собеседника: переходить на «ты», если пользователь делает это первым, использовать сленг или давать короткие ответы на простые вопросы, сохраняя развернутость в сложных темах. Кроме того, внедрена функция персонализации — Алиса запоминает факты, упомянутые в беседах (хобби, род деятельности), и учитывает их в будущих диалогах. При желании пользователь может отключить эту опцию в настройках или запросить список того, что нейросеть о нем знает.
Также была усилена работа с визуальным контентом. Обновленная мультимодальная модель точнее интерпретирует технические схемы, таблицы и графики, а также лучше справляется с рекомендациями по выбору товаров, сравнивая их по параметрам и условиям использования.
Отдельным направлением обновления стала адаптация Live-режима в приложении «Алиса AI» для слабовидящих и незрячих пользователей. Теперь, направив камеру смартфона на объект, можно голосом задать вопрос о происходящем вокруг. Нейросеть описывает внешний вид посылки на наличие повреждений, идентифицирует лекарства, считывает сообщения с дисплеев бытовой техники, а также оценивает содержимое холодильника, предлагая варианты блюд.
В основе этой опции лежит мультимодальная нейросеть Alice AI VLM, которая распознает объекты в реальном времени. История общения с помощником сохраняется в чате. Для активации достаточно выбрать режим в меню или произнести голосовую команду (пока доступно только на Android, но в ближайшее время функция появится и на iOS).
Все нововведения уже доступны бесплатно в мобильном приложении «Алиса AI» на платформах Android и iOS. В компании отмечают, что развитие технологий цифровой доступности и улучшение диалоговых моделей направлены на то, чтобы сделать искусственный интеллект полезным инструментом в повседневной жизни для максимально широкой аудитории.