Meta добавляет в Muse голосовые беседы в реальном времени и выразительные аватары [видео]

Meta начинает внедрять голосовые диалоги в реальном времени и выразительные аватары для Muse, позволяя пользователям общаться с ИИ-агентом на мобильных устройствах, в интернете и на Mac. Обновление сначала станет доступно в США после предварительного показа на Connect 2026.

Чтобы начать разговор, пользователи могут нажать значок телефона в правом верхнем углу приложения. Голосовой режим поддерживает перебивания: можно сразу задать уточняющий вопрос, не дожидаясь окончания ответа. Доступны сотни голосов, в том числе стили, вдохновлённые жителями Нью-Йорка и пиратами; выбор можно изменить в любой момент.

Аватар добавляет к разговору визуальный отклик: он использует соответствующие тону беседы выражения лица и жесты, пока слушает и говорит. Пользователи могут оставить только голос, показывать аватар рядом с чатом или развернуть его на весь экран. Это разговор с анимированным ИИ-персонажем, а не видеозвонок с другим человеком.

Meta предлагает использовать эту функцию, чтобы развить идею, спланировать поездку или отрепетировать собеседование либо презентацию. По словам компании, Muse может продолжать работу над задачей, пока пользователь разговаривает с ним, — благодаря этому запрос можно постепенно уточнять в диалоге, а не формулировать одним письменным промптом.

В основе этого опыта лежат технологии Muse Realtime Voice и Muse Realtime Avatar. В техническом пояснении Meta описывает общий поток речевых токенов, который управляет и голосовым ответом, и сгенерированным видео аватара, синхронизируя голос, движения губ и выражения лица.

Директор Meta по ИИ Alexandr Wang поделился демонстрацией нового режима: аватар собаки отвечает на его просьбу дать совет:

Изначально Muse был запущен как персональный ИИ-агент для выполнения таких задач, как отправка электронных писем, покупки и планирование поездок. Голосовые диалоги также появятся в AI Glasses и Muse Charm, однако эти версии не входят в первую волну запуска.

Сервис предназначен для пользователей от 18 лет. Жители США смогут опробовать новые функции в приложении Muse или на сайте Muse, когда обновление станет доступно их аккаунтам.