Meta добавила AI-аватары в реальном времени в приложение Muse
Фотография, рисунок, животное или предмет могут стать живым собеседником с синхронизированными голосом и движениями.
Meta запускает Muse Realtime Avatar в приложении Muse в США. Функция дает личным агентам визуальный образ, который говорит и двигается во время живого разговора.
В качестве исходника можно использовать портрет, рисунок в полный рост, изображение животного или обычного предмета. Система синхронно генерирует речь, мимику, жесты рук и движения тела, стараясь сохранять персонажа между репликами. Muse Realtime Voice и модель аватара используют общий поток речевых токенов — по словам Meta, это помогает согласовать голос, движение губ и выражение лица.
Компания сообщает о задержке примерно 870 миллисекунд между концом реплики пользователя и первым байтом синхронного аудио- и видеоответа. Поток идет в разрешении 448×768 при 25 кадрах в секунду. После оптимизаций один ускоритель GB200, по данным Meta, обслуживает около 12 одновременных видеосессий.
Запуск превращает исследовательскую демонстрацию в потребительскую функцию для живых вымышленных или персонализированных собеседников. Meta встраивает в видео невидимую маркировку Video Seal и ограничивает Muse пользователями старше 18 лет.
