Глава Meta Марк Цукерберг представил новые функции ИИ-агента Muse на ежегодной конференции Connect в Менло-Парке. Компания делает ставку на то, что агент станет персональным помощником для повседневных задач.

Muse подключается к приложениям и сервисам пользователя, в том числе к электронной почте и календарям. Агент работает на базе мультимодальной модели Muse Spark. Meta позиционирует Muse как доступного помощника, который позволяет автоматизировать повседневные задачи. Пользователи смогут выбирать, где использовать агента, в том числе на умных очках Meta.

«Центральное место в нашем видении того, что мы создаём, занимает Muse», — сказал Цукерберг. По его словам, он ожидает, что агент превратится в персональный сверхинтеллект, которым миллиарды людей по всему миру будут пользоваться для достижения своих целей и улучшения жизни.

Цукерберг также считает, что Muse сможет приносить деньги пользователям, а со временем — и Meta. «Мы подтверждаем серьёзность своих намерений тем, что предоставляем Muse бесплатно большой объём токенов. Рассчитываем, что со временем будем получать небольшую комиссию от транзакций», — заявил он.

Цифровой аватар для Muse

Пользователи смогут создать для своего агента отдельный цифровой аватар и общаться с ним по видеосвязи в реальном времени. Для этой функции Meta разработала новую модель Muse Realtime Avatar.

Аватар придаст ИИ-сервису лицо, тело и голос. Пользователи смогут разговаривать с ним вживую, поручать ему задачи и задавать вопросы. Meta продемонстрировала функцию на сцене конференции Connect.

Muse на умных очках Meta

Meta интегрирует Muse со своими умными очками. Пользователи смогут обращаться к агенту голосом; для его активации предусмотрено ключевое слово.

Агент сможет сопровождать пользователя во время персональной тренировки, записывать приёмы пищи, бронировать встречи и помогать покупать товары, которые тот увидел. Muse будет выполнять задачи в фоновом режиме и сообщать о завершении.

Управление компьютером Mac

Meta переносит функции работы с компьютером в Muse на Mac. Пользователи смогут поручать агенту задачи, а тот — работать с приложениями на компьютере. Как и другие ИИ-агенты, например решения OpenAI и Anthropic, Muse сможет взаимодействовать с приложениями на рабочем столе пользователя.

«Он может помочь вам вести небольшой бизнес или просто выполнить за вас работу», — сказал главный специалист Meta по ИИ Александер Ван. «Вы можете отойти от компьютера, а он продолжит выполнять порученные ему задачи».

Отдельный адрес электронной почты

Meta разрабатывает для Muse собственный адрес электронной почты. Пользователи также смогут добавлять агента в переписку или пересылать ему письма, чтобы он обработал их от имени пользователя.

Покупки, платежи и интеграции

Meta заключила партнёрства, связанные с покупками, с компаниями Stripe и Shopify. По словам Вана, Muse сможет самостоятельно обращаться ко всему каталогу товаров Shopify, а также использовать Link by Stripe и Shop Pay для покупок в интернете. Meta также расширила поддержку платежей через PayPal.

Компания объявила о партнёрствах с Best Buy, Gap, Sephora, Walmart и Wayfair. Muse сможет подключаться к приложениям этих продавцов, а также к Expedia и Instacart. Среди других интеграций — GitHub, Granola и Notion.

Meta хочет подключать к Muse и малый бизнес. Компания открыла платформу для разработчиков, которые могут создавать собственные «коннекторы». По словам Вана, Meta получила более 1 500 заявок за срок менее недели. «Я думаю, это может стать уникальной возможностью для поколения разработчиков — начать создавать решения для новой платформы по мере её развития. Отклик пока очень хороший», — сказал он.