Meta раскрыла новые возможности агента Muse

На ежегодной конференции Connect в Менло-Парке Meta представила целый набор новых возможностей своего ИИ-агента Muse, запущенного в начале сентября. По словам главы компании Марка Цукерберга, агент, у которого есть собственный физический аватар по имени Jolly, подключается к приложениям и сервисам пользователя, включая почту и календарь, и работает на мультимодальной модели Muse Spark. Одно из главных объявлений — скорое появление персонального цифрового аватара, с которым можно будет разговаривать по видеосвязи в реальном времени; за эту функцию отвечает отдельная модель Muse Realtime Avatar. Muse также появится в умных очках Meta: активировать агента можно будет по имени, а поручать ему — ведение тренировки, запись приёмов пищи, бронирование и покупку товаров, причём работать он будет в фоне и сообщать о завершении задачи. Отдельно объявлено о переносе работы агента на Mac: он сможет управлять любым приложением на рабочем столе, а также получит собственный адрес электронной почты, чтобы подключаться к переписке от имени пользователя. Для покупок Meta заключила партнёрства со Stripe, Shopify и PayPal, а также с Best Buy, Gap, Sephora, Walmart, Wayfair и Expedia, а список коннекторов пополнили GitHub, Granola и Notion. Компания открыла платформу для сторонних разработчиков коннекторов и получила более 1500 заявок менее чем за неделю, при этом Muse остаётся бесплатным на большом объёме токенов — Meta рассчитывает зарабатывать на небольшой комиссии с транзакций.