Meta активно розширює можливості свого персонального агента ШІ Muse, який запустили лише кілька тижнів тому. Під час щорічної конференції Connect компанія показала нові функції, інтеграції та способи взаємодії з агентом. Muse зможе працювати з електронною поштою, комп’ютером, розумними окулярами та онлайн-магазинами, а в майбутньому отримає власний цифровий аватар.
Агент ШІ Muse
Гендиректор Meta Марк Цукерберг відкрив презентацію Connect саме розповіддю про Muse. Це інструмент створений для виконання повсякденних завдань замість користувача. Він може підключатися до різних програм і сервісів, працювати між пристроями та отримувати доступ до електронної пошти й календаря. Агент працює на основі мультимодальної моделі Muse Spark, яку Meta розробила спеціально для виконання завдань.
Цукерберг очікує, що з часом Muse перетвориться на персональний суперінтелект, яким користуватимуться мільярди людей. При цьому Meta вже думає про заробіток на агенті. Компанія планує залишити Muse безкоштовним для великої кількості завдань, а в майбутньому отримувати невелику комісію з транзакцій, які він здійснюватиме.
Muse Realtime Avatar
Одна з нових функцій дозволить створити для Muse окремий цифровий аватар. З ним можна буде спілкуватися через відеочат у реальному часі, ставити запитання та давати завдання.
Для цього компанія Meta розробила модель Muse Realtime Avatar. Фактично безликому помічнику ШІ хочуть додати обличчя, голос і тіло. На презентації компанія показала, як такий аватар може вести розмову з користувачем у реальному часі.
Виглядає це вже ближче до цифрового персонажа, ніж до звичайного чатбота. І тут у Meta явно проглядається зв’язок із її давньою ідеєю метавсесвіту.
Muse працюватиме через розумні окуляри
Ще одна важлива інтеграція стосується розумних окулярів Meta. Користувач зможе звертатися до Muse просто голосом, не дістаючи смартфон.
Агент зможе допомагати під час тренувань, записувати інформацію про їжу, бронювати зустрічі та допомагати купувати товари, які людина побачила перед собою. Muse також зможе працювати у фоновому режимі й повідомляти користувача, коли завершить завдання.
Meta планує запустити цю можливість протягом найближчих місяців.
ШІ зможе керувати Mac
Muse також навчать працювати з комп’ютером. На Mac агент зможе керувати програмами на робочому столі та виконувати доручені завдання. Наприклад, користувач зможе залишити Muse працювати над певною справою та відійти від комп’ютера. Агент продовжить виконувати завдання самостійно.
Meta окремо наголошує на використанні цієї можливості для малого бізнесу. Тобто Muse хочуть зробити не просто помічником для пошуку інформації, а своєрідним цифровим працівником, якому можна доручити частину роботи.
У Muse з’явиться власна електронна пошта
Оскільки агент має працювати у фоновому режимі, Meta планує створити для нього окрему електронну адресу.
Користувачі зможуть додавати Muse до листування або пересилати йому електронні листи для обробки. Тобто агент зможе отримувати завдання не лише через чат чи голосові команди, а й безпосередньо з пошти.
Meta підключає магазини та інші сервіси
Окремий напрям розвитку Muse пов’язаний із покупками. Meta вже уклала партнерства зі Stripe та Shopify, завдяки чому агент зможе працювати з каталогами товарів і допомагати оформлювати покупки.
До системи також підключаються Best Buy, Gap, Sephora, Walmart і Wayfair. Серед інших сервісів, з якими працюватиме Muse, Meta назвала Expedia та Instacart. Агент також отримає конектори для GitHub, Granola та Notion.
Для оплати компанія розширює підтримку PayPal, а через Shop Pay Muse зможе оформлювати покупки в інтернеті.

