Microsoft Copilot теперь может видеть то, что вы видите, в режиме реального времени и говорить с вами об этом.

Вам нужно второе мнение о чем-то, что вы смотрите в Интернете? Теперь у вас может быть помощник на базе искусственного интеллекта.

Microsoft Copliot оказался достойным конкурентом ChatGPT. По мере того как ChatGPT продолжает развиваться, развивается и Copilot, но в последнее время он отстает. Однако этого последнего обновления может быть достаточно, чтобы вернуть конкурентное преимущество.

В четверг Microsoft представила Copilot Vision, систему, с помощью которой Copilot может просматривать и понимать контекст того, что вы делаете в Интернете, чтобы оказывать устную помощь в режиме реального времени, доступную в предварительной версии для подписчиков Pro через Copilot Labs.

Когда пользователь включает Copilot Vision, он может читать вместе с вами, обсуждать проблемы, с которыми вы сталкиваетесь во время просмотра, анализировать ваш сайт и предоставлять информацию на основе того, что он видит. По сути, это помощник для всех ваших потребностей в просмотре страниц — он всегда на связи, когда вам это нужно.

У меня была возможность продемонстрировать эту функцию на мероприятии Microsoft Copilot и Windows в Нью-Йорке в октябре, где я стал свидетелем реальных приложений, которые продемонстрировали некоторую ценность помощи Copilot Visions.

В моей демонстрации пользователь обратился к Copilot Vision за помощью в выборе вдохновения для наряда из Pinterest. Copilot Vision предложил наряд из всех вариантов на странице и поддержал пользователя, когда пользователь сказал, что, по его мнению, у него нет того, что нужно, чтобы снять этот наряд. Это взаимодействие происходило вербально, что делало его естественным опытом.

Другие примеры реального использования, которые Microsoft предоставила для Copilot Vision, включали помощь пользователям с праздничными покупками, указывая на продукты на странице, которые соответствуют тому, что они ищут, или помощь им в планировании дня в музее, выделяя важную информацию, которую нужно знать, прежде чем отправиться в музей. путешествие.

Новый интерфейс реализован в Microsoft Edge, расположенном в нижней части браузера. Copilot Vision сначала будет доступен ограниченному числу подписчиков Copilot Pro в США через Copilot Labs и первоначально будет работать только на избранном количестве веб-сайтов. Собирая отзывы, Microsoft заявляет, что расширит доступ.

Для пользователей, обеспокоенных конфиденциальностью, Microsoft заявляет, что она будет полностью согласна, давая пользователю контроль над тем, хотят ли они, чтобы Copilot видел их активность в Интернете. Согласно сообщению в блоге, даже для тех, кто решит подписаться, все данные, переданные Copilot во время этого сеанса, включая то, что вы говорите, и контекст, которым вы делитесь, будут удалены, согласно сообщению в блоге.

Подписка Copilot Pro стоит 20 долларов в месяц. Он включает в себя другие привилегии, такие как приоритетный доступ к новейшим моделям, расширенный доступ к Copilot Voice и Copilot в некоторых приложениях Microsoft 365, включая Word, Excel, PowerPoint, OneNote и Outlook.