Новые функции в Microsoft Copilot: память, выполнение задач в сети, Copilot Vision и Deep Research

Автор:

На мероприятии, посвящённом 50-летию Microsoft, компания анонсировала крупное обновление своего ИИ-помощника Copilot. Новые функции призваны сократить разрыв с точки зрения функциональности между Copilot и ведущими ИИ-сервисами, такими как ChatGPT, Gemini и Claude.

Итак, в ближайшее время Microsoft Copilot получит собственную память, расширенные возможности персонализации, сможет выполнять действия в интернете от имени пользователя, создавать подкасты, анализировать изображение с камеры и экрана, проводить углубленные исследования и многое другое.

Память

Одним из ключевых нововведений смело можно назвать функцию «Память». С её помощью Copilot сможет запоминать предпочтения пользователям, его интересы, а также личные данные, например, день рождения. Эта информация будет использоваться для адаптации ответов, предоставления более релевантных советов и предложений.

Microsoft подчёркивает, что пользователи смогут контролировать, какую информацию сможет запоминать Copilot. Также вы сможете полностью отключить эту функцию.

Внедрение функции «Память» является частью стратегии Microsoft по созданию более персонализированного ИИ-помощника Copilot. Работа в этом направлении находится на ранней стадии, но Microsoft обещает, что в будущем у каждого пользователя будет помощник с собственным уникальным стилем и сочетанием качеств.

Функция «Действия»

Новая функция «Действия» (Actions) позволяет искусственному интеллекту выполнять задачи в сети с помощью веб-браузера. Например, Copilot сможет забронировать билеты на мероприятие, зарезервировать столик в ресторане или совершить покупку. Особенно полезной эта функция будет в сочетании с новыми возможностями для шопинга, благодаря которым Copilot сможет исследовать товары и искать скидки. Действия могут выполняться в фоновом режиме, а в это время пользователь может быть занят другими делами.

На момент запуска функция «Действия» будет поддерживать следующие сервисы:

  • Для путешествий: Booking.com, Expedia, Kayak, Tripadvisor, Skyscanner, Viater, Vrbo, Priceline.
  • Бронирование ресторанов: Open Table.
  • Заказ цветов: 1-800-Flowers.com

При этом Microsoft заявляет, что Copilot с помощью функции «Действия» сможет работать с большинством веб-сайтов. Он даже сможет помочь организовать поездку домой после мероприятия, что может говорить о поддержку сервисов для заказа такси и совместных поездок.

Copilot Vision

Ранее функция Copilot Vision была доступна только для анализа веб-страниц в браузере Microsoft Edge. Теперь компания об]явила, что функция появится в приложении Copilot для Windows и мобильных устройств под управлением Android и iOS.

В операционной системе Windows функция Copilot Vision сможет анализировать информацию на экране компьютера и предоставлять пользователю подсказки по использованию функций, например, в Adobe Photoshop.

В отличие от функции Recall на ПК Copilot+, Copilot Vision больше напоминает демонстрацию приложения или всего рабочего стола в Microsoft Teams.

Участники программы Windows Insider смогут опробовать функцию Copilot Vision уже на следующей неделе. Остальным пользователям она станет доступна после завершения тестирования.

На мобильных устройствах Copilot Vision сможет в реальном времени анализировать видео с камеры смартфона, предлагая, например, советы по уходу за растениями или идеи для декора дома. Опробовать функцию можно уже сейчас в приложении Copilot для iOS и Android.

Deep Research

Также в Microsoft Copilot появится функция «Углублённое исследование» (Deep Research), предназначенная для анализа большого количества документов или онлайн-источников. Функция интегрирована с поисковой системой Bing.

Страницы

«Страницы» (Pages) — новый инструмент, позволяющий превратить разрозненные заметки, контент и исследования в упорядоченный «холст». Copilot организует, упрощает данные и помогает пользователю на всех этапах работы — от первого черновика до финальных правок, позволяя легко дорабатывать и продолжать работу в любое время.

Подкасты

Теперь Copilot может генерировать персонализированные ИИ-подкасты на основе интересов пользователя или предоставленных материалов (например, исследований, веб-сайтов, планов на отпуск или покупку дома).

Подскаты — это простой, увлекательный и оригинальный способ получения информации с минимальными усилиями. Во время прослушивания можно продолжать взаимодействовать с Copilot для уточнения информации.

Этот аудиоформат поможет вам решить сложные проблемы, изучить новое хобби или просто избавиться от бесконечного скроллинга.

Copilot Search в Bing

Microsoft трансформирует веб-поиск, объединяя традиционные и генеративные методы. Copilot Search проверяет информацию на нескольких сайтах и предоставляет подробные, комплексные ответы с цитируемыми источниками прямо на странице результатов Bing. Результаты выдачи дополняются вариантами для дальнейшего изучения темы.