Microsoft Copilot: ИИ-помощник с доступом к GPT-4 и DALLE-3

Читать в полной версии

В марте 2023 года Microsoft представила 365 Copilot — офисного чат-бота на базе GPT-4, который компания позиционирует как «самый мощный инструмент повышения производительности в мире». Уже в декабре вышла общедоступная версия умного помощника для обычных пользователей, а теперь компания предлагает встроенный в ПК искусственный интеллект. «РБК Тренды» разбирались, как работает Microsoft Copilot и какие у него возможности.

Что такое Microsoft Copilot

Microsoft Copilot — это умный помощник, который объединяет возможности больших языковых моделей с данными приложений компании, в том числе календаря, электронной почты, чатов и документов. Его бесплатная версия ранее работала как чат-бот поисковой системы Bing и ОС Windows. Теперь она доступна всем пользователям в поисковике Bing, браузере Edge и Windows, а также по адресу copilot.microsoft.com. Для использования необходима только учетная запись Microsoft. Компания также выпустила приложения Copilot для iOS и Android. Кроме того, есть платная версия Copilot Pro для пользователей с рядом продвинутых функций, она стоит $20 в месяц.

Версия Copilot для Microsoft 365 работает также со всеми офисными приложениями компании — Word, Excel, PowerPoint, OneNote, Outlook и Teams. В Word помощник создает и редактирует тексты, в Excel он помогает анализировать данные, в Outlook суммирует и разбивает по темам письма, а в PowerPoint генерирует презентации. Microsoft предлагает пользователям и новые опции, например специализированную версию Copilot for Finance для автоматизации рутинных финансовых задач.

Версия Copilot для Microsoft 365 ориентирована на предприятия и учебные заведения. Версия доступна только при наличии подписки Microsoft 365 Business Standard, Microsoft 365 Business Premium, Microsoft 365 E3 и E5 или Office 365 E3 и Office E5. Опция платная и стоит $30 в месяц на одного пользователя.

Возможности Microsoft Copilot

Изначально пользовательская версия Microsoft Copilot работала на базе модели GPT-4, но теперь она предоставляет доступ к GPT-4 Turbo и генератору изображений DALL-E 3 от OpenAI. Кроме того, можно выбрать из трех стилей общения — творческий, сбалансированный и точный. Это дает пользователям широкие возможности по использованию:

• ответы на вопросы с графическими материалами и ссылками на дополнительные источники информации;
  Ответ на вопрос (Фото: copilot.microsoft.com)
• беседы с помощником. При вводе фразы «Давай поболтаем» помощник может пообщаться на отвлеченные темы. Однако число сообщений ограничено тридцатью, поэтому потребуется создавать новый чат;

• генерация текстов. Copilot может создавать сочинения, стихотворения, поздравления, деловые письма, сценарии, инструкции и многое другое;
  Инструкция от Copilot (Фото: copilot.microsoft.com)
• суммирование содержания веб-страниц и видеороликов. При этом помощник автоматически переводит их на установленный пользователем язык;

• решение математических уравнений с объяснениями благодаря поддержке технологии оптического распознавания символов. В качестве запроса могут выступать картинки из учебников;
  Решение уравнения с картинки (Фото: copilot.microsoft.com)
• операции с программным кодом. Copilot может генерировать код на различных языках, исправлять баги, писать техническую документацию, упрощать код и так далее;

• генерация изображений по текстовому описанию с помощью DALL-E 3. При этом помощник предлагает четыре варианта, которые можно редактировать: менять стиль, цветовую палитру, фон, удалять объекты или добавлять новые. Картинки генерируются в разрешении 1024×1024 пикселя;

• распознавание объектов и текста на картинках с переводом и описанием;

• решение повседневных задач. Copilot может попросить подобрать рецепты блюд, составить план на день и даже проконсультировать по спортивным тренировкам. Cooking assistant, Vacation planner и Fitness trainer выделены как отдельные сервисы.

Кроме того, в Microsoft Copilot поддерживаются плагины. Благодаря интеграции с музыкальным сервисом Suno AI помощник может сочинять 30-секундные песни с текстами и даже голосами, учитывая тематику, жанр, направление и стиль композиции. Их можно сохранять на устройстве. Плагин Adobe Express позволяет создавать детализированные изображения, логотипы, листовки и другие материалы. Интеграция со Spotify же помогает находить исполнителей, песни и тексты песен, а затем сразу переходить по ссылкам на источники.

В версии Copilot Pro доступна интеграция помощника с офисными приложениями Microsoft — Word, Excel и PowerPoint. Также она дает приоритетный доступ к новейшим моделям OpenAI и возможность создания собственного помощника Copilot GPT.

Microsoft Copilot в Windows 10 и 11

Помимо приложений и браузерной версии, Microsoft предлагает встроенную в Windows 11 версию Copilot. Она доступна и для компьютеров с Windows 10, но только если они соответствуют системным требованиям. Copilot интегрирован уже во многие фирменные приложения компании, в том числе в Paint, «Ножницы» и Clipchamp.

Помощник позволяет голосом или текстом запускать приложения, изменять громкость звука, сворачивать окна, активировать режим «Не беспокоить», очищать корзину, просматривать список Wi-Fi-сетей, делать скриншоты и многое другое.

В мае, после презентации GPT-4o от OpenAI, Microsoft также показала новую функцию демонстрации экрана в Copilot: теперь с помощником можно делиться экраном. В ходе презентации ИИ давал советы по игре Minecraft. Однако эта опция станет общедоступной позднее.

Также вскоре Copilot появится в «Настройках» и других приложениях Windows, чтобы пользователю не нужно было каждый раз запускать помощника. Например, в «Фото» будут выводиться предложения от Copilot по редактированию изображений, включая изменение стиля, размытие фона и многое другое.

Copilot+ PC

В мае 2024 года Microsoft представила версию Copilot, которая будет встроена во все компьютеры с Windows 11 и чипами Snapdragon X с нейропроцессорами. Это позволит выполнять задачи ИИ не в облаке компании, а прямо на устройстве пользователя. Как отмечают в Microsoft, это обеспечит большую конфиденциальность данных и производительность Copilot.

Главным нововведением станет функция Recall, которая будет фиксировать активность пользователя в разных приложениях, чтобы моментально формировать отчеты и выполнять поиск нужных данных. Обращаться к ней можно будет на естественном языке — например, чтобы попросить найти конкретное письмо. Информация будет храниться в формате снимков экрана в зашифрованном виде, а при желании ее можно будет отключить. Функция будет работать даже без интернета.

В рамках Copilot+ будут также доступны живые переводы Live Caption, автоматическое суперразрешение для масштабирования любого приложения, улучшенная генерация изображений и текста с помощью Cocreator и расширенные эффекты Windows Studio. Так, Cocreator в Paint сможет создавать изображения на основе текстовых подсказок и простых набросков.

Microsoft уже представила первые устройства Copilot+ PC — ноутбуки Surface и планшет Surface Pro на базе процессора Arm Qualcomm Snapdragon X Elite или Plus. Устройства начнут продавать с 18 июня по цене от $1 тыс. Свои варианты игровых ноутбуков с умными функциями также готовятся выпустить Asus и MSI.

Доступность в России

Microsoft ограничила использование Copilot в России. Доступ к веб-версии и мобильным приложениям можно получить, только изменив IP-адрес через VPN.

При этом лучше всего использовать IP с привязкой к США, хотя аккаунт Microsoft может быть российским.

Однако пользователи Windows 11 не могут воспользоваться подобным обходным путем, поскольку операционная система проверяет местоположение компьютера. В интернете можно найти инструкции, как обойти ограничение с помощью смены DNS, но это потребует некоторых усилий.

Клиент Copilot для Android недоступен в российском Google Play, а версию для iOS и iPadOS можно скачать из App Store без дополнительных манипуляций.

Также можно воспользоваться официальным Telegram-ботом Copilot. Однако он требует подтверждения номера телефона, который привязан к аккаунту в мессенджере. Эта опция недоступна, если используется российский номер.