Мой практический опыт работы с новым Microsoft Copilot: три функции, которые меня впечатлили

خلال Microsoft празднует свое 50-летиеКомпания анонсировала несколько обновлений своей системы Copilot на базе искусственного интеллекта, стремясь сделать ее более эффективной, персонализированной и доступной на более широком спектре платформ.

Затем Microsoft организовала несколько станций, чтобы опробовать различные аспекты новых возможностей Copilot, от подкастов до покупок и персонализации (если вы хотите, чтобы Copilot выглядел как Clippy, теперь это возможно). Вот три функции, которые меня больше всего впечатлили.

Copilot Vision: подробный взгляд

Copilot Vision — это передовая функция, призванная предоставить пользователям возможность более интеллектуального и эффективного взаимодействия с цифровым и физическим окружением. Эта технология основана на интеграции технологий искусственного интеллекта, в частности, обработки изображений и видео, для понимания и анализа визуального контента. Представьте, что Copilot способен «видеть» то же, что видите вы, будь то печатный документ, сложный веб-сайт или даже реальная сцена, снятая камерой вашего телефона.

Аналитические данные Copilot позволяют находить широкий спектр практических применений: от улучшения доступности для людей с ограниченными возможностями (например, для описания содержимого изображений для слепых) до повышения производительности труда (например, для автоматического извлечения данных из счетов-фактур или договоров). Благодаря этим данным Copilot может понимать контекст изображения или видео, распознавать его элементы и предоставлять релевантную информацию или рекомендации. Например, если вы просматриваете рецепт, Copilot может предложить альтернативные ингредиенты или дать советы по приготовлению. А если вы просматриваете сайт электронной коммерции, он может помочь вам быстрее и точнее находить нужные товары.

Концепция Copilot — мощный инструмент, преобразующий наше взаимодействие с технологиями. Она делает технологии проще в использовании, интеллектуальнее и более адаптируемыми к нашим индивидуальным потребностям. По мере развития технологий искусственного интеллекта можно ожидать, что концепция Copilot станет ещё более совершенной и сможет лучше понимать окружающий нас мир. Это, в свою очередь, откроет путь к новым и инновационным приложениям, которые раньше невозможно было представить, ещё больше укрепив позиции Copilot как интеллектуального и надёжного партнёра в нашей повседневной жизни.

♬ влог. TikTok. Чилл-хоп.(1245459) – table_1

Microsoft CopilotНовый претендент на рынке мобильного ИИ в условиях жесткой конкуренции

Начав свою деятельность как встроенный помощник для ПК на базе Windows, Copilot превратился в мобильное приложение, конкурируя с такими приложениями, как Google Gemini, Samsung AI и, в конечном итоге, Apple Intelligence. Это расширение призвано позиционировать Copilot как сильного конкурента на рынке персональных помощников на базе искусственного интеллекта.

Теперь с приложением Copilot вы можете навести камеру телефона на различные объекты и задать практически любой вопрос. Эта новая функция позволяет пользователям взаимодействовать с окружающим миром более интеллектуальным и интерактивным способом.

Например, во время одной из демонстраций представитель Microsoft направила свой телефон на камеру и спросила Copilot, какой это тип камеры и как ее правильно настроить, чтобы делать хорошие портретные снимки.

Второй пилот назвал точную модель, а затем показал ей, как настроить диафрагму, и даже указал нужное кольцо на объективе камеры. Это демонстрирует способность второго пилота понимать тонкие детали и давать практические рекомендации.

Copilot также смог быстро идентифицировать копию картины Дега «Маленькая танцовщица» и предоставить информацию о стоимости аналогичной модели. Эта способность распознавать объекты и предоставлять релевантную информацию делает Copilot ценным инструментом для потребителей.

Даже на настольных компьютерах Copilot получает новые возможности. Ранее он мог взаимодействовать лишь с несколькими приложениями на компьютере, такими как Live Captions и Cocreator в Paint, но теперь его можно использовать с любым приложением на компьютере, где установлен Copilot. Эта более широкая интеграция открывает новые возможности для повышения производительности и раскрытия творческих способностей пользователей.

В демонстрации, которую я видел, вы сначала предоставляете Copilot доступ к приложению, которое хотите использовать (появляется окно с кнопкой-переключателем для каждого запущенного приложения), а затем вы можете спросить его, как выполнять определенные функции в этом приложении.

Например, при монтаже фильма вы можете попросить Copilot помочь с переходами между клипами. Copilot не только даст советы, но и укажет, где именно найти этот инструмент. Эта функция делает Copilot ценным помощником как для профессионалов, так и для новичков.

покупки

Шопинг — неотъемлемая часть повседневной жизни, будь то покупка товаров первой необходимости или развлечений. Шопинг включает в себя широкий спектр действий: от посещения традиционных магазинов до онлайн-покупок на таких платформах, как Amazon, или непосредственно на сайтах компаний. В этом разделе мы рассмотрим различные аспекты шопинга, включая типы магазинов, стратегии разумного шопинга, способы использования предложений и скидок, а также права потребителей и порядок возврата и обмена товаров. Мы также рассмотрим влияние шопинга на социальные сети, такие как Facebook и Instagram, и то, как компании используют эти платформы для продвижения своих товаров и увеличения продаж.

Какой толк от искусственного интеллекта, если он не может помочь вам с покупками? Это ещё одна ключевая функция, на которой сосредоточился сервис Amazon Alexa+ AI, и мы с нетерпением ждём его тестирования.

С помощью Copilot вы также можете навести камеру телефона на любой товар и спросить приложение, где его можно купить. В демонстрации, которую я смотрел, товаром были наушники.

Другой пример: я искала рецепт шоколадного торта и, найдя понравившийся рецепт, попросила Copilot добавить все ингредиенты в мой список покупок. Затем приложение отправило весь список в Instacart, службу доставки продуктов.

Мне не терпится проверить, смогу ли я легко перечислять, добавлять и удалять товары, как я это видел в демоверсии Alexa+. Если да, то Copilot может стать очень полезным инструментом для управления ежедневными покупками и поручениями.

Глубокое исследование

Последняя функция, которая привлекла моё внимание, — это не полноценная демоверсия, поскольку она пока недоступна, но, похоже, она будет очень мощной. «Deep Research», как её называют, станет вашей личной Википедией.

Хотя это не совсем новая функция (аналогичная функциональность доступна в Gemini 2.0 и ChatGPT), она ставит искусственный интеллект Microsoft на один уровень с конкурентами.

После запуска вы сможете задать тему, указать критерии, и сервис выполнит поиск и анализ тысяч документов и изображений, а затем предоставит полный отчёт со ссылками на источники. Представьте, что вы используете его для маркетинговых исследований, анализа конкурентов или даже для подготовки научных отчётов.

Эта технология (или что-то похожее) также должна стать основой новой функции подкастов Copilot: вы можете указать тему, и приложение создаст для вас 5-минутный подкаст на эту тему. Эта функция открывает новые возможности для быстрого и простого создания аудиоконтента.

Обзор перспектив

Многие функции, анонсированные Microsoft на этой неделе в Copilot, не являются особо инновационными в плане искусственного интеллекта (ИИ). Тем не менее, они делают ИИ Microsoft более эффективным и сопоставимым с системами основных конкурентов на ИТ-рынке. Это включает в себя улучшения в обработке естественного языка, способность лучше понимать контекст и предоставлять более точные и релевантные ответы.

Как отметил Билл Гейтс во время празднования 50-летия Microsoft, компания сильно изменилась за последние полвека, и с появлением искусственного интеллекта она будет выглядеть совершенно иначе ещё через XNUMX лет. Эта трансформация обусловлена стремительным развитием таких областей, как машинное обучение, нейронные сети и облачные вычисления, которые позволяют разрабатывать всё более сложные и мощные приложения на основе искусственного интеллекта.

Кто знает, будет ли вообще существовать Windows к тому времени? Хотя я не считаю Microsoft самой гибкой компанией, она точно знает, когда нужно менять направление. Способность Microsoft адаптироваться к изменениям рынка и новым технологиям будет иметь решающее значение для её выживания и будущего успеха.

Мы планируем полностью протестировать новые инструменты искусственного интеллекта Copilot в ближайшие недели, так что следите за новостями. А пока, какая функция Copilot вам нравится больше всего? Поделитесь своим мнением в комментариях ниже!