Microsoft подробно рассказывает, как приложения могут интегрироваться с новой функцией AI Recall в Windows 11

Microsoft подробно рассказывает, как приложения могут интегрироваться с новой функцией AI Recall в Windows 11


Добро пожаловать в уголок, где империи рушатся, а ваши миниатюры страдают от кривых покрасов! Присоединяйся к официальному телеграм-каналу Warhammer 40,000, где мы обсуждаем, как в очередной раз проиграть из-за одного несчастного кубика. Ждём твоего вступления с таким же нетерпением, с каким Император ждёт новую модель!

Warhammer 40k Telegram


Что тебе нужно знать

  • Microsoft подробно рассказала о своей новой технологии Windows Copilot Runtime и Semantic Index на сборке 2024.
  • Эти технологии лежат в основе многих новых возможностей искусственного интеллекта, анонсированных вчера для Windows 11, включая Recall.
  • Windows Recall — это основная функция искусственного интеллекта, которая использует для работы модели искусственного интеллекта на устройстве.
  • Разработчики приложений могут подключиться к Windows Recall, чтобы пользователи могли вернуться к своим приложениям на основе того, что сохранила Recall.

Как поклонник технологий и Microsoft, я очень рад видеть, что компания расширяет границы с помощью своих новых функций искусственного интеллекта для Windows 11, в частности недавно анонсированной Windows Recall. Интеграция технологии Microsoft Copilot Runtime и Semantic Index меняет правила игры и сделает нашу работу на компьютере более эффективной и персонализированной, чем когда-либо прежде.


Microsoft предоставила сегодня дополнительную информацию о функциональности недавно анонсированной функции Windows Recall на ПК Copilot+. Они объяснили, что эта функция будет использовать семантический индекс Windows и среду выполнения Windows Copilot. Кроме того, Microsoft рассказала, как разработчики приложений могут оптимизировать свои приложения для обеспечения совместимости с Windows Recall. Это включает в себя обеспечение более плавного перехода между снимками, сделанными Recall, и сторонними приложениями.

Новейшая библиотека Windows Copilot представляет набор API-интерфейсов, основанных на более чем сорока моделях и алгоритмах искусственного интеллекта, встроенных в устройства, которые легко интегрируются в систему Windows. Эта библиотека играет решающую роль в реализации различных новых функций искусственного интеллекта в Windows, таких как эффекты Studio, живые субтитры, оптическое распознавание символов (OCR) в Snipping Tool и недавно представленная функция Windows Recall.

Microsoft утверждает, что Recall может автоматически работать во многих приложениях. Однако у разработчиков есть возможность улучшить взаимодействие с пользователем, предоставляя контекстные данные для Recall через API активности пользователя. Это дополнение позволяет приложению Recall вернуться к определенной области внутри приложения, которую определил Recall, что приводит к более плавному и интегрированному взаимодействию.

Microsoft PowerPoint и Teams являются одними из первых приложений Microsoft, которые интегрировали эту функциональность, к ним также присоединилось стороннее приложение для рисования Concepts. Согласно объяснению Microsoft, вот как работают функции Windows Ink Workspace и Recall:

Как технический энтузиаст, я рад сообщить вам, что база данных Recall поддерживается семантическим индексом Windows — новаторской новой возможностью ОС Windows, которая революционизирует поиск. Этот мощный инструмент основан на передовых моделях искусственного интеллекта, таких как мультимодальные масштабируемые обучающиеся машины (SLM), которые работают одновременно и легко интегрируются в саму ОС.

Проще говоря, эти модели могут обрабатывать различные типы контента, такие как текст, изображения и видео, и все это в системе Windows. Затем информация преобразуется и сохраняется в локальной базе данных векторов под названием Семантический индекс Windows. Этот индекс доступен для поиска с использованием запросов на естественном языке, что обеспечивает легкий доступ к данным. Сохранение семантического индекса на устройстве пользователя значительно повышает конфиденциальность, поскольку данные никогда не покидают локальную систему.

Microsoft подчеркивает, что весь процесс Recall управляется локально на устройствах без передачи обработанных данных в облако для хранения или анализа. Более того, Microsoft не разрабатывает модели ИИ, используя информацию, предоставленную Recall.

Функция Windows Recall является эксклюзивной для компьютеров Copilot+, первые поставки начнутся в следующем месяце.

Смотрите также

2024-05-21 18:50