Как работает Windows Recall в Windows 11? Мы объясняем.

Windows Recall — это новая функция, появившаяся в обновлении Windows 11 2024 Update. Она использует модели искусственного интеллекта и обработку на устройстве, чтобы помочь пользователям быстро находить информацию, делая снимки экрана и анализируя содержимое. Эта функция объединяет несколько мультимодальных языковых моделей, таких как детектор области экрана, оптический распознаватель символов, анализатор естественного языка, кодировщик изображений и другие. Он также использует новую инфраструктуру «Windows Copilot Runtime» для постоянного обновления и поддержания качества модели.

В Windows 11 Recall служит полезным инструментом, использующим технологию искусственного интеллекта для отслеживания вашей компьютерной деятельности. Он записывает ваши действия, такие как открытие файлов, отправка электронных писем или просмотр веб-сайтов, что упрощает поиск этой информации. Таким образом, вы сможете быстро найти прошлые сообщения, документы, папки и даже веб-страницы.

С помощью Windows Recall вы можете легко находить информацию по ключевым словам, ключевым фразам или даже описаниям на естественном языке, поскольку эта расширенная функция способна интерпретировать смысл ваших запросов и извлекать соответствующие результаты из истории вашего устройства.

Как аналитик, я был впечатлен способностью Recall находить для меня конкретные изображения. Например, когда я прошу его найти фотографию черной кожаной куртки, которую я нашел на веб-сайте или сделал ранее, его точность действительно заслуживает внимания. Он не полагается исключительно на ключевые слова в именах файлов или метаданных; вместо этого он идентифицирует объект внутри самого изображения и получает желаемый результат.

Как технический энтузиаст, я действительно впечатлен концепцией Windows Recall. Удивительно, как эта функция избавляет от необходимости запоминать точное расположение документов, имена файлов или условия поиска. Но задумывались ли вы когда-нибудь о том, как работает Windows Recall?

В этом руководстве я подробно расскажу о внутренней работе Recall для Windows 11. 

Как функция Recall работает в Windows 11?

Функция Windows Recall захватывает изображения вашего экрана каждые несколько секунд, когда на нем присутствует контент. В частности, каждые пять секунд создается новый снимок, начиная с предыдущего. Вопреки распространенному мнению, эта функция не записывает звук и не снимает непрерывное видео. Вместо этого сделанные снимки экрана сохраняются локально для анализа с помощью искусственного интеллекта (ИИ), способного распознавать как изображения, так и текст внутри них.

Как преданный пользователь Recall, я хотел бы поделиться тем, что в настоящее время он лучше всего подходит для пользователей английского, упрощенного китайского, французского, немецкого, японского и испанского языков. Это означает, что вы сможете насладиться полным спектром возможностей Recall. Microsoft работает над расширением языковой поддержки в будущем. В настоящее время Recall позволяет осуществлять текстовый поиск на более чем 160 языках для получения снимков с временной шкалы вашего ПК, что представляет собой более фундаментальную функцию Recall.

Используя поле поиска в приложении «Вспомнить» или перемещаясь по временной шкале, эта функция предназначена для понимания ваших поисковых запросов и предоставления наиболее подходящих результатов.

Когда вы делаете снимок экрана, активация функции «screenray» предоставит вам дополнительные возможности манипулировать различными элементами, появляющимися над ним. Эта функция напоминает Текстовые аннотации, доступные в инструменте «Ножницы».

На этом снимке экрана в вашем распоряжении различные функции. Вы можете инициировать запуск исходного приложения, связанного с контентом. Кроме того, у вас есть возможность извлечь текст из сообщения или любого элемента, отображаемого на экране, стереть сам снимок и вызвать контекстное меню для изучения дополнительных параметров.

Хранилище

Эта функция сохраняет снимки экрана локально на вашем компьютере, что требует определенного количества свободного места, которое система выделяет автоматически. По определению, Recall выделяет примерно 25 ГБ этого пространства на устройствах с общей емкостью 256 ГБ.

Как пользователь, который любит эффективно управлять системным хранилищем, я хотел бы сообщить, что минимальное зарезервированное пространство для снимков и вызовов зависит от емкости SSD вашего устройства. Например, если у вас твердотельный накопитель емкостью 512 ГБ, выделение по умолчанию установлено на уровне 75 ГБ. Напротив, на твердотельном накопителе емкостью 1 ТБ выделение по умолчанию будет составлять 150 ГБ. Однако вы можете изменить этот параметр по своему усмотрению на странице настроек «Отзыв и снимки».

модели искусственного интеллекта

Я заметил, что Recall использует нейронный процессор (NPU) для анализа снимков, используя несколько меньших языковых моделей, таких как детектор области экрана, оптический распознаватель символов, анализатор естественного языка и два кодировщика изображений. Все эти модели совместно работают в Windows 11, одновременно определяя текст, изображения, видео, аудио и другие типы данных.

Как исследователь, я могу сказать, что воодушевлен последней разработкой — «Windows Copilot Runtime». С его помощью более 40 продвинутых моделей искусственного интеллекта легко интегрируются, расширяя для меня различные функции. Кроме того, эта инфраструктура обеспечивает постоянные обновления и улучшения для поддержания превосходного качества моделей.

После того, как снимок сделан, функция объединяет его с системной информацией для расшифровки значения и контекста, подобно тому, как человек интерпретирует контент. Все данные хранятся в новой инновационной базе данных «Семантический индекс Windows»», что отличает ее от базы данных индекса поиска.

Безопасность

Как исследователь, изучающий периферийные вычисления, я могу вам сказать, что все процессы происходят непосредственно на самом устройстве без необходимости вмешательства облака в большинстве случаев. Тем не менее, бывают случаи, когда эта функция взаимодействует с Интернетом с целью загрузки и установки обновлений.

При использовании функции восстановления в стандартной настройке некоторые определенные типы данных исключаются из сохранения. Это исключение распространяется на действия, выполняемые через браузеры на базе Chromium, такие как Microsoft Edge, при использовании в режиме инкогнито или при обработке контента, защищенного DRM. Однако вся остальная информация собирается и хранится на компьютере.

Если вы являетесь техническим энтузиастом и предпочитаете не сохранять определенную информацию для определенных веб-сайтов или приложений, вам необходимо самостоятельно настроить фильтр на странице настроек «Отзыв и снимки». Имейте в виду, что этот метод применим только к Microsoft Edge для фильтрации определенного веб-сайта.

Как аналитик, я заметил, что одним из недостатков этого фильтра является то, что когда вы запускаете приложение Windows Recall и выбираете опцию «Сейчас», оно делает скриншот всего, что в данный момент отображается на вашем экране. независимо от того, является ли это браузером инкогнито или приложением с ограниченным доступом. Снимок не будет постоянно храниться на вашем устройстве; вместо этого он будет доступен только из временного файла.

Кроме того, в временной шкале искусственного интеллекта Windows 11 отсутствуют возможности модерации контента, а это означает, что конфиденциальные данные, такие как пароли и номера банковских счетов, могут быть легко обнаружены с помощью поиска, поскольку они автоматически сохраняются в моментальных снимках.

Одним из эффективных решений для быстрого решения этой проблемы безопасности является блокировка доступа к сомнительным веб-сайтам и приложениям, которые потенциально могут отображать конфиденциальные данные.

Другой вариант — удалить определенные или все изображения, сохраненные на вашем компьютере, чтобы эта функция не собирала такие данные.

База данных семантического индекса Windows находится на вашем локальном компьютере, но обеспечение ее конфиденциальности зависит от ваших действий, поскольку служба отзыва данных Microsoft не обеспечивает надежных мер безопасности после того, как кто-то вошел в учетную запись. Например, вам необходимо установить пароль для вашей учетной записи Windows 11, чтобы защитить паролем эту базу данных, а для защиты данных необходимо включить шифрование, такое как BitLocker или шифрование устройства, на вашем устройстве.

Обновление Windows 11 2024 (версия 24H2) представит новую функцию под названием «Отзыв Windows». Первоначально эта функция будет доступна только на ПК Copilot Plus с процессорами Qualcomm Snapdragon серии X из-за ее особых требований. Эти предварительные требования включают NPU, способный выполнять 40 или более TOPS (тера операций в секунду), минимальный системный объем памяти 16 ГБ, а также твердотельный накопитель емкостью 256 ГБ.

Изначально эта функция имеет ограниченную сферу применения, но со временем она будет расширяться и улучшаться.

Больше ресурсов

Смотрите также

• Как получить и использовать очки мастерства в Space Marine 2
• Что делать с расширенной канистрой Эона в WoW Dragonflight
• Чем заканчивается книга «Презумпция невиновности»?
• Полный список миссий Warhammer 40K Space Marine 2
• Warhammer 40,000: Space Marine 2: руководство – как быстро повысить уровень
• Warhammer 40K: Space Marine 2 – как получить данные арсенала и использовать их
• Warhammer 40K: Space Marine 2 – Как разблокировать перки оружия
• Где найти все инфопланшеты в Space Marine 2
• Прохождение баллистического двигателя — Space Marine 2
• Как выполнить личный квест Ирлиет в Warhammer 40: Rogue Trader

2024-05-24 01:20