Прочитать на английском

Поделиться через


обзор Recall

Recall использует Windows Copilot Runtime, чтобы помочь вам найти все, что вы видели на компьютере. Выполните поиск по любым подсказкам, которые вы помните или используете временную шкалу для прокрутки прошлого действия, включая приложения, документы и веб-сайты. Когда вы нашли то, что вы ищете, вы можете быстро перейти к содержимому, видному в моментальном снимке, нажав кнопку повторного запуска под снимком экрана. API UserActivity — это то, что позволяет приложениям предоставлять глубокие ссылки, поэтому вы можете выбрать место, где вы оставили.

Click to Do — это функция, поддерживаемая ИИ, которая использует локальную модель Phi Silica на компьютерах Copilot+ для подключения действий к содержимому (тексту или изображениям), найденным Recall. Например, видео, которое вы смотрели, был показан человек, одетый в рубашку, которую вы любите. Вы можете найти это видео и место, где отображается рубашка, с помощью Recall. Click to Do затем предложит вариант поиска в Bing, где вы можете купить эту рубашку в интернете. Разработчики смогут запустить Click to Do из приложения с помощью схемы URI.

Узнайте больше о Click to Do или о том, как запустить Click to Do из приложения с помощью URI.

Дополнительные сведения о Recall, в том числе:

  • Требования к системе
  • Как использовать Recall
  • Как искать с Recall
  • Как работает взаимодействие с контентом (с помощью Screenray)
  • Приостановка или возобновление моментальных снимков
  • Как фильтровать сохранение определенных веб-сайтов или приложений с помощью Recall
  • Как управлять моментальными снимками Recall и дисковым пространством
  • Сочетания клавиш

Узнайте больше о конфиденциальности и управлении вашим Recall, включая такие аспекты, как:

  • Элементы управления для управления вашими настройками Recall и предпочтениями моментальных снимков
  • Фильтрация приложений и веб-сайтов из моментальных снимков
  • Как работает хранилище моментальных снимков (содержимое остается локальным)
  • Встроенная безопасность, включенная с помощью защищенного компьютера, обработчика безопасности Microsoft Pluton и Windows Hello Enhanced Sign-in Security (ESS)

Для ИТ-администраторов узнайте, как управлять Recall с помощью управления клиентами Windows, в том числе:

  • Требования к системе
  • Поддерживаемые браузеры
  • Настройка политик для Recall
  • Ограничения
  • Параметры, управляемые пользователем для Recall
  • Выделение хранилища
  • Параметр политики для управления сохранением моментальных снимков экрана Windows и анализом активности пользователей на устройстве: DisableAIDataAnalysis

обновления Recall:

Необходимые компоненты

Чтобы использовать Recall и Click to Do, необходимо выполнить следующие требования:

Чтобы использовать Recall и Click to Do в вашем приложении Windows:

  • Это еще не доступно. Эта поддержка будет доступна в предстоящем выпуске SDK для приложений Windows в экспериментальном канале .
  • Действия пользователя поддерживаются в windows SDK версии 10.0.17134.0 (Windows 10, версия 1803, сборка 17134) или более поздней версии.

Запуск Click to Do

Чтобы запустить функцию Click to Do на компьютере Copilot+ из приложения, можно использовать следующую схему URI: ms-recall://default/?screenray.

В настоящее время для работы Click to Do функция Recall должна быть включена на компьютере Copilot+. См. раздел "Выбор пользователя с начала" для получения рекомендаций по включению или отключению Recall в разделе "Конфиденциальность & безопасности" настроек конфиденциальности и управления вашим опытом Recall в настройках Windows.

URI ms-recall://default/?screenray позволяет вашему приложению программно запускать Click to Do, размещая интерактивное наложение на экран компьютера. Это наложение предлагает быстрые действия для изображений или текста. Анализ экрана всегда выполняется локально на устройстве. Содержимое предоставляется только в том случае, если пользователь решит выполнить действие. Содержимое не сохраняется и не передается автоматически обратно в приложение, используемое для открытия наложения. Этот универсальный код ресурса (URI) не принимает дополнительные параметры.

Следующие примеры кода открывают Click to Do в приложении пользователя.

winrt::Windows::Foundation::Uri clickToDoUri(L"ms-recall://default/?screenray"); 

winrt::Windows::System::Launcher::LaunchUriAsync(clickToDoUri); 
var clickToDoUri = new Windows.Foundation.Uri(L"ms-recall://default/?screenray"); 

Windows.System.Launcher.LaunchUriAsync(clickToDoUri) 

Используйте Recall в приложении Windows

Для тех, кто выберет включение "Recall & моментальные снимки" в Параметрах > Конфиденциальности & Безопасности, Windows будет регулярно сохранять моментальные снимки экрана клиента и хранить их локально. С помощью сегментации экрана и распознавания изображений Windows предоставляет возможность получить представление о том, что видно на экране. Разработчик приложений Windows теперь сможет предложить пользователям приложения возможность семантического поиска этих сохраненных моментальных снимков и поиска содержимого, связанного с приложением. Каждый моментальный снимок связан UserActivity с тем, что пользователь может повторно запустить содержимое.

снимок экрана интерфейса Recall с примером приложения Redbarn Sale Analysis.

Действия пользователей

UserActivity ссылается на то, что пользователь работал в приложении. Например, когда пользователь пишет документ, может ссылаться на конкретное место в документе, UserActivity где пользователь оставил запись. При прослушивании музыкального приложения может быть список воспроизведения, UserActivity который пользователь последний раз прослушивал. При рисовании на холсте может быть место, UserActivity где пользователь последний раз сделал отметку. В итоге объект UserActivity представляет место назначения в приложении Windows, к которому пользователь может вернуться, чтобы он смог возобновить работу.

Для взаимодействия с приложением UserActivity Windows вызовет UserActivity.CreateSession. Операционная система Windows отвечает путем создания записи журнала, указывающей время начала и окончания для этого UserActivity. Повторное взаимодействие с тем же UserActivity с течением времени приведет к хранению нескольких записей журнала.

Дополнительные сведения о том, как взаимодействовать с действиями пользователей с помощью Recall, скоро появятся.