Управление приложением голосового помощника Azure Percept

Важно!

Прекращение поддержки Azure Percept DK.

Обновление 22 февраля 2023 г.: обновление встроенного ПО для периферийных компонентов Percept DK Vision and Audio (также известных как Визуальное и звуковое SOM) теперь доступно здесь и позволит компонентам аксессуаров продолжать работу после даты прекращения использования.

Общедоступная предварительная версия Azure Percept будет развиваться для поддержки новых платформ пограничных устройств и возможностей разработчика. В рамках этой эволюции Azure Percept DK и аудио-аксессуаров и связанных служб Поддержки Azure для Percept DK будет прекращена 30 марта 2023 г.

Начиная с 30 марта 2023 г. Azure Percept DK и аудиосхозяйки больше не будут поддерживаться службами Azure, включая Azure Percept Studio, обновления ОС, обновления контейнеров, просмотр веб-потока и интеграцию Пользовательское визуальное распознавание. Корпорация Майкрософт больше не будет предоставлять поддержку по успешному выполнению клиентами и связанные с ней вспомогательные услуги. Дополнительные сведения см. в записи блога Уведомление о прекращении поддержки.

В этой статье описывается, как настроить ключевое слово и команды приложения голосового помощника в Azure Percept Studio. Инструкции по настройке ключевого слова в Центре Интернета вещей, а не на портале см. в этой статье.

Если вы еще не создали приложение голосового помощника, см. статью Создание голосового помощника без кода с помощью Azure Percept Studio и Azure Percept Audio.

Настройка ключевого слова

Ключевое слово — это слово или короткая фраза, используемая для активации голосового помощника. Например, фраза "Hey Cortana" (Эй, Кортана) используется для активации помощника Кортана. Голосовая активация позволяет вашим пользователям начать взаимодействие с вашим продуктом без помощи рук, просто произнеся ключевое слово. Пока устройство ожидает ключевое слово, все аудиоданные обрабатываются локально на устройстве, чтобы гарантировать максимально возможную конфиденциальность данных.

Настройка в демонстрационном окне голосового помощника

  1. Выберите Изменить рядом с полем Пользовательское ключевое слово на странице демонстрации.

    Снимок экрана: окно демоверсии для гостиничного бизнеса.

    Если демонстрационная страница не открыта, перейдите на страницу устройства (см. ниже) и выберите Протестировать голосовой помощник в разделе Действия, чтобы получить доступ к демонстрации.

  2. Выберите одно из доступных ключевых слов и выберите Сохранить, чтобы применить изменения.

  3. После завершения настройки цвет трех индикаторов на устройстве Azure Percept изменится на голубой (без мигания). Это означает, что голосовой помощник готов к использованию.

Конфигурация на странице устройства

  1. На странице обзора в Azure Percept Studio выберите Устройства в меню слева.

    Снимок экрана: страница обзора Azure Percept Studio с выделенным пунктом

  2. Выберите устройство, на котором было развернуто приложение голосового помощника.

  3. Откройте вкладку Речь.

    Снимок экрана: страница пограничного устройства с выделенной вкладкой

  4. Выберите Изменить рядом с пунктом Ключевое слово.

    Снимок экрана: доступные действия для решения

  5. Выберите одно из доступных ключевых слов и выберите Сохранить, чтобы применить изменения.

  6. После завершения настройки цвет трех индикаторов на устройстве Azure Percept изменится на голубой (без мигания). Это означает, что голосовой помощник готов к использованию.

Создание пользовательского ключевого слова

С помощью Speech Studio можно создать пользовательское ключевое слово для голосового помощника. Обучение базовой модели пользовательских ключевых слов занимает до 30 минут.

Инструкции по созданию пользовательского ключевого слова см. в документации по Speech Studio. После настройки новое ключевое слово будет доступно на портале Project Santa Cruz, и его можно будет использовать в вашем приложении голосового помощника.

Настройка команд

Пользовательские команды упрощают создание приложений с расширенными голосовыми командами, оптимизированных для голосового интерфейса. Пользовательские команды лучше всего подходят для выполнения задач или сценариев "команда и управление".

Настройка в демонстрационном окне голосового помощника

  1. Выберите Изменить рядом с полем Пользовательская команда на странице демонстрации. Если демонстрационная страница не открыта, перейдите на страницу устройства (см. ниже) и выберите Протестировать голосовой помощник в разделе Действия, чтобы получить доступ к демонстрации.

  2. Выберите одну из доступных пользовательских команд и щелкните Сохранить, чтобы применить изменения.

Конфигурация на странице устройства

  1. На странице обзора в Azure Percept Studio выберите Устройства в меню слева.

  2. Выберите устройство, на котором было развернуто приложение голосового помощника.

  3. Откройте вкладку Речь.

  4. Нажмите кнопку Изменить рядом с пунктом Команда.

  5. Выберите одну из доступных пользовательских команд и щелкните Сохранить, чтобы применить изменения.

Создание пользовательских команд

С помощью Speech Studio можно создавать пользовательские команды для голосового помощника.

Инструкции по созданию пользовательских команд см. в документации по Speech Studio. После настройки новые команды будут доступны в Azure Percept Studio для использования с приложением голосового помощника.

Дальнейшие действия

После создания приложения голосового помощника попробуйте разработать решение без кода с помощью Azure Percept DK.