Общие сведения о звуковом устройстве Azure Percept Audio

  • Статья

Важно!

Прекращение поддержки Azure Percept DK.

Обновление 22 февраля 2023 г.: обновление встроенного ПО для периферийных компонентов Percept DK Vision and Audio (также известных как Визуальное и звуковое SOM) теперь доступно здесь и позволит компонентам аксессуаров продолжать работу после даты прекращения использования.

Общедоступная предварительная версия Azure Percept будет развиваться для поддержки новых платформ пограничных устройств и возможностей разработчика. В рамках этой эволюции Azure Percept DK и аудио-аксессуаров и связанных служб Поддержки Azure для Percept DK будет прекращена 30 марта 2023 г.

Начиная с 30 марта 2023 г. Azure Percept DK и аудиосхозяйки больше не будут поддерживаться службами Azure, включая Azure Percept Studio, обновления ОС, обновления контейнеров, просмотр веб-потока и интеграцию Пользовательское визуальное распознавание. Корпорация Майкрософт больше не будет предоставлять поддержку по успешному выполнению клиентами и связанные с ней вспомогательные услуги. Дополнительные сведения см. в записи блога Уведомление о прекращении поддержки.

Azure Percept Audio — это периферийное устройство, которое добавляет в Azure Percept DK возможности по распознаванию речи. В нем содержится предварительно настроенный аудиопроцессор и линейный массив из четырех микрофонов, позволяющие использовать голосовые команды, функции распознавания ключевых слов и речи на большой дистанции с помощью служб Azure Cognitive Services. Устройство интегрировано с Azure Percept DK, Azure Percept Studio и с другими пограничными службами управления Azure.

Компоненты звукового устройства Azure Percept Audio

Основные компоненты Azure Percept Audio:

  • готовое к работе аудиоустройство Azure Percept Audio (SoM) с линейным массивом из четырех микрофонов и аудиообработкой через кодек XMOS;
  • панель для разработчиков (интерпозер): две кнопки, 3 светодиодных индикатора, порт Micro-USB и звуковой разъем 3,5 мм;
  • необходимые кабели: кабель FPC, переходник USB Micro Type-B в USB-A;
  • приветственная карта;
  • монтажная пластина с креплением серии 80/20 1010.

Возможности вычислений

Устройство Azure Percept Audio передает входные звуковые данные через стек распознавания речи, который работает на центральном процессоре платы Azure Percept DK в гибридной облачной службе. Таким образом, для работы звуковому устройству Azure Percept Audio требуется плата-носитель с ОС, которая поддерживает стек распознавания речи. ​

Обработка звука выполняется следующим образом:

  • Azure Percept Audio: захватывает и преобразует аудиосигнал, а затем отправляет его в DK и на звуковой разъем.

  • Azure Percept DK: в стеке распознавания речи формируется диаграмма направленности, подавляется эхо и входящий звук оптимизируется для распознавания речи. После обработки выполняется поиск по ключевым словам.

  • В облаке: обрабатываются команды и фразы естественного языка, проверка ключевых слов и переобучение. ​

  • Вне сети: устройство в автономном режиме ожидает ключевое слово и записывает данные телеметрии о состояния подключения к Интернету. Т. к. невозможно проверить ключевые слова через облако, то ложное обнаружение ключевых слов может происходить чаще. ​

Начало работы

Создание прототипа без кода

Создайте решение по распознаванию речи без кода в Azure Percept Studio с помощью шаблонов голосового помощника Azure Percept для гостиничного бизнеса, здравоохранения, складского учета и автотранспорта.

Управляйте своим речевым решением без кода

Дополнительные технические сведения