Note
이 글에서는 표준 하네스로 구동되는 에이전트 또는 에이전트 플로우에서 사용되는 기능에 대해 설명합니다.
에이전트가 NLU+를 사용할 때, 사용자의 메시지로 인해 대화가 다른 주제로 전환되는 시점을 제어하는 의도 신뢰도 임계값을 설정할 수 있습니다. 임계값은 대화가 본래 흐름에서 벗어나지 않도록 유지하면서도 사용자가 의도한 때 주제를 바꿀 수 있도록 도와줍니다. 예를 들어, 질문에 대한 사용자의 답변이 다른 주제의 트리거 구절과 비슷할 수 있습니다. 적절한 임계값은 이러한 의도치 않은 중단을 줄여 사용자가 대화를 복구하지 않고도 세부 정보 입력을 마칠 수 있게 합니다.
에이전트 수준의 기본값을 설정한 다음, 모든 주제를 변경하지 않고도 선택한 주제의 선택 범위를 더 좁히거나 넓혀 조절하세요. 더 높은 임계값은 에이전트가 주제를 전환하기 전에 더 강한 의도 일치가 필요합니다. 낮은 기준은 의도적인 주제 전환을 더 쉽게 만듭니다. 균형을 테스트하기 위해 에이전트가 주제 전환 후 저장하는 인식된 의도 이름과 신뢰도 점수를 사용하세요.
이 임계값들은 의도 기반 주제 전환만을 제어합니다. 음성 인식 신뢰도나 엔터티 신뢰도 점수에는 영향을 주지 않습니다.
Prerequisites
- 클래식 오케스트레이션과 NLU+를 사용하는 에이전트입니다. NLU+는 Dynamics 365 Contact Center 라이선스가 필요합니다. NLU+구성에 대해 자세히 알아보세요.
- 에이전트를 편집할 권한
- 주제 전환 신뢰 설정은 사용 중인 환경에서 사용할 수 있어야 합니다.
에이전트 레벨 임계값을 설정하세요
에이전트 수준의 임계값은 자체 임계값이 없는 모든 주제에 적용됩니다. 임계값은 0부터 1까지의 값을 받아들입니다. 기본값은 0.3입니다. 설정명에는 '신뢰도점수'가 포함되어 있지만, 설정한 값은 컷오프이지 NLU+가 메시지에 대해 반환하는 점수가 아닙니다.
에이전트를 열고 설정>언어 이해을 선택하세요.
NLU+ 옵션(더 많은 사전 작업, 향상된 정밀도)이 선택되었는지 확인하세요.
NLU 의도 신뢰도 점수에서 슬라이더를 움직이거나 값을 입력하세요.
저장을 선택합니다.
에이전트가 다른 주제로 전환하기 전에, 인식된 의도의 신뢰도 점수를 해당 주제에 적용되는 임계값과 비교합니다. 점수는 임계값보다 높아야 합니다. 점수가 임계값과 같아도 자격을 얻지 못합니다.
Note
점수가 임계값을 넘는다고 해서 주제 전환이 보장되는 것은 아닙니다. 기존의 주제 매칭 및 중단 규칙은 여전히 적용됩니다. 예를 들어, 질문의 인터럽션 설정이 스위치를 차단할 수 있고, 질문에 대한 유효한 답변은 주제 변경으로 처리되지 않고 하나의 엔티티로 포착될 수 있습니다.
주제의 임계값을 설정하세요
한 주제가 에이전트의 나머지 주제들보다 더 선택적이거나 덜 선별적이어야 할 때는 주제 수준의 임계값을 사용하세요.
에이전트의 주제 페이지로 가서 사용자가 전환할 주제를 열어보세요.
트리거 노드에서 편집을 선택해 트리거의 속성 패널을 연 다음, 고급을 펼칩니다.
주제 의도 신뢰도 점수에서 슬라이더를 움직이거나 이 주제의 임계값을 입력하세요.
토픽을 저장합니다.
에이전트가 임계값을 선택하는 방법
주제에 대한 값을 입력하기 전까지는 해당 주제가 에이전트 수준의 임계값을 표시하고 에이전트 수준 임계값의 이후 변경 사항을 따릅니다. 값을 입력하면 해당 주제에 대해서만 에이전트 수준의 임계값을 재정의합니다. 사용자가 떠나는 주제의 임계값은 에이전트가 다른 주제로 전환할지 여부를 결정하지 않습니다.
전환할 수 있는 각 주제에 대해, 에이전트는 적용되는 첫 번째 임계값을 사용합니다:
- 대상 주제의 주제 수준 임계값
- 에이전트 수준 임계값
- 기본 임계값인 0.3
에이전트는 이 값들을 합치거나 더 큰 값을 선택하지 않습니다.
예를 들어, 에이전트 수준의 임계값이 0.5이고 Check Account Balance 주제의 주제 수준 임계값이 0.8이라고 가정해 봅시다. 신뢰도 점수가 0.7인 인식된 인텐트는 계좌 잔액 확인(으)로 전환되지 않습니다. 자체 임계값이 없는 대상 주제의 경우, 0.7은 에이전트 수준의 임계값을 초과하지만, 다른 라우팅 규칙은 여전히 적용됩니다. 이 값들은 비교를 보여주는 것일 뿐입니다. 추천 설정이나 예측 점수는 아닙니다.
인식된 의도 보기
단일로 인식된 의도를 기반으로 주제를 전환한 후, 다음의 읽기 전용 시스템 변수에는 가장 최근에 인식된 의도와 해당 NLU 신뢰도 점수가 포함되어 있습니다.
| 변수 | Type | Description |
|---|---|---|
System.Recognizer.LastIntent.Name |
string | 인식된 의도의 이름입니다. |
System.Recognizer.LastIntent.ConfidenceScore |
number | 인식된 의도의 신뢰도 점수입니다. |
메시지에서 두 값을 참조하려면 변수 선택기를 열고 시스템 탭으로 전환한 후 Recognizer>LastIntent를 선택하세요. 자신의 변수에 복사본을 유지하려면 Set variable value 노드를 추가하고, 해당 변수를 목적지로 선택하며, 시스템 변수를 값으로 사용하세요. 이 읽기 전용 시스템 변수들에 값을 할당하지 마세요.
Note
- 이 변수들은 임계값 설정과는 별도로 제공됩니다. 에이전트에서 사용할 수 없으면, 빈 상태입니다.
- 값은 턴이 바뀌어도 유지되며 모든 메시지마다 업데이트되지 않습니다. 스위치가 차단되었거나 턴에 새로운 주제 스위치가 포함되지 않더라도, 변수들은 이전 스위치의 값을 포함할 수 있습니다.
- 변수들은 전환으로 이어지지 않은 의도에 대한 점수를 보여주지 않으며, 전환이 일어나기 전에 이를 이용해 방지할 수도 없습니다.
주제 전환 테스트 및 조정
테스트 패널에서는 에이전트가 질문하는 동안 주제를 바꾸려는 명확한 요청, 모호한 메시지, 유효한 답변을 시도해 보세요. 현재 주제에 머물러야 할 대화와 의도된 스위치를 모두 확인하세요.
한 번에 한 가지 임계값을 바꾸고, 대화의 같은 지점에서 같은 메시지를 반복하세요. 원치 않는 매칭이 흐름을 방해하면 임계값을 올려주세요. 의도된 스위치가 너무 어렵다면 임계값을 낮추세요. 문제가 한 가지 대상 주제에만 영향을 미칠 때는 주제 수준 임계값을 사용하세요. 변경 후에는 질문에 대한 답변과 의도된 중단 사항을 다시 확인하세요.