이 가이드에서는 데이터 스토어 핸들러의 성능을 모니터링하고 개선하기 위한 권장사항을 제공합니다.
에이전트의 성능 추적
에이전트 대화 기록을 모니터링하고 분석 도구를 사용하여 에이전트 통계를 확인할 수 있습니다.
셀프 서비스 평가 실행
셀프 서비스 평가를 실행하여 데이터 스토어 에이전트의 품질을 평가하고 변경사항을 추천할 수 있습니다.
상담사 응답 개선
테스트 중 일부 응답이 기대에 부합하지 않는 경우 다음을 수행하세요.
- 특정 질문에 대한 FAQ 항목을 추가하여 답을 덮어쓸 수 있습니다.
- 구조화된 FAQ에서 답변의 품질이 낮은 경우 구조화되지 않은 FAQ를 사용해 보세요.
- 파싱 및 청크 구성을 사용하여 응답을 최적화하세요.
- 특정 문구를 금지하려면 에이전트 설정: 금지된 문구을 참조하세요.
- 책임감 있는 AI (RAI) 콘텐츠 필터링을 맞춤설정하려면 에이전트 설정: 안전 필터를 참고하세요.
- 이전 대화의 정보를 기반으로 에이전트의 응답을 미세 조정하려면 검색 조건을 구성하면 됩니다. 이 기능은 데이터 스토어 도구에서만 사용할 수 있습니다.
플레이북에서 사용하는 데이터 저장소 도구 최적화
이 설정은 사용자 쿼리를 다시 작성하거나 도구 매개변수를 동적으로 채우지 않아 데이터 스토어의 RAG 응답을 가속화하고 지연 시간을 개선합니다. 즉, 사용자 쿼리가 데이터 스토어에 그대로 전달되며 필터 또는 사용자 메타데이터 관련 매개변수가 채워지지 않습니다.
Dialogflow CX 콘솔에서 플레이북을 선택한 다음 설정 탭을 클릭하여 이 기능을 사용 설정할 수 있습니다. 후속 작업을 즉시 계속 처리하거나 다음 최종 사용자 입력을 기다리도록 플레이북을 구성할 수 있습니다.
사용 설정된 경우 다음 플레이북 안내가 계속 적용됩니다.
- 데이터 스토어를 사용하여 사용자 질문에 답변해야 하는 경우입니다.
- 데이터 스토어를 사용하여 사용자 질문에 답변하지 않고 대신 대체 대답을 제공해야 하는 경우
- 예를 들어 '경쟁업체에 관한 질문에 대답하지 마세요'와 같이 방어적인 모든 지침
사용 설정된 경우 다음 Playbook 안내가 무시됩니다. 다음 쿼리 요구사항이 있는 경우 이 설정을 활성화하지 마세요.
- 안내에 따라 채워질 특정 데이터 스토어 필터입니다.
- 필터로 전달된 사용자 맞춤설정 메타데이터를 적용하는 방법
- 데이터 스토어를 쿼리하기 전에 사용자 쿼리를 다시 작성하기 위한 기타 안내입니다.
대화 여담 처리
최종 사용자가 대화 중에 명확한 질문을 할 수 있습니다. 예를 들어 신용카드 정보 수집 중에 CVV가 무엇인지 명확히 하고 싶을 수 있습니다. 이 경우 에이전트는 질문에 답하고 필요한 신용카드 정보 수집으로 돌아가야 합니다. 이를 위해 질문에 답변하는 데이터 스토어가 포함된 데이터 스토어 핸들러를 만들고 이 핸들러를 신용카드 정보 수집을 처리하는 흐름의 흐름 시작 페이지에 적용하고 이 핸들러가 '현재 페이지'로 돌아가도록 전환 대상을 설정할 수 있습니다.
원치 않는 인텐트 일치 처리
에이전트가 데이터 스토어 핸들러를 사용해야 할 때 인텐트가 일치하는 경우 다음을 시도하여 이를 수정할 수 있습니다.
- 모호한 학습 문구를 삭제하거나 수정하여 모든 학습 문구가 원하는 인텐트를 정확하게 처리하고 데이터 스토어 콘텐츠와 충돌하지 않도록 합니다.
- 인텐트 일치를 방지하려면 부정 예시를 사용하세요.
데이터 스토어 필터링
때로는 세션 매개변수 값에 따라 쿼리에 특정 데이터 스토어만 사용할 수 있습니다. 예를 들어 제품 카테고리에 고유한 데이터 스토어가 있을 수 있습니다. 제품 카테고리에 데이터 스토어 필터링을 수행하려면 다음 안내를 따르세요.
- 세션 매개변수를 제품 카테고리로 설정합니다.
- 세션 매개변수 값을 확인하고 원하는 데이터 스토어 핸들러가 있는 특정 페이지로 전환하는 조건 경로를 만듭니다.
- 데이터 스토어 핸들러는 대화를 계속할 수 있도록 호출 페이지로 다시 전환해야 합니다.
데이터 스토어 검색 구성
데이터 스토어 검색 결과를 미세 조정하는 방법에 관한 자세한 내용은 데이터 스토어 검색 구성 페이지를 참고하세요.