이 가이드에서는 데이터 스토어 핸들러의 성능을 모니터링하고 개선하기 위한 권장사항을 제공합니다.
에이전트의 성능 추적
에이전트 대화 기록을 모니터링하고 분석 도구를 사용하여 에이전트 통계를 확인할 수 있습니다.
셀프 서비스 평가 실행
셀프 서비스 평가를 실행하여 데이터 스토어 에이전트의 품질을 평가하고 변경사항을 추천할 수 있습니다.
에이전트 대답 개선
테스트 중에 대답이 기대에 부합하지 않는 경우 다음 옵션을 시도해 보세요.
- 특정 질문에 대한 FAQ 항목을 추가하여 답을 덮어씁니다.
- 구조화된 FAQ에서 품질이 낮은 답변이 발생하는 경우 구조화되지 않은 FAQ를 대신 사용해 보세요.
- 파싱 및 청크 구성을 사용하여 응답을 최적화하세요.
- 특정 문구를 금지하려면 에이전트 설정: 금지된 문구을 참조하세요.
- 책임감 있는 AI (RAI) 콘텐츠 필터링을 맞춤설정하려면 에이전트 설정: 안전 필터를 참조하세요.
- 대화 초반의 정보를 기반으로 에이전트의 대답을 미세 조정하려면 검색 조건을 구성합니다. 이 기능은 데이터 스토어 도구에서만 사용할 수 있습니다.
플레이북에서 사용하는 데이터 스토어 도구 최적화
이 설정은 사용자 쿼리를 다시 작성하거나 도구 매개변수를 동적으로 채우지 않음으로써 데이터 스토어의 RAG 응답을 가속화하고 지연 시간을 개선합니다. 따라서 사용자 쿼리가 데이터 스토어에 그대로 전달되고 필터 또는 사용자 메타데이터 관련 매개변수가 채워지지 않습니다.
Dialogflow CX 콘솔에서 플레이북을 선택한 후 설정 탭을 선택하여 이 기능을 사용 설정할 수 있습니다. 후속 작업을 즉시 계속 처리하거나 다음 최종 사용자 입력을 기다리도록 플레이북을 구성할 수 있습니다.
사용 설정하면 다음 플레이북 안내가 계속 적용됩니다.
- 데이터 스토어를 사용하여 사용자 쿼리에 답변하는 경우
- 데이터 스토어를 사용하여 사용자 쿼리에 답변하지 않고 대신 대체 응답을 제공하는 경우
- 방어적인 요청 사항(예: '경쟁업체에 대한 질문에 답변하지 마세요')
사용 설정하면 다음 플레이북 안내가 무시됩니다. 다음 쿼리 요구사항이 있는 경우 이 설정을 활성화하지 마세요.
- 안내에 따라 채울 특정 데이터 스토어 필터입니다.
- 필터에서 전달한 사용자 개인 맞춤설정 메타데이터를 적용하는 안내입니다.
- 데이터 스토어를 쿼리하기 전에 사용자 쿼리를 다시 작성하는 다른 안내입니다.
대화 여담 처리
최종 사용자가 대화 중에 명확한 질문을 할 수 있습니다. 예를 들어 신용카드 정보 수집 중에 CVV가 무엇인지 명확히 하고 싶을 수 있습니다. 이 경우 에이전트는 질문에 답하고 필요한 신용카드 정보 수집으로 돌아갑니다. 이를 위해 질문에 답변하는 데이터 스토어가 포함된 데이터 스토어 핸들러를 만들고 이 핸들러를 신용카드 정보 수집을 처리하는 흐름의 흐름 시작 페이지에 적용하고 이 핸들러가 '현재 페이지'로 돌아가도록 전환 대상을 설정할 수 있습니다.
원치 않는 인텐트 일치 처리
에이전트가 데이터 스토어 핸들러를 사용해야 할 때 인텐트가 일치하는 경우 다음을 시도하여 이를 수정할 수 있습니다.
- 모호한 학습 문구를 삭제하거나 수정하여 모든 학습 문구가 선택한 인텐트를 정확하게 처리하고 데이터 스토어 콘텐츠와 충돌하지 않도록 합니다.
- 인텐트 일치를 방지하려면 부정 예시를 사용하세요.
데이터 스토어 필터링
쿼리에 특정 데이터 스토어만 사용할 수 있도록 하려면 세션 파라미터 값을 기반으로 하면 됩니다. 예를 들어 제품 카테고리에 고유한 데이터 스토어를 사용할 수 있습니다. 제품 카테고리에 데이터 스토어 필터링을 수행하려면 다음 안내를 따르세요.
- 세션 매개변수를 제품 카테고리로 설정합니다.
- 세션 파라미터 값을 확인하고 선택한 데이터 스토어 핸들러가 있는 특정 페이지로 전환하는 조건 경로를 만듭니다.
- 대화를 계속할 수 있도록 데이터 스토어 핸들러에서 호출 페이지로 다시 전환합니다.
데이터 스토어 검색 구성
데이터 스토어 검색 결과를 미세 조정하는 방법에 대한 자세한 내용은 데이터 스토어 검색 구성을 참조하세요.