고객 채팅 로그에서 답하지 못한 질문을 찾아 우선순위를 정하고, 지식 콘텐츠를 보강한 뒤 효과까지 확인하는 방법을 정리했습니다.
FAQ 페이지와 상품 안내문을 열심히 만들어도 고객은 늘 예상 밖의 질문을 합니다. 어떤 질문에서 막히는지는 채팅 로그에 이미 기록되어 있지만, 쌓인 로그를 체계적으로 읽는 팀은 많지 않습니다. 이 글에서는 로그에서 부족한 콘텐츠를 찾는 기준, 매주 반복할 수 있는 점검 루틴, 우선순위를 정하는 방법, 고친 뒤 효과를 확인하는 방법을 소개합니다.
콘텐츠 공백이란 무엇인가
콘텐츠 공백이란 고객이 실제로 물어보는데, 지금의 지식 자료로는 정확하게 답할 수 없는 영역을 말합니다. 단순히 "자료가 없다"는 뜻만은 아닙니다. 로그를 들여다보면 공백에는 몇 가지 유형이 있습니다.
- 자료 부재: 배송 지연 시 보상 기준처럼 문서 자체가 없는 경우입니다.
- 표현 불일치: 문서에는 "교환 및 반품 절차"라고 쓰여 있는데, 고객은 "옷이 작아서 바꾸고 싶어요"라고 묻는 경우입니다. 내용은 있어도 고객의 말과 연결되지 않습니다.
- 오래된 정보: 영업시간이나 요금이 바뀌었는데 자료가 예전 그대로인 경우입니다.
- 정보 흩어짐: 답이 세 문서에 나뉘어 있어 한 번에 설명하지 못하는 경우입니다.
- 사람의 판단이 필요한 영역: 예외 환불처럼 정책상 담당자가 결정해야 하는 경우입니다. 이는 자료를 더 써서 해결할 문제가 아니라 상담원 연결 규칙을 정할 문제입니다.
유형을 구분해야 하는 이유는 처방이 서로 다르기 때문입니다. 모든 문제를 "문서를 더 쓰자"로 풀면 문서만 늘고 답변 품질은 나아지지 않습니다.
채팅 로그에서 공백이 숨어 있는 곳
공백은 대개 눈에 띄는 오류보다 사소한 신호로 나타납니다. 다음 단서를 먼저 찾아보시기 바랍니다.
1. 답변을 못 하거나 얼버무린 대화
"확인이 어렵습니다", "고객센터로 문의해 주세요" 같은 답으로 끝난 대화입니다. 가장 직접적인 신호이므로 매주 가장 먼저 모아야 합니다.
2. 사람에게 넘어간 대화
상담원에게 연결된 대화는 AI가 풀지 못한 질문의 목록과 같습니다. 연결 사유를 훑어보면 같은 주제가 반복되는지 금방 보입니다.
3. 낮은 평가를 받은 대화
고객이 엄지 아래 평가를 남겼거나 같은 질문을 두세 번 바꿔 묻는 대화입니다. 답은 했지만 고객이 납득하지 못했다는 뜻입니다.
4. 채널별로 다르게 나타나는 질문
같은 회사라도 채널마다 묻는 내용이 다릅니다. 예를 들어 웹사이트 채팅에서는 결제나 배송 조회 질문이 많고, 카카오톡 채널에서는 영업시간, 매장 위치, 예약 변경처럼 짧고 구어체인 질문이 많습니다. Instagram 다이렉트 메시지에서는 "이 제품 재입고 언제예요?", "사진 속 색상 아직 있나요?"처럼 게시물을 보고 던지는 질문이 흔합니다. 채널별로 나눠 보면 한 채널에서만 반복되는 공백이 드러납니다.
5. 같은 질문의 다른 표현
"환불", "취소", "돈 돌려받기", "결제 취소"는 모두 비슷한 의도입니다. 표현이 다양할수록 문서의 제목과 본문 표현이 고객의 말과 어긋날 가능성이 커집니다. 이 표현들을 모아 두면 문서를 고칠 때 그대로 재료가 됩니다.
매주 반복하는 점검 루틴
한 번에 크게 정리하는 방식은 오래가지 않습니다. 매주 같은 시간에 30분에서 1시간 정도만 쓰는 작은 루틴이 더 효과적입니다.
- 01로그에서 의심 대화 표시
- 02원인 유형별로 분류
- 03우선순위 정해 수정
- 04다음 주 같은 주제 재확인
1단계: 표본 추출
모든 대화를 읽을 필요는 없습니다. 위에서 말한 신호, 즉 답변 실패, 상담원 연결, 낮은 평가가 있는 대화를 먼저 걸러 냅니다. 여기에 정상으로 보이는 대화를 몇 건 무작위로 섞어 읽으면 놓친 문제를 확인할 수 있습니다.
2단계: 표시와 메모
문제가 있는 대화는 바로 표시해 둡니다. 메모에는 고객이 쓴 표현, 기대한 답, 실제로 나간 답을 한 줄씩 적습니다. 나중에 같은 주제를 묶을 때 큰 도움이 됩니다.
3단계: 주제별 묶음
표시한 대화를 주제별로 묶으면 "건수가 많은 주제"가 저절로 정렬됩니다. 한 주에 한 건만 나온 질문과 열 건 나온 질문은 대응 순서가 달라야 합니다.
4단계: 담당자와 기한 지정
공백을 발견하고도 방치되는 가장 흔한 이유는 담당자가 없기 때문입니다. 주제마다 한 사람을 정하고 "이번 주 안", "다음 주 안"처럼 기한을 적어 두시기 바랍니다.
가상의 예를 하나 들어 보겠습니다. 한 달에 300건의 채팅을 받는 온라인 매장이 있다고 가정해 보겠습니다. 이 매장이 매주 표시된 대화 중 약 15건만 훑어도 한 달이면 60건 정도가 쌓입니다. 그 60건을 원인별로 나눠 보면 다음과 같은 모양이 나올 수 있습니다.
이 수치는 설명을 위한 가정입니다. 다만 이런 식으로 분류하면 "문서를 새로 쓸 것"과 "기존 문서의 표현을 고칠 것"이 분리됩니다. 위 예에서는 새 글이 필요한 경우보다 기존 자료를 손봐야 하는 경우도 적지 않습니다.
선별하기: 모든 공백이 글이 될 필요는 없다
표시된 질문마다 새 문서를 쓰면 곧 관리하기 어려운 자료 더미가 됩니다. 다음 네 가지 질문으로 먼저 걸러 보시기 바랍니다.
- 얼마나 자주 묻는가? 한 달에 한 번 나온 질문은 보류하고, 반복되는 질문을 먼저 처리합니다.
- 틀리면 얼마나 위험한가? 환불 조건, 요금, 예약 취소 규정처럼 오답이 곧 분쟁이 되는 주제는 건수가 적어도 우선합니다.
- 답이 안정적인가? 매번 상황에 따라 달라지는 답이라면 문서보다 상담원 연결 규칙이 어울립니다.
- 기존 문서를 고치면 끝나는가? 새 글보다 제목, 표현, 예시를 보강하는 쪽이 빠르고 중복도 생기지 않습니다.
| 상황 | 권장 대응 |
|---|---|
| 자주 묻고 답이 명확함 | 새 문서나 Q&A 추가 |
| 문서는 있으나 표현이 다름 | 기존 문서에 고객 표현 추가 |
| 정보가 오래됨 | 원본 수정 후 재반영 |
| 예외 판단이 필요함 | 상담원 연결 조건 정리 |
| 거의 묻지 않음 | 기록만 남기고 보류 |
고친 내용이 정착하도록 쓰는 방법
문서를 추가했는데도 같은 질문이 계속 틀린 답으로 돌아온다면, 대개 쓰는 방식의 문제입니다.
- 질문 형태의 제목을 씁니다. "반품 규정"보다 "받은 상품이 마음에 안 들면 어떻게 반품하나요?"가 고객의 말과 가깝습니다.
- 결론을 첫 문장에 둡니다. "수령 후 7일 이내에 신청하시면 반품할 수 있습니다"처럼 답부터 쓰고 조건과 예외를 뒤에 붙입니다.
- 고객이 쓴 표현을 그대로 넣습니다. 로그에서 모은 "바꾸고 싶어요", "돈 돌려받고 싶어요" 같은 말을 본문에 자연스럽게 녹입니다.
- 한 문서에 한 주제만 담습니다. 여러 주제가 섞이면 검색 결과도 흐려집니다.
- 날짜와 담당자를 남깁니다. 언제 누가 확인했는지 알아야 오래된 정보를 찾기 쉽습니다.
- 조건과 예외를 숫자로 적습니다. "빠르게 처리됩니다" 대신 실제 기준을 적어야 상담원도 같은 답을 합니다.
카카오톡 채널을 쓰는 경우에는 답변 길이도 고려해야 합니다. 모바일 화면에서는 긴 설명이 부담스러우므로, 짧은 핵심 답과 이어서 물어볼 수 있는 안내를 함께 준비해 두면 좋습니다.
공백이 메워졌는지 측정하기
수정을 마쳤다면 다음 주 로그에서 확인할 차례입니다. 복잡한 지표 없이도 다음 세 가지로 충분합니다.
- 같은 주제의 질문이 상담원 연결로 이어지는 비율이 줄었는가
- 낮은 평가가 달린 대화가 줄었는가
- 같은 질문을 고객이 다시 묻는 횟수가 줄었는가
비교 기준은 수정 전 두세 주의 건수입니다. 주제별로 "수정일"을 기록해 두면 전후 비교가 쉬워집니다. 한 주만 보고 결론을 내리지 말고, 최소 2주는 지켜보시기 바랍니다. 수치가 거의 달라지지 않았다면 문서를 더 쓰기보다 표현이 맞는지, 오래된 자료가 남아 충돌하지 않는지부터 점검하는 편이 낫습니다.
AI SNS CHAT에서 실행하는 방법
AI SNS CHAT에서는 이 루프를 다음 화면들로 이어서 진행할 수 있습니다. 공백만 따로 집계해 주는 전용 리포트는 제공 기능으로 확인되지 않으므로, 아래 화면을 활용한 사람의 점검이 기본입니다.
로그 읽고 표시하기
사이드바의 Activity → Chat logs에서 웹사이트 채팅, KakaoTalk, Instagram 등 이메일을 제외한 채널의 대화를 볼 수 있습니다. 필터로 범위를 좁히고, 문제가 있는 대화를 선택해 표시(flag)하거나 상담원에게 에스컬레이션할 수 있습니다. 여러 건을 한 번에 선택해 처리하는 기능과 내보내기도 있어 주간 회의 자료로 쓰기 좋습니다. 고객이 남긴 엄지 위/아래 평가도 여기서 확인합니다. 이메일 대화는 Inbox에서 봅니다.
주제 흐름 파악하기
Analytics에는 Chats, Topics, Question history, Sentiment 화면이 있습니다. Topics와 Question history로 어떤 질문이 많이 나오는지 훑어볼 수 있습니다. 고급 분석은 Pro 플랜에서 제공됩니다.
바로 고쳐서 학습시키기
Chat logs나 Inbox에서 대화에 개입해 상담원이 직접 답할 수 있고, 그 답을 이상적인 답변으로 고쳐 에이전트를 학습시킬 수 있습니다. 이는 "자료가 없었던" 공백을 가장 빠르게 메우는 방법입니다.
지식 자료 보강하기
사이드바의 Data sources에는 Files, Text snippets, Website, Q&A, Notion 등이 있습니다. 짧고 명확한 답은 Q&A에, 긴 안내는 Text snippets나 Files에 정리하면 됩니다. 이미 Notion, Confluence, Google Drive 같은 곳에 문서를 관리한다면 Channels의 커넥터로 연결할 수 있고, 원본을 고친 뒤 다시 읽어 오면 오래된 정보 문제도 줄어듭니다.
확인과 기록
수정한 뒤에는 Playground에서 고객이 쓴 문장 그대로 물어 보며 답을 확인할 수 있습니다. 자료를 잘못 고쳤을 때는 복원 지점(restore point)으로 되돌릴 수 있습니다. 또한 Workspace settings → Activity에서는 각 데이터 소스를 누가 추가하고 마지막으로 수정했는지 확인할 수 있어 담당자 관리에 도움이 됩니다.
요금제별 기능 범위는 요금 안내에서, 전체 기능은 기능 소개에서 확인하실 수 있습니다.
자주 묻는 질문
매주 몇 건 정도의 채팅을 점검해야 하나요?
전체를 읽을 필요는 없습니다. 답변 실패, 상담원 연결, 낮은 평가가 있는 대화를 먼저 보고, 정상 대화를 몇 건 무작위로 섞어 읽는 정도면 충분합니다. 처음에는 한 주에 20건 안팎으로 시작해 루틴이 자리 잡으면 조절하시기 바랍니다.
답하지 못한 질문마다 새 글을 써야 하나요?
그렇지 않습니다. 반복 빈도, 오답의 위험도, 답의 안정성을 기준으로 걸러야 합니다. 기존 문서의 표현만 고쳐도 해결되는 경우가 많고, 예외 판단이 필요한 질문은 문서보다 상담원 연결 규칙이 어울립니다.
AI SNS CHAT이 콘텐츠 공백을 자동으로 보고해 주나요?
공백만 따로 정리해 주는 전용 자동 리포트는 확인되지 않습니다. 대신 Chat logs의 표시와 평가, Analytics의 Topics와 Question history를 조합해 직접 찾을 수 있습니다. 고급 분석은 Pro 플랜에서 제공됩니다.
자료가 있는데도 에이전트가 틀리게 답하면 어떻게 하나요?
먼저 같은 주제의 오래된 자료나 서로 충돌하는 문서가 있는지 확인하세요. 그다음 고객이 쓴 표현을 문서 제목과 본문에 반영하고, Playground에서 같은 문장으로 다시 시험해 봅니다. 대화에서 답을 직접 고쳐 이상적인 답변으로 학습시키는 방법도 있습니다.


