產出 #283

env=production · MatrixCloud AI Agent (2ebddf81-c4c2-4f7f-9f3a-c4843cd13954) · eval_kind=kb_accuracy

已完成
已寫入
5 / 10
通過驗證
5
場景覆蓋
1 / 3
總成本
$0.0454
Tokens
↑371575 / ↓14955
MISSED
2 個 scenario 未被任何 case 涵蓋:841, 839。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-2ebddf81-r1-053959053
案例明細(83 筆 — 含已寫入、被拒、retry 軌跡)
  • 品質檢查未通過 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:매트릭스챗(Matrix Chat : 카카오 상담톡) 업데이트 안내 know_73543
      Q: 매트릭스챗(Matrix Chat : 카카오 상담톡) 업데이트 안내
      A: 안녕하세요. 매트릭스클라우드입니다.
      매트릭스챗(Matrix Chat : 카카오 상담톡)의 일부 기능이 개선/추가 되어 공지 보내드립니다.
       
      1. 상담종료 요청 시 확인 창 추가
      -> 일부 상담원들이 상담종료 버튼을 잘못 눌러 상담 중 세션이 종료되는 상황이 생겨 버튼 클릭 시 확인창이 호출되어 다시 한번 확인 후 처리되도록 개선되었습니다.
      
       
      2. 상담원 종료와 고객 종료를 구분하여 종료 메세지 구분 처리
      -> 상담종료가 고객에 의하여 되었는지, 상담원에 의해 종료 되었는지 확인하고 싶다는 의견이 있어 두 개의 종료 처리 시에 멘트를 다르게 처리 하였습니다.
      
       
      3. 고객의 지난 상담 메세지 확인 기능
      -> 동일 고객이 여러 번 상담을 요청한 경우 지난 채팅의 내용 확인을 위하여 티켓을 이동하는 번거로움을 없애고자 지난 채팅 메세지 리스트를 보여주는 기능을 추가하였습니다. 신규 상담 건이 들어 온 경우 지난 채팅 이력이 있으면 대화창 상단에 '이전 상담 메세지 조회' 버튼이 노
    Q
    有哪些新功能可以檢視過去的諮詢訊息?
    A
    新增的功能可以讓客戶在多次諮詢中,方便地檢視過去的聊天內容,避免繁瑣的票據移動。當有新的諮詢進來時,如果有過去的聊天紀錄,對話框上方會顯示'以前諮詢訊息查詢'的按鈕。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:매트릭스챗(Matrix Chat : 카카오 상담톡) 업데이트 안내 know_73543
      Q: 매트릭스챗(Matrix Chat : 카카오 상담톡) 업데이트 안내
      A: 안녕하세요. 매트릭스클라우드입니다.
      매트릭스챗(Matrix Chat : 카카오 상담톡)의 일부 기능이 개선/추가 되어 공지 보내드립니다.
       
      1. 상담종료 요청 시 확인 창 추가
      -> 일부 상담원들이 상담종료 버튼을 잘못 눌러 상담 중 세션이 종료되는 상황이 생겨 버튼 클릭 시 확인창이 호출되어 다시 한번 확인 후 처리되도록 개선되었습니다.
      
       
      2. 상담원 종료와 고객 종료를 구분하여 종료 메세지 구분 처리
      -> 상담종료가 고객에 의하여 되었는지, 상담원에 의해 종료 되었는지 확인하고 싶다는 의견이 있어 두 개의 종료 처리 시에 멘트를 다르게 처리 하였습니다.
      
       
      3. 고객의 지난 상담 메세지 확인 기능
      -> 동일 고객이 여러 번 상담을 요청한 경우 지난 채팅의 내용 확인을 위하여 티켓을 이동하는 번거로움을 없애고자 지난 채팅 메세지 리스트를 보여주는 기능을 추가하였습니다. 신규 상담 건이 들어 온 경우 지난 채팅 이력이 있으면 대화창 상단에 '이전 상담 메세지 조회' 버튼이 노
    Q
    新增的客戶過去聊天紀錄查看功能是什麼?
    A
    新增的功能可以讓客戶查看過去的聊天訊息列表,避免因為移動票券而造成的不便。如果有新的諮詢進來,並且有過去的聊天紀錄,對話框上方會顯示'之前諮詢消息查詢'的按鈕。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 3 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:매트릭스챗(Matrix Chat : 카카오 상담톡) 업데이트 안내 know_73543
      Q: 매트릭스챗(Matrix Chat : 카카오 상담톡) 업데이트 안내
      A: 안녕하세요. 매트릭스클라우드입니다.
      매트릭스챗(Matrix Chat : 카카오 상담톡)의 일부 기능이 개선/추가 되어 공지 보내드립니다.
       
      1. 상담종료 요청 시 확인 창 추가
      -> 일부 상담원들이 상담종료 버튼을 잘못 눌러 상담 중 세션이 종료되는 상황이 생겨 버튼 클릭 시 확인창이 호출되어 다시 한번 확인 후 처리되도록 개선되었습니다.
      
       
      2. 상담원 종료와 고객 종료를 구분하여 종료 메세지 구분 처리
      -> 상담종료가 고객에 의하여 되었는지, 상담원에 의해 종료 되었는지 확인하고 싶다는 의견이 있어 두 개의 종료 처리 시에 멘트를 다르게 처리 하였습니다.
      
       
      3. 고객의 지난 상담 메세지 확인 기능
      -> 동일 고객이 여러 번 상담을 요청한 경우 지난 채팅의 내용 확인을 위하여 티켓을 이동하는 번거로움을 없애고자 지난 채팅 메세지 리스트를 보여주는 기능을 추가하였습니다. 신규 상담 건이 들어 온 경우 지난 채팅 이력이 있으면 대화창 상단에 '이전 상담 메세지 조회' 버튼이 노
    Q
    客戶可以怎麼確認過去的聊天訊息?
    A
    客戶可以透過新增的功能查看過去的聊天訊息,當同一客戶多次請求諮詢時,系統會顯示過去聊天訊息列表,方便客戶確認。新進的諮詢如果有過去的聊天歷史,對話框上方會顯示 '之前諮詢訊息查詢' 的按鈕。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:[매트릭스챗] 고객 병합 가이드 know_73501
      Q: [매트릭스챗] 고객 병합 가이드
      A: 안녕하세요. 매트릭스클라우드 입니다.
       
      기존 등록된 고객과 상담톡의 고객을 매핑하고 싶을때는 고객 병합을 진행 해야 합니다.
      상담톡에서는 고객을 식별 할 수 정보가 kakaotalk ID 값 하나뿐입니다(개인정보는 일체 제공하지 않습니다). 하여 고객 식별을 의해서는 상담톡 상담 진행시 고객을 식별 할 수 있는 정보를 고객에게 수집해야 합니다. 고객 정보가 수집이 되었다면 현재 티켓의 고객정보에 등록되어 있는 kakaotalk ID 값을 복사 후 이미 등록된 고객정보에서 매핑할 고객을 선택 후  kakaotalk ID 값을 업데이트 합니다. 그다음 두개의 고객정보를 병합 진행 하면 상담톡의 고객정보로 업데이트 되게 됩니다.
      병합을 사용하실 경우 아래 예시의 순서에 따라 진행해보세요
      처음 상담톡 고객이 인입을 하게 되면 아래 이미지 처럼 고객정보가 생성이 됩니다
      해당 고객의 정보를 보면 kakaotalk ID 값에 고객의 id 값이 생성 되어 있습니다
      
      상담중 고객정보를 수집하여 등
    Q
    請問如何更新 customer kakaotalk ID 價值呢?
    A
    當您收集到客戶的資訊後,將現有的 kakaotalk ID 值複製,然後在已註冊的客戶資訊中選擇要對應的客戶,接著更新其 kakaotalk ID 值,最後進行客戶合併以更新到諮詢 Talk 的客戶資訊中。
    原因
    • 答案與資料來源的重疊度只有 14.1%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:[매트릭스챗] 고객 병합 가이드 know_73501
      Q: [매트릭스챗] 고객 병합 가이드
      A: 안녕하세요. 매트릭스클라우드 입니다.
       
      기존 등록된 고객과 상담톡의 고객을 매핑하고 싶을때는 고객 병합을 진행 해야 합니다.
      상담톡에서는 고객을 식별 할 수 정보가 kakaotalk ID 값 하나뿐입니다(개인정보는 일체 제공하지 않습니다). 하여 고객 식별을 의해서는 상담톡 상담 진행시 고객을 식별 할 수 있는 정보를 고객에게 수집해야 합니다. 고객 정보가 수집이 되었다면 현재 티켓의 고객정보에 등록되어 있는 kakaotalk ID 값을 복사 후 이미 등록된 고객정보에서 매핑할 고객을 선택 후  kakaotalk ID 값을 업데이트 합니다. 그다음 두개의 고객정보를 병합 진행 하면 상담톡의 고객정보로 업데이트 되게 됩니다.
      병합을 사용하실 경우 아래 예시의 순서에 따라 진행해보세요
      처음 상담톡 고객이 인입을 하게 되면 아래 이미지 처럼 고객정보가 생성이 됩니다
      해당 고객의 정보를 보면 kakaotalk ID 값에 고객의 id 값이 생성 되어 있습니다
      
      상담중 고객정보를 수집하여 등
    Q
    請問如何更新已註冊的客戶 kakaotalk ID?
    A
    您好!若要更新已註冊的客戶 kakaotalk ID,首先需要收集客戶的資訊。收到客戶資訊後,請複製該客戶目前票據中的 kakaotalk ID,然後在已註冊的客戶資料中選擇要對應的客戶,接著更新 kakaotalk ID 值。完成後,您就可以進行客戶資料的合併,並將更新後的資料同步到客服系統中。
    原因
    • 答案與資料來源的重疊度只有 10.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 3 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:[매트릭스챗] 고객 병합 가이드 know_73501
      Q: [매트릭스챗] 고객 병합 가이드
      A: 안녕하세요. 매트릭스클라우드 입니다.
       
      기존 등록된 고객과 상담톡의 고객을 매핑하고 싶을때는 고객 병합을 진행 해야 합니다.
      상담톡에서는 고객을 식별 할 수 정보가 kakaotalk ID 값 하나뿐입니다(개인정보는 일체 제공하지 않습니다). 하여 고객 식별을 의해서는 상담톡 상담 진행시 고객을 식별 할 수 있는 정보를 고객에게 수집해야 합니다. 고객 정보가 수집이 되었다면 현재 티켓의 고객정보에 등록되어 있는 kakaotalk ID 값을 복사 후 이미 등록된 고객정보에서 매핑할 고객을 선택 후  kakaotalk ID 값을 업데이트 합니다. 그다음 두개의 고객정보를 병합 진행 하면 상담톡의 고객정보로 업데이트 되게 됩니다.
      병합을 사용하실 경우 아래 예시의 순서에 따라 진행해보세요
      처음 상담톡 고객이 인입을 하게 되면 아래 이미지 처럼 고객정보가 생성이 됩니다
      해당 고객의 정보를 보면 kakaotalk ID 값에 고객의 id 값이 생성 되어 있습니다
      
      상담중 고객정보를 수집하여 등
    Q
    請問如何更新已登錄的 kakaotalk ID 值呢?
    A
    當客戶信息收集完畢後,請將當前票據中的 kakaotalk ID 值複製。然後從已登錄的客戶信息中選擇要映射的客戶,並更新 kakaotalk ID 值。接下來,進行兩個客戶信息的合併,這樣就會更新到客服的客戶信息中。
    原因
    • 答案與資料來源的重疊度只有 13.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:블루투스 헤드셋을 콜센터에서 사용할 경우 통화 품질 영향 know_73548
      Q: 블루투스 헤드셋을 콜센터에서 사용할 경우 통화 품질 영향
      A: 콜센터에서 블루투스 헤드셋을 사용할 경우, 유선 헤드셋에 비해 통화 품질에 영향을 미칠 수 있는 요소들이 존재합니다. 다음은 그 주요 요인들입니다: 1. 무선 간섭 및 지연 (Latency)
      
      2.4GHz 주파수 대역은 Wi-Fi, 마우스, 키보드 등과 충돌 가능성이 높음.
      간섭이 생기면 음성 지연, 끊김, 왜곡 발생 가능성 증가.
      BLE (Bluetooth Low Energy)는 지연시간이 더 크므로 콜센터용으로 부적합.
       2. 배터리 상태 및 전력 관리
      
      블루투스 헤드셋은 배터리 잔량이 낮을 때 송수신 품질이 저하되거나, 연결이 끊기는 경우가 있음.
      일부 기기에서는 절전 모드로 진입하면서 초기 통화 연결 시 오디오 미출력 현상이 발생할 수 있음.
       3. 운영체제/소프트폰의 블루투스 장치 처리 방식
      
      Windows, macOS, 일부 소프트폰(SIP Client)에서는 블루투스 장치를 기본 장치로 인식하지 못하거나, 연결 후 인식에 시간이 걸리는 경우가 있음.
      통화 연결 직후 1~
    Q
    在客服中心使用藍牙耳機的通話品質會受到哪些因素影響?
    A
    在客服中心使用藍牙耳機時,可能影響通話品質的因素包括:1. 無線干擾和延遲,例如2.4GHz頻段可能與Wi-Fi、滑鼠和鍵盤衝突,導致語音延遲、斷斷續續和失真;2. 電池狀態和電源管理,當電池電量低時,通訊品質可能下降或連接中斷;3. 作業系統/軟體對藍牙設備的處理方式,有時Windows、macOS以及某些軟體可能無法正確識別藍牙設備。
    原因
    • 答案與資料來源的重疊度只有 12.6%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:블루투스 헤드셋을 콜센터에서 사용할 경우 통화 품질 영향 know_73548
      Q: 블루투스 헤드셋을 콜센터에서 사용할 경우 통화 품질 영향
      A: 콜센터에서 블루투스 헤드셋을 사용할 경우, 유선 헤드셋에 비해 통화 품질에 영향을 미칠 수 있는 요소들이 존재합니다. 다음은 그 주요 요인들입니다: 1. 무선 간섭 및 지연 (Latency)
      
      2.4GHz 주파수 대역은 Wi-Fi, 마우스, 키보드 등과 충돌 가능성이 높음.
      간섭이 생기면 음성 지연, 끊김, 왜곡 발생 가능성 증가.
      BLE (Bluetooth Low Energy)는 지연시간이 더 크므로 콜센터용으로 부적합.
       2. 배터리 상태 및 전력 관리
      
      블루투스 헤드셋은 배터리 잔량이 낮을 때 송수신 품질이 저하되거나, 연결이 끊기는 경우가 있음.
      일부 기기에서는 절전 모드로 진입하면서 초기 통화 연결 시 오디오 미출력 현상이 발생할 수 있음.
       3. 운영체제/소프트폰의 블루투스 장치 처리 방식
      
      Windows, macOS, 일부 소프트폰(SIP Client)에서는 블루투스 장치를 기본 장치로 인식하지 못하거나, 연결 후 인식에 시간이 걸리는 경우가 있음.
      통화 연결 직후 1~
    Q
    請問在客服中心使用藍牙耳機時,會影響通話品質的因素有哪些?
    A
    在客服中心使用藍牙耳機時,相較於有線耳機,會影響通話品質的因素包括:1. 無線干擾和延遲,2. 電池狀況和電源管理,3. 作業系統或軟體對藍牙裝置的處理方式。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 3 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:블루투스 헤드셋을 콜센터에서 사용할 경우 통화 품질 영향 know_73548
      Q: 블루투스 헤드셋을 콜센터에서 사용할 경우 통화 품질 영향
      A: 콜센터에서 블루투스 헤드셋을 사용할 경우, 유선 헤드셋에 비해 통화 품질에 영향을 미칠 수 있는 요소들이 존재합니다. 다음은 그 주요 요인들입니다: 1. 무선 간섭 및 지연 (Latency)
      
      2.4GHz 주파수 대역은 Wi-Fi, 마우스, 키보드 등과 충돌 가능성이 높음.
      간섭이 생기면 음성 지연, 끊김, 왜곡 발생 가능성 증가.
      BLE (Bluetooth Low Energy)는 지연시간이 더 크므로 콜센터용으로 부적합.
       2. 배터리 상태 및 전력 관리
      
      블루투스 헤드셋은 배터리 잔량이 낮을 때 송수신 품질이 저하되거나, 연결이 끊기는 경우가 있음.
      일부 기기에서는 절전 모드로 진입하면서 초기 통화 연결 시 오디오 미출력 현상이 발생할 수 있음.
       3. 운영체제/소프트폰의 블루투스 장치 처리 방식
      
      Windows, macOS, 일부 소프트폰(SIP Client)에서는 블루투스 장치를 기본 장치로 인식하지 못하거나, 연결 후 인식에 시간이 걸리는 경우가 있음.
      통화 연결 직후 1~
    Q
    請問使用藍牙耳機在客服中心會影響通話品質嗎?
    A
    在客服中心使用藍牙耳機時,確實有可能會影響通話品質,主要的因素包括:1. 無線干擾與延遲,2. 電池狀態及電力管理,3. 操作系統/軟件對藍牙裝置的處理方式。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:접속기록, 접근권한, 감사기록 조회, 보관기간 know_73578
      Q: 접속기록, 접근권한, 감사기록  조회, 보관기간
      A: 매트릭스클라우드의 접속기록, 접근권한변경 기록 등 보안 감사기록은 3년 이상 보관하며 조회도 가능합니다.접속 기록은 DB에 저장하며 별도로 DB 백업하고 있습니다.
    Q
    接觸記錄可以查詢嗎
    A
    接觸記錄是可以查詢的,並且會保存超過三年。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:접속기록, 접근권한, 감사기록 조회, 보관기간 know_73578
      Q: 접속기록, 접근권한, 감사기록  조회, 보관기간
      A: 매트릭스클라우드의 접속기록, 접근권한변경 기록 등 보안 감사기록은 3년 이상 보관하며 조회도 가능합니다.접속 기록은 DB에 저장하며 별도로 DB 백업하고 있습니다.
    Q
    接入紀錄可以查詢嗎
    A
    接入紀錄可以查詢,並且會保存3年以上。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 3 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:접속기록, 접근권한, 감사기록 조회, 보관기간 know_73578
      Q: 접속기록, 접근권한, 감사기록  조회, 보관기간
      A: 매트릭스클라우드의 접속기록, 접근권한변경 기록 등 보안 감사기록은 3년 이상 보관하며 조회도 가능합니다.접속 기록은 DB에 저장하며 별도로 DB 백업하고 있습니다.
    Q
    接入紀錄可以查詢嗎?
    A
    接入紀錄是可以查詢的,並且會在資料庫中保存超過三年。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:전화 발신했을 때 차단번호 오류 메시지가 젠데스크 화면에 표시되는 이유는 무엇입니까? know_73574
      Q: 전화 발신했을 때 차단번호 오류 메시지가 젠데스크 화면에 표시되는 이유는 무엇입니까?
      A: 티켓에서 발신통화를 했을 때 차단번호 오류 메시지가 표시되는 경우는 talk 서비스를 비활성화 하면 해당 오류 메시지가 표시되지 않습니다.
      만약 zendesk talk 서비스가 활성화 되어 있지 않은 상태라도 먼저 활성화 하였다가 다시 비활성화 하시면 해결됩니다.
       
      감사합니다.
    Q
    請問如果啟用過 zendesk talk 服務後再關閉,會解決電話發信時的錯誤訊息嗎?
    A
    是的,如果您已經啟用過 zendesk talk 服務再將其關閉,將會解決顯示的電話發信時的錯誤訊息。
    原因
    • 答案與資料來源的重疊度只有 22.7%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:전화 발신했을 때 차단번호 오류 메시지가 젠데스크 화면에 표시되는 이유는 무엇입니까? know_73574
      Q: 전화 발신했을 때 차단번호 오류 메시지가 젠데스크 화면에 표시되는 이유는 무엇입니까?
      A: 티켓에서 발신통화를 했을 때 차단번호 오류 메시지가 표시되는 경우는 talk 서비스를 비활성화 하면 해당 오류 메시지가 표시되지 않습니다.
      만약 zendesk talk 서비스가 활성화 되어 있지 않은 상태라도 먼저 활성화 하였다가 다시 비활성화 하시면 해결됩니다.
       
      감사합니다.
    Q
    請問若重新啟用後再停用 zendesk talk 服務,能解決阻擋號碼錯誤訊息嗎?
    A
    是的,重新啟用 zendesk talk 服務後再停用,可以解決阻擋號碼錯誤訊息。
    原因
    • 答案與資料來源的重疊度只有 29.4%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 3 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:전화 발신했을 때 차단번호 오류 메시지가 젠데스크 화면에 표시되는 이유는 무엇입니까? know_73574
      Q: 전화 발신했을 때 차단번호 오류 메시지가 젠데스크 화면에 표시되는 이유는 무엇입니까?
      A: 티켓에서 발신통화를 했을 때 차단번호 오류 메시지가 표시되는 경우는 talk 서비스를 비활성화 하면 해당 오류 메시지가 표시되지 않습니다.
      만약 zendesk talk 서비스가 활성화 되어 있지 않은 상태라도 먼저 활성화 하였다가 다시 비활성화 하시면 해결됩니다.
       
      감사합니다.
    Q
    請問啟用過 zendesk talk 服務後,怎麼再次停用呢?
    A
    如果您首先啟用過 zendesk talk 服務,再次停用時可以解決顯示的阻擋號碼錯誤訊息。
    原因
    • 答案與資料來源的重疊度只有 25.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:Matrix Talk 등 MatrixCloud 서비스를 사용하기 위한 컴퓨터 권장 사양 know_73511
      Q: Matrix Talk 등 MatrixCloud 서비스를 사용하기 위한 컴퓨터 권장 사양
      A: 질문
      MatrixCloud의 서비스를 안정적으로 사용하기 위한 컴퓨터 권장 사양이 있습니까?
       
      답변
      컴퓨터 사양은 CPU보다는 메모리(RAM) 크기가 서비스 안정성에 영향을 많이 미칠 수 있습니다.
      웹브라우저를 이용한 웹 어플리케이션을 많이 사용하기 때문에 메모리를 많이 소진하게 됩니다.
       
      노트북이나 데스크톱 PC의 메모리가 8GB라면 윈도우 11에서는 부팅만 해도 8GB에 근접한 메모리를 소진하게 되어 웹 어플리케이션을 사용하다 보면 메모리 부족 상태에 놓이게 되어 실시간 처리가 되어야 하는 CTI 소프트폰의 경우 일시적인 멈춤 현상을 경험하실 수도 있습니다.
       
      [윈도우 11 부팅 후 초기 메모리 상태 사례 1]
      
      [윈도우 11 부팅 후 초기 메모리 상태 사례 2]
      
       
      웹을 이용한 여러 서비스와 MatrixCloud 서비스를 안정적으로 사용하기 위한 메모리 크기는 16GB 이상 사용하시기를 권장해 드립니다.
    Q
    使用 MatrixCloud 服務需要多少記憶體?
    A
    使用 MatrixCloud 服務穩定的話,建議記憶體大小要在 16GB 以上。
  • 品質檢查未通過 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:젠데스크 티켓 생성 규칙 know_73581
      Q: 젠데스크 티켓 생성 규칙
      A: Matrix Talk에서 전화와 문자를 통한 티켓 생성은 항상 신규 티켓 생성과 기존 미해결 티켓 업데이트 2가지 옵션을 제공하며 세부적인 상황에 따라 티켓을 신규 생성 또는 기존 티켓에 코멘트 추가 등의 규칙이 적용됩니다.
      
      
      
      구분
      미해결 티켓(기본)
      항상 신규 티켓
      Ticket Comment
      Ticket Tag
      
      
      
      
      공통
      
      - 전화번호의 사용자가 없을 경우 “Caller:전화번호”로 새 사용자를 생성함
      
      - 좌동
       
      matrixtalk
      
      
      수신전화
      
      - 가장 최근의 미해결 티켓에 통화이력이 추가됨
      - 미해결 티켓 없는 경우 신규 생성
      
      - 신규 생성
      
      ● 전화구분 : 수신전화● 전화번호 : ‘고객전화번호’● 수신번호 : ‘상담원 내선번호’● 응답시간 : ‘yyyy-mm-dd hh:mm:dd’● 응답자 : ‘zendesk 상담원 이름’● IVR 인입경로 : ‘IVR태그’ ————————————● 통화시간 : ‘mm분 ss초’● 녹취URL : ‘녹취재생 링크’
      
      
      inbound_
    Q
    Zendesk票據怎麼生成?
    A
    Matrix Talk提供電話和短信的兩種選項來生成Zendesk票據,且有兩種情況:生成新票據或更新現有未解決票據。具體根據情況決定是新建票據還是對現有票據添加註解。
    原因
    • 答案與資料來源的重疊度只有 20.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:젠데스크 티켓 생성 규칙 know_73581
      Q: 젠데스크 티켓 생성 규칙
      A: Matrix Talk에서 전화와 문자를 통한 티켓 생성은 항상 신규 티켓 생성과 기존 미해결 티켓 업데이트 2가지 옵션을 제공하며 세부적인 상황에 따라 티켓을 신규 생성 또는 기존 티켓에 코멘트 추가 등의 규칙이 적용됩니다.
      
      
      
      구분
      미해결 티켓(기본)
      항상 신규 티켓
      Ticket Comment
      Ticket Tag
      
      
      
      
      공통
      
      - 전화번호의 사용자가 없을 경우 “Caller:전화번호”로 새 사용자를 생성함
      
      - 좌동
       
      matrixtalk
      
      
      수신전화
      
      - 가장 최근의 미해결 티켓에 통화이력이 추가됨
      - 미해결 티켓 없는 경우 신규 생성
      
      - 신규 생성
      
      ● 전화구분 : 수신전화● 전화번호 : ‘고객전화번호’● 수신번호 : ‘상담원 내선번호’● 응답시간 : ‘yyyy-mm-dd hh:mm:dd’● 응답자 : ‘zendesk 상담원 이름’● IVR 인입경로 : ‘IVR태그’ ————————————● 통화시간 : ‘mm분 ss초’● 녹취URL : ‘녹취재생 링크’
      
      
      inbound_
    Q
    生成 Zendesk 票據有什麼選項?
    A
    Matrix Talk提供電話和短信的兩種選項來生成Zendesk票據,始終包括新增票據和更新現有未解決票據的兩種選項,具體根據情況應用相應的規則進行票據的創建或添加評論。
    原因
    • 答案與資料來源的重疊度只有 19.2%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答 第 3 次嘗試
    來源素材(點擊查看完整內容)
    • • 知識:젠데스크 티켓 생성 규칙 know_73581
      Q: 젠데스크 티켓 생성 규칙
      A: Matrix Talk에서 전화와 문자를 통한 티켓 생성은 항상 신규 티켓 생성과 기존 미해결 티켓 업데이트 2가지 옵션을 제공하며 세부적인 상황에 따라 티켓을 신규 생성 또는 기존 티켓에 코멘트 추가 등의 규칙이 적용됩니다.
      
      
      
      구분
      미해결 티켓(기본)
      항상 신규 티켓
      Ticket Comment
      Ticket Tag
      
      
      
      
      공통
      
      - 전화번호의 사용자가 없을 경우 “Caller:전화번호”로 새 사용자를 생성함
      
      - 좌동
       
      matrixtalk
      
      
      수신전화
      
      - 가장 최근의 미해결 티켓에 통화이력이 추가됨
      - 미해결 티켓 없는 경우 신규 생성
      
      - 신규 생성
      
      ● 전화구분 : 수신전화● 전화번호 : ‘고객전화번호’● 수신번호 : ‘상담원 내선번호’● 응답시간 : ‘yyyy-mm-dd hh:mm:dd’● 응답자 : ‘zendesk 상담원 이름’● IVR 인입경로 : ‘IVR태그’ ————————————● 통화시간 : ‘mm분 ss초’● 녹취URL : ‘녹취재생 링크’
      
      
      inbound_
    Q
    Zendesk票據可以用什麼方式生成?
    A
    Matrix Talk提供電話和短信的兩種選項來生成Zendesk票據,包括新建票據和更新現有未解決票據。
    原因
    • 答案與資料來源的重疊度只有 29.8%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險
  • 品質檢查未通過 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:티켓 내역 안에 있는 단어나 워딩을 검색할 수 있나요? know_73597
      Q: 티켓 내역 안에 있는 단어나 워딩을 검색할 수 있나요?
      A: 티켓 내역 안에 있는 단어나 워딩을 검색할 방법이 없을까요?
      예를 들면 모든 티켓을 대상으로 '해지' 라는 단어를 포함한 티켓이 있는 지 찾고 싶은데 관련 기능을 찾지 못하겠습니다.
       
      티켓 제목이나 필드 뿐만 아니라 티켓 내의 댓글로 입력한 내용을 검색할 수 있습니다.상단의 돋보기 아이콘 클릭하여 검색하면 티켓 내부의 텍스트까지 검색되는 것 확인하실 수 있습니다.
    Q
    可以搜尋票據內部的單詞或文字嗎
    A
    可以,點擊上方的放大鏡圖示搜尋時,會搜尋到票據內的文字內容。
    原因
    • 答案與資料來源的重疊度只有 0.0%(門檻 30%)—— LLM 寫的答案可能偏離了來源,有 hallucination 風險