執行 #300

全+1 AI 小幫手 (bulk R1) → production-canary (canary)

↓ EXPORT · HTML下載頁面 II. EVAL REPORT兩項目評估報告

狀態: 已完成
案例: 30
開始時間: 16 May 13:00
耗時: 823.0s

¶ Economics · Bot-side N=30 attempts

Cost & Tokens

$0.2061

Total Bot Cost · USD

71.8%

Prompt Cache Hit

cost per case: $0.0069
cost per 1k tokens: $0.0011
input tokens: 176,426
output tokens: 5,414
cached tokens — prompt-cache hit: 126,720
Total Tokens: 181,840

economic efficiency

cost per correct: $0.0013
pass rate: 76.7%; 23 / 30
judge cost: $0.0302

設定快照（reproducibility） 1 個 bot 已捕捉 · Judge：gpt-4o-mini

Bot 設定快照

68fabd86-38da-4c50-81a6-63a1ab539f14 323 筆 KB

SystemPrompt: sha256:b57994de KBContent: sha256:7e3cf598 Tools: sha256:41ec4bc3 Scenarios: sha256:19f1e2f2 AI: gpt-4.1-2025-04-14 (T=0.0, max=2048)

Judge 設定快照

model: gpt-4o-mini T=0.0 max=4096 prompt: v1

已完成

30 / 30

錯誤

失敗維度

首字延遲 p95

9739 ms

Bot 成本（Neptune）

$0.2061

Bot Tokens（Neptune）

181,840

Judge 成本（Eris）

$0.0302

Judge Tokens（Eris）

229,244

維度總表

各維度品質分 · 覆蓋率

找對資料召回

retrieval

100.0%

[100.0% – 100.0%] · n=10

F1 18.2% · 相關率 30.0% · 精確 10.0%

10 / 10 適用

不亂編造平均

faithfulness

100.0%

[100.0% – 100.0%] · n=10

10 / 10 適用

答得到位平均

answer_quality

99.0%

[97.3% – 100.0%] · n=10

10 / 10 適用

案例 0E3F4864

賣場連結在哪裡編輯啊

已完成
第 1 次嘗試 · 已完成 28042ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER賣場連結在哪裡編輯啊

BOT讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您服務！😊 您可以在「分店管理」的編輯處設定或修改賣場連結。請依照以下步驟操作： 1. 進入側邊欄，點選「系統設定」。 2. 選擇「分店管理」。 3. 在分店列表中找到您的店舖，點擊右側的「編輯」按鈕。 4. 進入編輯頁面後，您可以自訂賣場連結內容，包括標題、介紹、網址，還能上傳圖片或影片。 5. 完成後記得點擊「儲存」。如需參考實際操作畫面，請點此圖片：有其他操作上的問題也歡迎隨時詢問喔！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22140 · 哪裡可以看見店家自訂的賣場連結？

問題

哪裡可以看見店家自訂的賣場連結？

回答

請於分店管理編輯處查看或設定賣場連結內容。

意料之外 (9)

! know_22001 · 賣場連結圖文如何更換？

問題

賣場連結圖文如何更換？

回答

請至側邊欄>系統設定>分店管理>編輯，即可管理賣場連結圖文。

! know_21964 · 如何設定賣場連結

問題

如何設定賣場連結

回答

1.進入分店管理：在「全+1」平台主頁，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.按下編輯：在分店列表中，找到您要設定的店舖，點選右側的**「編輯」**按鈕。 3.自訂賣場連結內容：在編輯頁面中，您可以自訂標題、賣場介紹、連結網址，並上傳圖片或影片。完成後，點擊**「儲存」**。如有不清楚的地方請見實際操作畫面：https://caroltestingv15.zendesk.com/hc/article_attachments/13652714557583.png

! know_22136 · 分店網址連結可以自訂嗎？

問題

分店網址連結可以自訂嗎？

回答

可以透過分店管理→編輯功能自訂賣場連結內容。

! know_21904 · 如何分享賣場連結

問題

如何分享賣場連結

回答

1.進入賣場管理：在「全+1」平台主頁，點擊**「賣場管理」**按鈕。 2.點選分享賣場：進入賣場管理頁面後，點選右上角的**「分享賣場」**按鈕。 *系統會自動複製賣場連結。 3.貼連結到群組：將複製的連結直接貼到您要分享的LINE群組中。注意事項：如果您想更換賣場連結的圖文，可以從側邊欄進入**「系統設定」**，再點選**「分店管理」**，最後點擊**「編輯」**進行修改。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13629304454031.png

! know_21994 · 分享賣場連結後，消費者怎樣參與？

問題

分享賣場連結後，消費者怎樣參與？

回答

消費者只需點擊賣場連結，進入後選擇欲購買商品，或在群組留言+1即可參加團購。

! know_22135 · 系統設定或賣場連結設定操作時需要注意什麼？

問題

系統設定或賣場連結設定操作時需要注意什麼？

回答

請依照平台手冊步驟操作，並確認店舖、賣場連結資訊設定正確，以防發生錯誤。

! know_21890 · 如何生成商品推播文案

問題

如何生成商品推播文案

回答

1.分享商品推播： -在「全+1」平台主頁，點擊左側欄的**「賣場管理」**，進入商品列表。 -找到您要推播的商品，並點擊下方的**「分享」**按鈕。 2.選擇文案參考範本： -系統會跳出多個參考文案供您選擇。 -您可以從「熱門文案」（依引用次數由高到低排序）或「最新文案」（依日期由新到舊排序）中選擇合適的文案。 3.編輯與調整文案： -選擇文案後，您可以點擊進入編輯頁面，依據需求修改文字內容。 -文案內容限制：引用的參考文案最多可編輯500字。 -文案預設：編輯完成後，預設會勾選**「文案共享」**，這表示您的文案會被平台收錄，供其他店長參考。 4.完成編輯後，點擊「確定」，即可將商品推播至您指定的LINE群組。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13620305221519.png

! know_22000 · 團購開團後，可以修改商品資訊嗎？

問題

團購開團後，可以修改商品資訊嗎？

回答

開團後仍可編輯商品資訊和數量日期，請進入賣場管理調整。

! know_22004 · 怎麼編輯或修改店長推薦商品？

問題

怎麼編輯或修改店長推薦商品？

回答

您可以點選查看全部，進入編輯清單並選擇修改店長推薦，成功後系統會提示修改關鍵字成功。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料中的指示，所有的事實陳述都有來源支持，因此沒有任何虛構的內容。

回答品質
93.3%

相關性

100.0%

完整性

80.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

80.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您服務！😊 您可以在「分店管理」的編輯處設定或修改賣場連結。請依照以下步驟操作： 1. 進入側邊欄，點選「系統設定」。 2. 選擇「分店管理」。 3. 在分店列表中找到您的店舖，點擊右側的「編輯」按鈕。 4. 進入編輯頁面後，您可以自訂賣場連結內容，包括標題、介紹、網址，還能上傳圖片或影片。 5. 完成後記得點擊「儲存」。如需參考實際操作畫面，請點此圖片：有其他操作上的問題也歡迎隨時詢問喔！

預期答案 · 加權拆解

I 核心必答 w 60%

請於分店管理編輯處查看或設定賣場連結內容

Judge 推理

回覆內容針對用戶的問題提供了詳細的步驟，雖然涵蓋了主要的編輯位置，但未完全符合地面真相的簡潔性，導致完整性稍有不足。
案例 65DF92FE

編輯清單時可以刪除推薦商品嗎

已完成
第 1 次嘗試 · 已完成 31713ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER編輯清單時可以刪除推薦商品嗎

BOT讓我幫您查詢一下相關資訊 🔍 可以喔！在編輯清單時，只要選擇你想刪除的推薦商品，點選垃圾桶按鈕就能刪除該商品啦！有其他清單管理的問題也歡迎再問我 😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22016 · 編輯清單時能刪除推薦商品嗎？

問題

編輯清單時能刪除推薦商品嗎？

回答

可以，在編輯清單內選擇要刪除的商品，點選垃圾桶按鈕即可刪除。

意料之外 (9)

! know_22003 · 如何將商品加入推薦清單？

問題

如何將商品加入推薦清單？

回答

請點選進入推薦清單頁面，選擇加入推薦商品，然後在商品列表中選擇想加入的商品並點擊加入清單，完成後商品即會加入推薦清單。

! know_22005 · 如何刪除不需要的推薦商品指令？

問題

如何刪除不需要的推薦商品指令？

回答

請點選垃圾桶按鈕，系統會跳出詢問提示後確認刪除該指令。

! know_22004 · 怎麼編輯或修改店長推薦商品？

問題

怎麼編輯或修改店長推薦商品？

回答

您可以點選查看全部，進入編輯清單並選擇修改店長推薦，成功後系統會提示修改關鍵字成功。

! know_22012 · 商品推薦清單是否能重複加入相同商品？

問題

商品推薦清單是否能重複加入相同商品？

回答

若商品已在推薦清單中，系統會提示無法重複加入。

! know_21997 · 團購清單可否自動更新？

問題

團購清單可否自動更新？

回答

團購清單會自動排除已下架或售完商品，顯示最新10筆有效資訊。

! know_22018 · 如何快速查看全部推薦商品？

問題

如何快速查看全部推薦商品？

回答

點擊『查看全部』即可快速查看目前所有推薦商品。

! know_22002 · 如何刪除已經下架或不用的商品卡？

問題

如何刪除已經下架或不用的商品卡？

回答

可將商品卡設為灰色，釋放上架名額，不需刪除即可隱藏。

! know_21927 · 如何設定店長推薦商品

問題

如何設定店長推薦商品

回答

1.進入賣場管理：在「全+1」平台主頁，點擊**「賣場管理」**按鈕。 2.點擊左上角**「推薦」**按鈕。 3.點選想要推薦的商品 4.設定清單關鍵字：您可以自定義推薦名單觸發的訊息關鍵字，請留意只能填寫中文字，不要填寫標點符號 *請留意另有LINE群組關鍵字「團購清單」，呼叫最新10筆商品(排除已下架、已售完商品) 如果有不清楚的地方，請您參考實際操作畫面：https://caroltestingv15.zendesk.com/hc/article_attachments/13629527099023.png

! know_22129 · 客人可以編輯或取消自己的訂單數量嗎？

問題

客人可以編輯或取消自己的訂單數量嗎？

回答

當訂單貨態為【預約中】，客人可自行取消訂單。店長或小幫手則可編輯、取消訂單。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料的內容，並且所有的事實性陳述都有來源支持，因此沒有任何虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

讓我幫您查詢一下相關資訊 🔍 可以喔！在編輯清單時，只要選擇你想刪除的推薦商品，點選垃圾桶按鈕就能刪除該商品啦！有其他清單管理的問題也歡迎再問我 😊

預期答案 · 加權拆解

I 核心必答 w 60%

可以在編輯清單內選擇要刪除的商品
點選垃圾桶按鈕即可刪除

Judge 推理

回覆完全符合用戶的問題，並且涵蓋了所有關鍵點，沒有遺漏或錯誤的資訊。
案例 FADA2C60

請問「全+1」平台的會員管理功能可以做些什麼？

已完成
第 1 次嘗試 · 已完成 46902ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER請問「全+1」平台的會員管理功能可以做些什麼？

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您解答！「全+1」平台的會員管理功能，主要可以讓店長編輯會員標籤和備註。這有助於您針對不同會員進行分群管理、個別記錄或後續行銷推播，讓經營社群更有效率。如果您還想了解其他設定或管理功能，也歡迎隨時詢問喔！😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_21850 · 「全+1」平台有哪些重要的設定和管理功能？

問題

「全+1」平台有哪些重要的設定和管理功能？

回答

「全+1」平台提供了多樣化的設定功能。在「系統設定」中，可以進行 APP 推播通知設定、設定貨態自動更新為【可取貨】以及自訂賣場連結內容。在「LINE 群組管理」中，可以設定機器人和個人帳號的 +1 回覆模式（文字、圖卡、接龍或靜音）、自訂群組歡迎詞，並透過快速邀請功能將群組連結私訊給群友。此外，「會員管理」功能可讓店長編輯會員標籤和備註。

意料之外 (9)

! know_21862 · 全+1的管理後台是怎麼區分誰可以操作哪些功能的？

問題

全+1的管理後台是怎麼區分誰可以操作哪些功能的？

回答

管理者後台的權限設定，是用來控制不同使用者在全+1平台上的操作範圍，例如哪些人可以管理商品、處理訂單、發送推播訊息，或設定行銷活動等功能。

! know_21860 · 我該如何設定全+1平台後台的操作權限？

問題

我該如何設定全+1平台後台的操作權限？

回答

管理者後台的權限設定，是用來控制不同使用者在全+1平台上的操作範圍，例如哪些人可以管理商品、處理訂單、發送推播訊息，或設定行銷活動等功能。

! know_21858 · 全+1平台上，權限設定的用途是什麼？

問題

全+1平台上，權限設定的用途是什麼？

回答

管理者後台的權限設定，是用來控制不同使用者在全+1平台上的操作範圍，例如哪些人可以管理商品、處理訂單、發送推播訊息，或設定行銷活動等功能。

! know_22019 · 會員操作篇主要有哪些功能？

問題

會員操作篇主要有哪些功能？

回答

會員操作篇涵蓋與全+1成為好友、會員下單、查詢訂單、線上付款等功能。

! know_21841 · 全+1平台主要提供哪些社群電商功能？

問題

全+1平台主要提供哪些社群電商功能？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

! know_21903 · 管理者後台權限設定之於全+1平台上的對應權限

問題

管理者後台權限設定之於全+1平台上的對應權限

回答

1.店長5/加盟者6-可以新增管理者及所有「全+1」平台內的功能 2.小幫手(需由店長手機加入)-由店長至後台設定後開通

! know_21969 · 一定要加入群組才能使用「全+1」嗎？

問題

一定要加入群組才能使用「全+1」嗎？

回答

是的，「全+1」是以群組作為主要聯繫橋樑，必須綁定群組才能使用平台功能。

! know_21840 · 「全+1」社群電商平台是什麼？

問題

「全+1」社群電商平台是什麼？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

! know_21843 · 全+1這個平台和一般電商有什麼不同？

問題

全+1這個平台和一般電商有什麼不同？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆中提到的會員管理功能完全符合來源資料的描述，因此沒有任何虛構的內容。所有的事實陳述都有來源支持，且回覆的內容也遵循了問題的要求。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您解答！「全+1」平台的會員管理功能，主要可以讓店長編輯會員標籤和備註。這有助於您針對不同會員進行分群管理、個別記錄或後續行銷推播，讓經營社群更有效率。如果您還想了解其他設定或管理功能，也歡迎隨時詢問喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%

會員管理功能可讓店長編輯會員標籤和備註

Judge 推理

這個回答完全符合用戶的問題，清楚地說明了「全+1」平台的會員管理功能，並且涵蓋了所有關鍵點，沒有錯誤的陳述。
案例 A0204639

如何設定推薦商品啊

已完成
第 1 次嘗試 · 已完成 22084ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER如何設定推薦商品啊

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您解答如何設定推薦商品！😊 您可以依照以下步驟來設定推薦商品： 1. 進入賣場管理：在「全+1」平台主頁，點擊「賣場管理」按鈕。 2. 點擊左上角「推薦」按鈕。 3. 選擇您想要推薦的商品。 4. 設定清單關鍵字：可以自訂推薦名單觸發的訊息關鍵字（只能填寫中文字，請勿填標點符號）。完成後，於LINE群組輸入該關鍵字，就能快速呼叫對應的推薦商品卡囉！如果想將商品加入推薦清單，也可以進入推薦清單頁面，選擇想加入的商品並點擊「加入清單」，即可完成。如需參考實際操作畫面，歡迎點擊這裡查看圖片說明：有其他相關問題也歡迎隨時詢問喔！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_21927 · 如何設定店長推薦商品

問題

如何設定店長推薦商品

回答

1.進入賣場管理：在「全+1」平台主頁，點擊**「賣場管理」**按鈕。 2.點擊左上角**「推薦」**按鈕。 3.點選想要推薦的商品 4.設定清單關鍵字：您可以自定義推薦名單觸發的訊息關鍵字，請留意只能填寫中文字，不要填寫標點符號 *請留意另有LINE群組關鍵字「團購清單」，呼叫最新10筆商品(排除已下架、已售完商品) 如果有不清楚的地方，請您參考實際操作畫面：https://caroltestingv15.zendesk.com/hc/article_attachments/13629527099023.png

意料之外 (9)

! know_21993 · 如何在群組快速查詢熱門推薦商品？

問題

如何在群組快速查詢熱門推薦商品？

回答

設定推薦商品關鍵字後，於LINE群組輸入該關鍵字即可呼叫相對應推薦商品卡。

! know_22003 · 如何將商品加入推薦清單？

問題

如何將商品加入推薦清單？

回答

請點選進入推薦清單頁面，選擇加入推薦商品，然後在商品列表中選擇想加入的商品並點擊加入清單，完成後商品即會加入推薦清單。

! know_22018 · 如何快速查看全部推薦商品？

問題

如何快速查看全部推薦商品？

回答

點擊『查看全部』即可快速查看目前所有推薦商品。

! know_22004 · 怎麼編輯或修改店長推薦商品？

問題

怎麼編輯或修改店長推薦商品？

回答

您可以點選查看全部，進入編輯清單並選擇修改店長推薦，成功後系統會提示修改關鍵字成功。

! know_22012 · 商品推薦清單是否能重複加入相同商品？

問題

商品推薦清單是否能重複加入相同商品？

回答

若商品已在推薦清單中，系統會提示無法重複加入。

! know_22016 · 編輯清單時能刪除推薦商品嗎？

問題

編輯清單時能刪除推薦商品嗎？

回答

可以，在編輯清單內選擇要刪除的商品，點選垃圾桶按鈕即可刪除。

! know_22005 · 如何刪除不需要的推薦商品指令？

問題

如何刪除不需要的推薦商品指令？

回答

請點選垃圾桶按鈕，系統會跳出詢問提示後確認刪除該指令。

! know_21962 · 要怎麼設定系統自動幫我按可取貨？

問題

要怎麼設定系統自動幫我按可取貨？

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

! know_21912 · 如何設定商品開團？

問題

如何設定商品開團？

回答

1.進入賣場管理：在「全+1」平台主頁，點擊**「賣場管理」**按鈕。 2.篩選新開團商品：進入賣場管理頁面後，點選頂部的**「新增店內」**篩選按鈕，尋找可開團的商品。 3.搜尋商品：您也可以使用搜尋功能，輸入商品關鍵字來快速找到想開團的商品。 4.選擇商品：在搜尋結果中，點選您要開團的商品，進入詳細頁面。 5.編輯數量與日期：在商品詳細頁面，您可以設定**「開團數」與「預購日期」**。 6.再次編輯數量與日期：在確認頁面，再次檢查並修改開團數量與日期。注意事項 1.商品限制：限制預購、代銷、代售等商品不可開團。若找不到商品，請留言反應給客服。 2.店內商品開團：店內商品開團後，系統會預設在7日後自動下架。 3.貨態與數量：店內商品開團後，預設的貨態是**「出貨中」**。請務必留意商品開團數量，並與店內實際銷售狀況作比對。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13629426104079.png

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆內容完全符合來源資料中的步驟，所有的事實陳述都有來源支持，因此沒有任何虛構的聲明。

回答品質
96.7%

相關性

100.0%

完整性

90.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

0.0% · w 30%

另有LINE群組關鍵字「團購清單」，呼叫最新10筆商品(排除已下架、已售完商品)

III 補充

—

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您解答如何設定推薦商品！😊 您可以依照以下步驟來設定推薦商品： 1. 進入賣場管理：在「全+1」平台主頁，點擊「賣場管理」按鈕。 2. 點擊左上角「推薦」按鈕。 3. 選擇您想要推薦的商品。 4. 設定清單關鍵字：可以自訂推薦名單觸發的訊息關鍵字（只能填寫中文字，請勿填標點符號）。完成後，於LINE群組輸入該關鍵字，就能快速呼叫對應的推薦商品卡囉！如果想將商品加入推薦清單，也可以進入推薦清單頁面，選擇想加入的商品並點擊「加入清單」，即可完成。如需參考實際操作畫面，歡迎點擊這裡查看圖片說明：有其他相關問題也歡迎隨時詢問喔！

預期答案 · 加權拆解

I 核心必答 w 60%

在「全+1」平台主頁，點擊「賣場管理」按鈕
點擊左上角「推薦」按鈕
點選想要推薦的商品
您可以自定義推薦名單觸發的訊息關鍵字，請留意只能填寫中文字，不要填寫標點符號

II 重要限制 w 30%

另有LINE群組關鍵字「團購清單」，呼叫最新10筆商品(排除已下架、已售完商品)

Judge 推理

這個回答涵蓋了如何設定推薦商品的主要步驟，並且正確無誤，但缺少了關於LINE群組關鍵字的資訊，因此在完整性上有所扣分。
案例 45F0A60B

「全+1」機器人可以做什麼?

已完成
第 1 次嘗試 · 已完成 50894ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER「全+1」機器人可以做什麼?

BOT讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您服務！😊 「全+1」機器人是社群電商的核心助手，主要可以協助您： - 自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。 - 收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨。 - 減少店長手動處理訊息的時間，大幅提升經營效率。如果您有更多想了解的功能或操作細節，歡迎隨時詢問我喔！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_21845 · 「全+1」機器人在群組中有什麼作用？

問題

「全+1」機器人在群組中有什麼作用？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

意料之外 (9)

! know_22131 · 為什麼全+1機器人名稱後面會有測試或開發字樣？

問題

為什麼全+1機器人名稱後面會有測試或開發字樣？

回答

顯示【全+1(測試)】或【全+1(開發)】是系統非正式版，正式訂單機器人為【全+1】，請勿在非正式版本上操作訂單。

! know_21967 · 如何分辨是否為正式的「全+1」訂單機器人？

問題

如何分辨是否為正式的「全+1」訂單機器人？

回答

正式版的訂單機器人名稱為**「全+1」**。如果名稱顯示為「全+1(測試)」或「全+1(開發)」，則非正式版本，請勿使用。

! know_21847 · 「全+1」機器人在群組中的功能有哪些？

問題

「全+1」機器人在群組中的功能有哪些？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

! know_21865 · 如何邀請全+1進入群組？

問題

如何邀請全+1進入群組？

回答

1.進入群組，選擇邀請。 2.搜尋「全+1」進行邀請。 3.「全+1」進入群組後，設定完成。 *若邀請失敗，代表已經邀請過其他機器人（機器人頭像旁出現綠色或是灰色盾牌符號），請先將其刪除。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13619939133455.png

! know_21986 · 為什麼全+1機器人只能推送文字？

問題

為什麼全+1機器人只能推送文字？

回答

目前全+1因商品上架數量及平台設計，僅支援文字推播，不支援圖卡。

! know_21866 · 群組已有其他機器人導致邀請失敗怎麼辦？

問題

群組已有其他機器人導致邀請失敗怎麼辦？

回答

操作指引：- 請先刪除群組內的其他機器人（灰色或綠色盾牌）。- 再重新邀請「全+1」。

! know_21849 · 「全+1」加入群組後會自動執行哪些任務？

問題

「全+1」加入群組後會自動執行哪些任務？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

! know_22090 · 怎麼設定LINE群組的+1回覆機器人？

問題

怎麼設定LINE群組的+1回覆機器人？

回答

請至側邊欄的LINE群組，按+1回覆，設定機器人推播與個人分享功能，店長需用店長權限設定。

! know_21846 · 請問把「全+1」加入群組有什麼實際好處？

問題

請問把「全+1」加入群組有什麼實際好處？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆內容完全符合來源資料中的描述，所有的功能和作用都有明確的來源支持，因此沒有任何虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您服務！😊 「全+1」機器人是社群電商的核心助手，主要可以協助您： - 自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。 - 收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨。 - 減少店長手動處理訊息的時間，大幅提升經營效率。如果您有更多想了解的功能或操作細節，歡迎隨時詢問我喔！

預期答案 · 加權拆解

I 核心必答 w 60%

「全+1」機器人可以自動將商品圖卡或文字訊息推播到 LINE 群組
幫助店長宣傳商品
收集群組成員的訂單
在商品到貨後，還可以私訊通知消費者取貨
減少店長手動處理訊息的時間
提高效率

Judge 推理

這個回答完全符合用戶的問題，涵蓋了「全+1」機器人的所有主要功能，並且沒有錯誤的陳述。
案例 B0CA90A1

操作手冊可以給外部人員看嗎?

已完成
第 1 次嘗試 · 已完成 41874ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER操作手冊可以給外部人員看嗎?

BOT馬上為您找找看相關內容 📋 根據相關規定，所有與訂單、消費者相關資料及操作手冊，請僅限內部人員使用及管理，不可私自外傳給外部人員喔！如果有需要對外分享，建議您先與主管或相關單位確認，以免違反保密規範。😊 如有其他操作手冊相關問題，也歡迎再詢問我！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22075 · 文件上寫著不得外洩，該如何保管相關資訊？

問題

文件上寫著不得外洩，該如何保管相關資訊？

回答

所有與訂單、消費者相關資料及操作手冊，請僅限內部人員使用及管理，不可私自外傳。

意料之外 (9)

! know_22159 · 操作手冊在哪

問題

操作手冊在哪

回答

請至後場SC，點選全+1操作手冊，並依內容作業。歡迎您先分享目前您遇到的問題簡述呦！ (路徑-通報管理>> 商品管理>>主旨打上社群進行搜索)

! know_22160 · 調整會員購買/下單限制

問題

調整會員購買/下單限制

回答

無法調整會員下單及訂購行為，僅能註記提醒管理人員

! know_21872 · 如何設定、編輯、新增、刪除全+1小幫手權限

問題

如何設定、編輯、新增、刪除全+1小幫手權限

回答

請用店長本人的手機進行操作。 1.進入權限管理：在「全+1」平台介面，點選側邊欄的**「帳號權限管理（小幫手）」**。 2.新增人員：在帳號權限管理頁面，點選**「新增人員」**。 3.選擇帳號：畫面會跳出帳號列表，請點選您要新增的小幫手帳號。 4.編輯權限：點擊所選帳號後，進入編輯頁面。 5.設定後點選儲存：確認權限設定無誤後，按下**「儲存」**完成設定。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13620157338255.png

! know_21868 · 首次登入是否需要綁定全家會員？

問題

首次登入是否需要綁定全家會員？

回答

是，需要先綁定會員帳號，才可進入全管家進行操作。

! know_22157 · 請協助開通全家商代XXX商品全管家代號，以利開團

問題

請協助開通全家商代XXX商品全管家代號，以利開團

回答

請將商品資訊提供給擔當，並請擔當協助寄到TFMN173@family.com.tw，由平台研發課協助。

! know_21980 · 換店長是否需要申請異動表單?

問題

換店長是否需要申請異動表單?

回答

不用另外申請。請確認店長已在 SC 上身分設定為 5店長或 6 加盟者，約一小時後生效。

! know_21974 · 如果同一商品重複開團，客人如何知道自己跟了哪一團？

問題

如果同一商品重複開團，客人如何知道自己跟了哪一團？

回答

客人可以在「團購訂單查詢」中確認。另外，服務機器人會將團購訂單查詢進度，或從「進店逛逛」和「團購訂單查詢」進入，提供給客人查看。

! know_21885 · 如何更換小幫手的人選？

問題

如何更換小幫手的人選？

回答

請於帳號權限管理中編輯小幫手資料，刪除原人員後新增新的小幫手即可。

! know_22158 · 全管家APP從哪裡下載

問題

全管家APP從哪裡下載

回答

請掃描操作手冊第2頁QR QRODE即可登入 https://storage.googleapis.com/dn-argon-prod-saas.appspot.com/ai/cms/wq0604pb9r/kl/image/擷取_175497652325999.PNG

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料的內容，並且所有的事實陳述都有來源支持，因此沒有虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

馬上為您找找看相關內容 📋 根據相關規定，所有與訂單、消費者相關資料及操作手冊，請僅限內部人員使用及管理，不可私自外傳給外部人員喔！如果有需要對外分享，建議您先與主管或相關單位確認，以免違反保密規範。😊 如有其他操作手冊相關問題，也歡迎再詢問我！

預期答案 · 加權拆解

I 核心必答 w 60%

操作手冊僅限內部人員使用及管理
不可私自外傳

Judge 推理

回覆完全符合使用者的問題，清楚說明操作手冊僅限內部人員使用及管理，並且不可私自外傳，且沒有錯誤的陳述。
案例 717A7EBA

立即訂購下單後可以修改嗎

已完成
第 1 次嘗試 · 已完成 40368ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER立即訂購下單後可以修改嗎

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 根據您的提問，「立即訂購」屬於放棄猶豫期的訂單，下單後不可修改或刪除。如果您需要彈性修改訂單，建議選擇「預約訂購」，這類型的訂單在指定期限內（D+2 10:00前）才可以進行修改。如有其他疑問，歡迎再詢問我喔！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_21886 · 立即訂購和預約訂購差異？

問題

立即訂購和預約訂購差異？

回答

- 預約訂購：有猶豫期，可於 D+2 10:00 前修改。- 立即訂購：放棄猶豫期，下單後不可修改或刪除。

意料之外 (9)

! know_22134 · 訂單核銷後還能修改嗎？

問題

訂單核銷後還能修改嗎？

回答

訂單經核銷完成後，系統即認列，原則上無法再修改訂單內容。

! know_21884 · 商品預約前要注意什麼，怎麼取消/修改訂購

問題

商品預約前要注意什麼，怎麼取消/修改訂購

回答

請注意猶豫期：開團日D+2 10:00前，可以取消訂購。注意：商品訂購區間，最後一天D日跟D-1日，開團會有提示不能下修、取消若確認可以取消，請參考流程進行退訂 1.進入訂單管理：在「全+1」平台主頁，點擊**「訂單管理」**按鈕，進入訂單列表。 *可以多加利用篩選，快速找到特定條件的訂單 2.在訂單管理頁面中，找到您要取消的訂單，並點擊**「取消」**。 3.確認修改：在彈出視窗中，點擊**「取消訂購」**後再點擊**「確定」**完成取消。如何查找訂單：https://caroltestingv15.zendesk.com/hc/article_attachments/13620313475727.png

! know_22000 · 團購開團後，可以修改商品資訊嗎？

問題

團購開團後，可以修改商品資訊嗎？

回答

開團後仍可編輯商品資訊和數量日期，請進入賣場管理調整。

! know_21882 · 如何開團推播：編輯訂單流程

問題

如何開團推播：編輯訂單流程

回答

1.進入訂單管理：在「全+1」平台主頁，點擊**「訂單管理」**按鈕，進入訂單列表。 2.修改倍數：在訂單管理頁面中，找到您要修改的訂單，並點擊**「修改訂購數」**。 3.確認修改：在彈出的視窗中，調整**「訂購倍數」，並點擊「確定」**完成修改。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13620259161615

! know_21883 · 編輯訂單注意事項

問題

編輯訂單注意事項

回答

1.修改與取消時限： -預約訂購的訂單在到貨日（D）+2天的10:00前可以進行修改或取消。 -到貨日（D）+2天的22:00後，將無法再進行修改或取消。 2.商品訂購區間限制：如果商品已進入銷售截止日或開團當下，訂單會提示您無法修改或取消。 3.到店日縮短提醒：若您選擇的**「最快到店日」**會縮短預購週期，開團時系統會跳出提醒。請確認所有資訊後再訂購。

! know_22160 · 調整會員購買/下單限制

問題

調整會員購買/下單限制

回答

無法調整會員下單及訂購行為，僅能註記提醒管理人員

! know_22004 · 怎麼編輯或修改店長推薦商品？

問題

怎麼編輯或修改店長推薦商品？

回答

您可以點選查看全部，進入編輯清單並選擇修改店長推薦，成功後系統會提示修改關鍵字成功。

! know_22065 · 有哪些身份可以執行訂單核銷？

問題

有哪些身份可以執行訂單核銷？

回答

店長或經授權後的店員可透過系統或手機進行訂單核銷。

! know_21944 · 如果訂單貨態一直是「待出貨」要怎麼處理

問題

如果訂單貨態一直是「待出貨」要怎麼處理

回答

請於訂單頁面新增團購客服問題反應，由客服協助追蹤供應商確認宅配運送狀況，是否有延遲出貨 https://caroltestingv15.zendesk.com/hc/article_attachments/13652233708303.png

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料，並且所有的事實陳述都有來源支持，因此沒有虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 根據您的提問，「立即訂購」屬於放棄猶豫期的訂單，下單後不可修改或刪除。如果您需要彈性修改訂單，建議選擇「預約訂購」，這類型的訂單在指定期限內（D+2 10:00前）才可以進行修改。如有其他疑問，歡迎再詢問我喔！

預期答案 · 加權拆解

I 核心必答 w 60%

立即訂購放棄猶豫期
下單後不可修改或刪除

Judge 推理

這個回答完全符合用戶的提問，清楚地解釋了立即訂購的規定，並且提供了相關的補充資訊，讓用戶了解預約訂購的選項。
案例 DD03CE97

異常狀況下怎麼手動按可取貨?

已完成
第 1 次嘗試 · 已完成 38586ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER異常狀況下怎麼手動按可取貨?

BOT讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您解答！當遇到異常狀況（例如貨單脫鉤、LINE好友活動尚未開始等），系統無法自動將訂單狀態更新為【可取貨】時，您可以手動操作，步驟如下： 1. 請進入「全+1」平台的側邊欄，點選「訂單管理」。 2. 在訂單列表中，找到需要處理的訂單。 3. 點選該筆訂單旁的「可取貨」按鈕，即可手動將狀態設為【可取貨】。這樣操作後，系統會立即透過LINE私訊通知消費者可以取貨。如需參考實際操作畫面，請點擊下方圖片：如果還有其他疑問，也歡迎隨時詢問我喔！😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_21962 · 要怎麼設定系統自動幫我按可取貨？

問題

要怎麼設定系統自動幫我按可取貨？

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

意料之外 (9)

! know_21961 · 貨態能自動變更嗎？

問題

貨態能自動變更嗎？

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

! know_21963 · 怎麼設定讓貨一到就自動通知客人取貨？

問題

怎麼設定讓貨一到就自動通知客人取貨？

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

! know_21960 · 如何調整貨態更新設定

問題

如何調整貨態更新設定

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

! know_22007 · 如何設定系統自動可取貨？

問題

如何設定系統自動可取貨？

回答

請於側邊欄的系統設定中的分店管理中，開啟【系統自動可取貨】功能。 ![3_175583436581309.PNG](https://storage.googleapis.com/dn-argon-prod-saas.appspot.com/ai/cms/wq0604pb9r/kl/image/3_175583436581309.PNG)

! know_22126 · 系統什麼時候會自動更新貨態為【可取貨】？

問題

系統什麼時候會自動更新貨態為【可取貨】？

回答

當商品到貨時，系統會自動將貨態更新為【可取貨】。

! know_21935 · 會不會消費者自己忘記有什麼商品可以取貨

問題

會不會消費者自己忘記有什麼商品可以取貨

回答

如果您在刷商品條碼時，畫面下方有「可取貨商品」，點擊即可檢查是否有消費者其他可取貨的商品如何找到檢查按鈕：https://caroltestingv15.zendesk.com/hc/article_attachments/13630074021007.png

! know_22035 · 忘記可取貨數量時怎麼辦？

問題

忘記可取貨數量時怎麼辦？

回答

可以再次按清單提示來查看可取貨數量。

! know_22042 · 如何查看待取貨商品明細？

問題

如何查看待取貨商品明細？

回答

可點選【可取貨商品】按鈕，查看待取貨的商品明細資料。

! know_21931 · 全+1到貨通知流程

問題

全+1到貨通知流程

回答

1. 商品到店驗收： * 當商品配送到店時，店長請務必進行驗收。 * 店配商品會有特殊標示，用於區分給「全+1」團購的商品。宅配商品的收件人則會註明是團購「全家+店鋪名稱」。 2. 全家提醒商品到店： * 訂購的商品到店後，全家會員或全家APP會傳送通知，提醒您有到店商品。 3. 按下到店可取貨： * 完成商品驗收後，請至「全+1」平台的**「訂單管理」，點選該筆訂單的「可取貨」**按鈕。 * 按下「可取貨」後，機器人會立即透過LINE私訊通知消費者，商品已到店可以取貨。注意事項 * 問題處理時效： * 若您在驗收時發現商品有缺品、污損、訂單或貨態等問題，請務必在商品預計到貨日的隔天（D+1）上午10:00前，從訂單管理中留言，給客服人員處理。 * 自動可取貨設定： * 您也可以從側邊欄的**「系統設定」** → 「分店管理」，開啟用**「系統自動可取貨」**功能。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源材料中的資訊，所有的事實陳述都有來源支持，因此沒有任何虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您解答！當遇到異常狀況（例如貨單脫鉤、LINE好友活動尚未開始等），系統無法自動將訂單狀態更新為【可取貨】時，您可以手動操作，步驟如下： 1. 請進入「全+1」平台的側邊欄，點選「訂單管理」。 2. 在訂單列表中，找到需要處理的訂單。 3. 點選該筆訂單旁的「可取貨」按鈕，即可手動將狀態設為【可取貨】。這樣操作後，系統會立即透過LINE私訊通知消費者可以取貨。如需參考實際操作畫面，請點擊下方圖片：如果還有其他疑問，也歡迎隨時詢問我喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%

需手動從訂單管理中將訂單點選為【可取貨】

Judge 推理

這個回答完整地涵蓋了用戶的問題，詳細說明了在異常狀況下如何手動將訂單設為可取貨，並且提供了清晰的步驟，符合預期的回答風格。
案例 348F3A3E

請問可以從訂單資訊找到對應的消費者嗎？

已完成
第 1 次嘗試 · 已完成 35749ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER請問可以從訂單資訊找到對應的消費者嗎？

BOT讓我幫您查詢一下相關資訊 🔍 可以喔！您可以從訂單資訊找到對應的消費者，進行後續手動核銷。只要有訂單編號或相關消費者資料，就能查找對應會員，方便聯繫或核銷。如果還有其他操作細節想了解，歡迎再問我唷！😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22054 · 可以以人找訂單或以訂單找人嗎？

問題

可以以人找訂單或以訂單找人嗎？

回答

可以。可從系統中以會員資訊找到訂單，或從訂單資訊找到對應消費者，進行後續手動核銷。

意料之外 (9)

! know_22068 · 以訂單找人需要什麼資訊？

問題

以訂單找人需要什麼資訊？

回答

需要訂單編號或相關消費者資料即可查找對應會員進行聯繫或核銷。

! know_22085 · 我要怎麼查詢某個消費者有哪些訂單？

問題

我要怎麼查詢某個消費者有哪些訂單？

回答

請用會員管理搜尋消費者，即可查看其所有訂單記錄。

! know_21935 · 會不會消費者自己忘記有什麼商品可以取貨

問題

會不會消費者自己忘記有什麼商品可以取貨

回答

如果您在刷商品條碼時，畫面下方有「可取貨商品」，點擊即可檢查是否有消費者其他可取貨的商品如何找到檢查按鈕：https://caroltestingv15.zendesk.com/hc/article_attachments/13630074021007.png

! know_22057 · 訂單核銷有哪些方式？

問題

訂單核銷有哪些方式？

回答

可透過手機末三碼查詢、消費者QRCODE或店長手機進行訂單核銷。

! know_22063 · 為什麼會查不到訂單資料？

問題

為什麼會查不到訂單資料？

回答

可能因系統未及時同步或消費者資料輸入錯誤，建議請消費者出示QRCODE。![擷取_175395491195551.PNG](https://storage.googleapis.com/dn-argon-prod-saas.appspot.com/ai/cms/wq0604pb9r/kl/image/擷取_175395491195551.PNG)

! know_22064 · 如何將尚未取貨的訂單批次傳送給消費者？

問題

如何將尚未取貨的訂單批次傳送給消費者？

回答

在系統複製尚未取貨的訂單資料，貼至LINE群組@消費者，通知取貨。

! know_21888 · 如何快速查找特定訂單？

問題

如何快速查找特定訂單？

回答

可利用篩選功能，快速找到特定條件的訂單。

! know_21932 · 群組到貨通知流程：LINE群組通知

問題

群組到貨通知流程：LINE群組通知

回答

如果您想要在LINE群組內通知有團購的消費者，請參考以下方式找到系統生成的問案 1.進入訂單管理：在「全+1」平台主頁，點擊**「訂單管理」**按鈕。 2.選擇到貨通知：在訂單列表中，找到您要通知的訂單，點擊下方的**「到貨通知」**按鈕。 3.複製通知內容：點擊**「複製文案」**，或直接手動選取文字。 4.貼上至LINE群組：將複製的通知內容貼到LINE群組中，並**@標註消費者姓名**，確保對方能收到訊息。如需畫面操考請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13629838859791.png

! know_21933 · 群組到貨通知流程：批次通知

問題

群組到貨通知流程：批次通知

回答

若您想要再試提醒未讀取的消費者留意到貨通知，請參考以下方式進行： 1.進入訂單管理/批次通知：在「全+1」平台主頁，點擊**「訂單管理」，然後在上方篩選「批次通知」**。 2.複製通知：點擊**「複製文案」**，系統會複製所有待通知的商品或消費者資訊。 *提醒：如果複製按鈕無反應，可以直接選取文字來複製。 3.切換可視模式：您可以選擇以**「商品」或「消費者」**為主的模式來呈現通知內容，方便您複製給特定對象。如果您操作有遇到問題請參考流程圖：https://caroltestingv15.zendesk.com/hc/article_attachments/13629843449359.png

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料中的內容，所有的事實陳述都有來源支持，因此沒有虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

讓我幫您查詢一下相關資訊 🔍 可以喔！您可以從訂單資訊找到對應的消費者，進行後續手動核銷。只要有訂單編號或相關消費者資料，就能查找對應會員，方便聯繫或核銷。如果還有其他操作細節想了解，歡迎再問我唷！😊

預期答案 · 加權拆解

I 核心必答 w 60%

可以從訂單資訊找到對應消費者
進行後續手動核銷

Judge 推理

這個回答完全符合用戶的問題，並且涵蓋了所有關鍵點，沒有遺漏或錯誤的資訊。
案例 4319F9E3

如何查核會員是否被加入黑名單？

已完成
第 1 次嘗試 · 已完成 31282ms
腳本進度 · 知識與產品查詢 ✗ 卡關

STEP

01

觸發條件
● 已觸發知識與產品查詢

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：search_knowledges

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER如何查核會員是否被加入黑名單？

BOT稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！要查核會員是否被加入黑名單，請進入「會員管理」，查看該會員的標籤是否顯示為「黑名單」。如果標籤是「黑名單」，就代表該會員已被加入黑名單。有其他關於會員管理的問題也歡迎隨時詢問喔！😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22120 · 如何查核會員是否被加入黑名單？

問題

如何查核會員是否被加入黑名單？

回答

請進會員管理，查看會員標籤顯示是否為黑名單。

意料之外 (9)

! know_21952 · 把會員設定為黑名單為怎麼樣嗎？

問題

把會員設定為黑名單為怎麼樣嗎？

回答

黑名單僅用以提醒管理者，但黑名單會員/客人仍具有訂購權限。

! know_22083 · 會員標籤有哪幾種狀態？

問題

會員標籤有哪幾種狀態？

回答

有三種：無、VIP與黑名單。

! know_22082 · 如何編輯會員資訊與標籤？

問題

如何編輯會員資訊與標籤？

回答

請進入會員管理，選擇會員，再點選編輯，可設定會員標籤（無、VIP、黑名單）及輸入團員備註。

! know_21953 · 有辦法封鎖某個會員/客人不讓他再訂東西嗎？

問題

有辦法封鎖某個會員/客人不讓他再訂東西嗎？

回答

黑名單僅用以提醒管理者，但黑名單會員/客人仍具有訂購權限。

! know_22108 · VIP與黑名單會員有什麼不同？

問題

VIP與黑名單會員有什麼不同？

回答

VIP會員可標註為重點服務對象，黑名單則提醒特殊注意，避免服務爭議。

! know_21943 · 如何查詢特定會員/消費者的訂單

問題

如何查詢特定會員/消費者的訂單

回答

"若要查詢特定會員/消費者的訂單，您可以透過「會員管理」功能進行操作： • 點選會員管理。 • 選擇會員。 • 進入後，系統會提供功能讓您「搜尋消費者有哪些訂單」。 • 您還可以針對該會員進行編輯，包括選擇會員標籤（無、VIP、黑名單）或輸入團員備註，並完成編輯。

! know_21951 · 如何管理群組成員，並為他們加上備註或標籤？

問題

如何管理群組成員，並為他們加上備註或標籤？

回答

黑名單僅用以提醒管理者，但黑名單會員/客人仍具有訂購權限。

! know_21954 · 我不想讓某個人再參加團購，要怎麼設定？

問題

我不想讓某個人再參加團購，要怎麼設定？

回答

黑名單僅用以提醒管理者，但黑名單會員/客人仍具有訂購權限。

! know_22141 · 可以不用加入全家會員就+1嗎？

問題

可以不用加入全家會員就+1嗎？

回答

線上訂單必須全家會員，若現場購買則無需會員資格。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料，所有的事實陳述都有來源支持，因此沒有虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

100.0% · w 30%

III 補充

—

AI 回覆

稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！要查核會員是否被加入黑名單，請進入「會員管理」，查看該會員的標籤是否顯示為「黑名單」。如果標籤是「黑名單」，就代表該會員已被加入黑名單。有其他關於會員管理的問題也歡迎隨時詢問喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%

請進會員管理查看會員標籤

II 重要限制 w 30%

顯示是否為黑名單

Judge 推理

這個回答完全符合用戶的查詢，提供了正確的步驟來查核會員是否被加入黑名單，並且沒有遺漏任何關鍵資訊。

維度總表

各維度品質分 · 覆蓋率

走對流程召回

scenario

10.0%

[0.0% – 30.0%] · n=10

F1 10.0% · 召回 10.0% · 精確 10.0%

10 / 10 適用

用對工具召回

tool_usage

10.0%

[0.0% – 30.0%] · n=10

F1 10.0% · 召回 10.0% · 精確 10.0%

10 / 10 適用

答得到位平均

answer_quality

63.3%

[49.7% – 78.3%] · n=10

10 / 10 適用

案例 288E12B0

我想查詢商品，怎麼提供關鍵字或需求？

已完成

第 1 次嘗試 · 已完成 44004ms

腳本進度 · 產品查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入產品查詢

腳本規則

- 商品/產品
- 推薦/介紹
- 我想要/我需要

產品查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### product_search_parameters — 商品搜尋參數
- query [string] (必填): 用戶當前最想查詢或推薦的商品、需求或關鍵主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有商品關鍵字、型號、代碼，如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	最新款無線耳機	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_products — 搜尋相關產品或服務資訊

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All recommendations must be based on content output from <tool: search_products>, never fabricate.
- If multiple relevant orders found, combine them logically
- If unable to recommend, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_products> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER我想查詢商品，怎麼提供關鍵字或需求？

BOT馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢商品，可以透過設定「關鍵字」來快速找到推薦商品。只要在LINE群組輸入您設定的關鍵字，就能呼叫出對應的推薦商品卡。另外，每個商品最多可以設定六個關鍵字，讓您更靈活地查詢不同商品。如果您需要設定或修改推薦商品的關鍵字，可以進入賣場管理頁面，點選「推薦」按鈕後，選擇想要推薦的商品並自訂關鍵字（只能填寫中文字，不要有標點符號）。請問您需要進一步了解如何設定關鍵字，還是有其他查詢需求呢？歡迎告訴我您的需求，我會協助您操作！

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 380 · 產品查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_products

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

70.0%

相關性: 80.0%
完整性: 60.0%
正確性: 70.0%

加權拆解 · 三層 coverage

I 核心: 50.0% · w 60%
II 重要: —
III 補充: 50.0% · w 10%

AI 回覆

馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢商品，可以透過設定「關鍵字」來快速找到推薦商品。只要在LINE群組輸入您設定的關鍵字，就能呼叫出對應的推薦商品卡。另外，每個商品最多可以設定六個關鍵字，讓您更靈活地查詢不同商品。如果您需要設定或修改推薦商品的關鍵字，可以進入賣場管理頁面，點選「推薦」按鈕後，選擇想要推薦的商品並自訂關鍵字（只能填寫中文字，不要有標點符號）。請問您需要進一步了解如何設定關鍵字，還是有其他查詢需求呢？歡迎告訴我您的需求，我會協助您操作！

預期答案 · 加權拆解

I 核心必答 w 60%: 您需要提供目前最想查詢或推薦的商品、需求或關鍵主題
短語字數限制在3到20字之間
III 補充說明 w 10%: 例如，您可以說「我需要一款運動鞋」或「推薦適合夏天的衣服」

Judge 推理

回覆中提到的關鍵字設定雖然相關，但未能完整回答用戶的查詢需求，缺少了具體的商品或需求範例，且未提及字數限制，導致完整性不足。

案例 FBA6A105

我想知道如何開團推播，預約訂購流程是什麼?

已完成

第 1 次嘗試 · 已完成 35660ms

腳本進度 · FAQ查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入 FAQ查詢

腳本規則

- 品牌問題
- 平台規則
- 常見問題
- 知識庫
- 問答
- 品牌相關問題

FAQ 查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### search_parameters — 搜尋參數
- query [string] (必填): 用戶當前最想查詢或了解的重點問題或主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有代碼或標籤（如C90012、T1234等），如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	如何申請退款	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_knowledges — 搜尋相關FAQ回答用戶問題

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All answer must be based on content output from <tool: search_knowledges>, never fabricate.
- If multiple relevant answers found, combine them logically and clarify with the user.
- If unable to answer, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledges> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER我想知道如何開團推播，預約訂購流程是什麼?

BOT馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您說明開團推播與預約訂購的流程！😊 【開團推播：預約訂購流程】 1. 進入訂購頁面：在商品頁面點選「前往訂購」，進入訂購資訊頁。 2. 設定倍數：依需求設定「訂購倍數」與「可+1數」。 3. 確認資訊：請確認「最快到店日」、「訂購倍數」、「可+1數」等資訊無誤。 4. 送出預約：確認後點選「確定」送出預約訂購。注意事項： - 訂單成立後，請依平台規則盡快調整內容。 - 「預約訂購中」的訂單同時最多100筆，同一商品只能有一筆「預約訂購中」的訂單。 - 若超過上限，需將已發出的訂單轉為「立即訂購」，才能再建立新訂單。如需參考畫面請看：如果還有其他細節想了解，歡迎再問我喔！

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 379 · FAQ查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_knowledges

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

96.7%

相關性: 100.0%
完整性: 90.0%
正確性: 100.0%

加權拆解 · 三層 coverage

I 核心: 80.0% · w 60%
II 重要: 100.0% · w 30%
III 補充: —

AI 回覆

馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您說明開團推播與預約訂購的流程！😊 【開團推播：預約訂購流程】 1. 進入訂購頁面：在商品頁面點選「前往訂購」，進入訂購資訊頁。 2. 設定倍數：依需求設定「訂購倍數」與「可+1數」。 3. 確認資訊：請確認「最快到店日」、「訂購倍數」、「可+1數」等資訊無誤。 4. 送出預約：確認後點選「確定」送出預約訂購。注意事項： - 訂單成立後，請依平台規則盡快調整內容。 - 「預約訂購中」的訂單同時最多100筆，同一商品只能有一筆「預約訂購中」的訂單。 - 若超過上限，需將已發出的訂單轉為「立即訂購」，才能再建立新訂單。如需參考畫面請看：如果還有其他細節想了解，歡迎再問我喔！

預期答案 · 加權拆解

I 核心必答 w 60%: 在商品頁面點選「前往訂購」後，進入訂購資訊頁面
在訂購資訊頁面中，請依您的需求設定「訂購倍數」與「可+1數」
在送出訂購前，請務必確認最快到店日、訂購倍數、可+1數是否正確
確認無誤後，即可點選「確定」送出預約訂購
II 重要限制 w 30%: 訂單成立後，請您依照平台規則，盡快調整訂單內容
同一時間最多只能有100筆「預約訂購中」的訂單
同一個商品只能有一筆「預約訂購中」的訂單
如果超過上限，請將已發出的訂單轉為「立即訂購」，才能再次建立新的訂單

Judge 推理

這個回答的內容大致上符合用戶的問題，並且提供了開團推播與預約訂購的流程。不過，缺少了確認訂購資訊的具體說明，這是核心必答的部分，因此在完整性上扣了一些分數。

案例 7CB302D9

我想要查詢一下你們的髮片有哪些推薦的款式呢？

已完成

第 1 次嘗試 · 已完成 29045ms

腳本進度 · 產品查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入產品查詢

腳本規則

- 商品/產品
- 推薦/介紹
- 我想要/我需要

產品查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### product_search_parameters — 商品搜尋參數
- query [string] (必填): 用戶當前最想查詢或推薦的商品、需求或關鍵主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有商品關鍵字、型號、代碼，如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	最新款無線耳機	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_products — 搜尋相關產品或服務資訊

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All recommendations must be based on content output from <tool: search_products>, never fabricate.
- If multiple relevant orders found, combine them logically
- If unable to recommend, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_products> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER我想要查詢一下你們的髮片有哪些推薦的款式呢？

BOT馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！😊 關於髮片推薦款式，目前您可以透過以下方式快速查看與管理推薦商品： - 點擊「查看全部」即可快速查看目前所有推薦商品。 - 若您想要在LINE群組查詢熱門推薦商品，可以設定推薦商品關鍵字，於群組輸入該關鍵字即可呼叫相對應的推薦商品卡。 - 若需將髮片加入推薦清單，請進入推薦清單頁面，選擇想加入的商品並點擊加入清單。如果您需要更詳細的髮片款式資訊，建議您直接點選「查看全部」或聯繫真人客服協助喔！有其他操作上的問題也歡迎隨時詢問我！

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 380 · 產品查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_products

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

40.0%

相關性: 70.0%
完整性: 50.0%
正確性: 0.0%

加權拆解 · 三層 coverage

I 核心: 50.0% · w 60%
II 重要: —
III 補充: 0.0% · w 10%

AI 回覆

馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！😊 關於髮片推薦款式，目前您可以透過以下方式快速查看與管理推薦商品： - 點擊「查看全部」即可快速查看目前所有推薦商品。 - 若您想要在LINE群組查詢熱門推薦商品，可以設定推薦商品關鍵字，於群組輸入該關鍵字即可呼叫相對應的推薦商品卡。 - 若需將髮片加入推薦清單，請進入推薦清單頁面，選擇想加入的商品並點擊加入清單。如果您需要更詳細的髮片款式資訊，建議您直接點選「查看全部」或聯繫真人客服協助喔！有其他操作上的問題也歡迎隨時詢問我！

預期答案 · 加權拆解

I 核心必答 w 60%: 我們的髮片系列有多個推薦款式
包括微增髮片和科技假髮
III 補充說明 w 10%: 可以提供您想查詢的髮片特色或需求

Judge 推理

這個回覆未能提供具體的髮片款式推薦，且沒有依據指定的工具進行內容輸出，導致正確性評分為零。

錯誤陳述 (1)

未依據 <tool: search_products> 輸出內容進行推薦

案例 F6C0F2DB

如何查詢常見問題啊

已完成

第 1 次嘗試 · 已完成 47494ms

腳本進度 · FAQ查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入 FAQ查詢

腳本規則

- 品牌問題
- 平台規則
- 常見問題
- 知識庫
- 問答
- 品牌相關問題

FAQ 查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### search_parameters — 搜尋參數
- query [string] (必填): 用戶當前最想查詢或了解的重點問題或主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有代碼或標籤（如C90012、T1234等），如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	如何申請退款	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_knowledges — 搜尋相關FAQ回答用戶問題

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All answer must be based on content output from <tool: search_knowledges>, never fabricate.
- If multiple relevant answers found, combine them logically and clarify with the user.
- If unable to answer, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledges> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER如何查詢常見問題啊

BOT稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢常見問題，可以依照下列方式操作： - 進入客服管理頁面，點選「查詢或新增問題」，輸入相關內容即可查詢您關心的問題。 - 若要查詢所有待處理的客服問題，也可以在客服管理系統中查看所有已登錄的客服問題，方便追蹤與處理。如果您的問題是關於訂單，建議您： 1. 在「全+1」平台主頁點擊「訂單管理」。 2. 找到有問題的訂單後，點擊「客服」按鈕。 3. 進入客服頁面後，點選「新增」，填寫詳細問題內容（如原因、異常數量、相關圖片），以利客服人員協助處理。請問您想查詢哪一類型的常見問題呢？如果需要更詳細的步驟或畫面說明，也歡迎告訴我喔！

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 379 · FAQ查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_knowledges

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

43.3%

相關性: 80.0%
完整性: 50.0%
正確性: 0.0%

加權拆解 · 三層 coverage

I 核心: —
II 重要: —
III 補充: 0.0% · w 10%

AI 回覆

稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢常見問題，可以依照下列方式操作： - 進入客服管理頁面，點選「查詢或新增問題」，輸入相關內容即可查詢您關心的問題。 - 若要查詢所有待處理的客服問題，也可以在客服管理系統中查看所有已登錄的客服問題，方便追蹤與處理。如果您的問題是關於訂單，建議您： 1. 在「全+1」平台主頁點擊「訂單管理」。 2. 找到有問題的訂單後，點擊「客服」按鈕。 3. 進入客服頁面後，點選「新增」，填寫詳細問題內容（如原因、異常數量、相關圖片），以利客服人員協助處理。請問您想查詢哪一類型的常見問題呢？如果需要更詳細的步驟或畫面說明，也歡迎告訴我喔！

預期答案 · 加權拆解

III 補充說明 w 10%: 請告訴我你想了解的重點問題或主題

Judge 推理

這個回答雖然提供了一些查詢常見問題的步驟，但未能遵循規則，且缺少了要求的關鍵問題或主題的詢問，導致完整性不足。

錯誤陳述 (1)

回答中包含了未經授權的內容，未遵循規則

案例 99B2240E

我想查詢一下店內現有商品，需要提供什麼資訊?

已完成

第 1 次嘗試 · 已完成 48140ms

腳本進度 · 產品查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入產品查詢

腳本規則

- 商品/產品
- 推薦/介紹
- 我想要/我需要

產品查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### product_search_parameters — 商品搜尋參數
- query [string] (必填): 用戶當前最想查詢或推薦的商品、需求或關鍵主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有商品關鍵字、型號、代碼，如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	最新款無線耳機	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_products — 搜尋相關產品或服務資訊

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All recommendations must be based on content output from <tool: search_products>, never fabricate.
- If multiple relevant orders found, combine them logically
- If unable to recommend, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_products> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER我想查詢一下店內現有商品，需要提供什麼資訊?

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢店內現有商品，通常需要提供以下資訊，才能協助您準確查詢： - 訂單編號 - 消費者相關資料（例如手機末三碼、LINE暱稱） - 或者出示QRCODE供查詢請問您目前有上述哪一項資訊呢？如果有其他需求，也歡迎補充說明，我會再協助您確認喔！

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 380 · 產品查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_products

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

26.7%

相關性: 50.0%
完整性: 30.0%
正確性: 0.0%

加權拆解 · 三層 coverage

I 核心: 0.0% · w 60%
II 重要: —
III 補充: —

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢店內現有商品，通常需要提供以下資訊，才能協助您準確查詢： - 訂單編號 - 消費者相關資料（例如手機末三碼、LINE暱稱） - 或者出示QRCODE供查詢請問您目前有上述哪一項資訊呢？如果有其他需求，也歡迎補充說明，我會再協助您確認喔！

預期答案 · 加權拆解

I 核心必答 w 60%: 查詢的商品或需求的短語需在3到20字之間
這樣能更精確地找到相關產品或服務資訊

Judge 推理

回覆未能正確回答用戶的查詢需求，缺少了關鍵的查詢商品或需求的短語要求，且提供的資訊與規範不符，導致正確性評分為零。

錯誤陳述 (2)

正在為您搜尋最新資料 ⏳
如果您想查詢店內現有商品，通常需要提供以下資訊，才能協助您準確查詢： - 訂單編號 - 消費者相關資料（例如手機末三碼、LINE暱稱） - 或者出示QRCODE供查詢

案例 3EDE9630

我想查詢還有什麼商品可以開團，請問要提供什麼關鍵字或型號嗎？

已完成

第 1 次嘗試 · 已完成 35400ms

腳本進度 · 產品查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入產品查詢

腳本規則

- 商品/產品
- 推薦/介紹
- 我想要/我需要

產品查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### product_search_parameters — 商品搜尋參數
- query [string] (必填): 用戶當前最想查詢或推薦的商品、需求或關鍵主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有商品關鍵字、型號、代碼，如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	最新款無線耳機	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_products — 搜尋相關產品或服務資訊

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All recommendations must be based on content output from <tool: search_products>, never fabricate.
- If multiple relevant orders found, combine them logically
- If unable to recommend, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_products> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER我想查詢還有什麼商品可以開團，請問要提供什麼關鍵字或型號嗎？

BOT稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢還有哪些商品可以開團，建議您可以直接在「賣場管理」頁面使用搜尋功能，輸入商品的關鍵字來快速找到想開團的商品。如果您已經有特定的商品名稱、關鍵字或型號，輸入這些資訊會更容易找到對應的商品。另外，也可以點選「新增店內」篩選按鈕，系統會顯示目前可開團的所有商品。請注意，預購、代銷、代售等類型的商品無法開團，如果找不到想要的商品，也歡迎留言給客服協助處理。如果需要參考操作畫面，可以點這裡：有其他問題也歡迎隨時詢問喔！

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 380 · 產品查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_products

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

80.0%

相關性: 90.0%
完整性: 70.0%
正確性: 80.0%

加權拆解 · 三層 coverage

I 核心: 50.0% · w 60%
II 重要: —
III 補充: 50.0% · w 10%

AI 回覆

稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢還有哪些商品可以開團，建議您可以直接在「賣場管理」頁面使用搜尋功能，輸入商品的關鍵字來快速找到想開團的商品。如果您已經有特定的商品名稱、關鍵字或型號，輸入這些資訊會更容易找到對應的商品。另外，也可以點選「新增店內」篩選按鈕，系統會顯示目前可開團的所有商品。請注意，預購、代銷、代售等類型的商品無法開團，如果找不到想要的商品，也歡迎留言給客服協助處理。如果需要參考操作畫面，可以點這裡：有其他問題也歡迎隨時詢問喔！

預期答案 · 加權拆解

I 核心必答 w 60%: 您需要提供您最想查詢的商品或需求的關鍵字、型號或代碼
III 補充說明 w 10%: 請把相關的關鍵字或型號告訴我

Judge 推理

回覆中提到的查詢方式雖然相關，但未明確要求用戶提供關鍵字或型號，導致核心內容缺失。整體上回覆的內容有幫助，但未完全符合要求。

案例 8FAB8650

如果我在訂單管理中遇到問題，該怎麼反應呢？

已完成

第 1 次嘗試 · 已完成 47658ms

腳本進度 · FAQ查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入 FAQ查詢

腳本規則

- 品牌問題
- 平台規則
- 常見問題
- 知識庫
- 問答
- 品牌相關問題

FAQ 查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### search_parameters — 搜尋參數
- query [string] (必填): 用戶當前最想查詢或了解的重點問題或主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有代碼或標籤（如C90012、T1234等），如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	如何申請退款	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_knowledges — 搜尋相關FAQ回答用戶問題

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All answer must be based on content output from <tool: search_knowledges>, never fabricate.
- If multiple relevant answers found, combine them logically and clarify with the user.
- If unable to answer, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledges> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER如果我在訂單管理中遇到問題，該怎麼反應呢？

BOT稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！如果您在訂單管理中遇到問題，建議您按照以下步驟反應： 1. 進入「訂單管理」頁面，找到有問題的訂單，點擊「客服」按鈕。 2. 進入客服頁面後，點選「新增」來提出您的問題。 3. 請詳細填寫問題明細，盡可能提供問題原因、異常數量及相關圖片，有助於客服人員快速協助處理。特別提醒： - 若遇到商品污損、缺品、貨態異常等狀況，請務必在商品預計到貨日的隔天（D+1）上午10:00以前，從訂單管理中提交反應，以確保能即時處理。 - 若要查詢已經提交的客服問題，可回到主頁左側功能列表「客服管理」查找已提報的內容。如需畫面參考可點此圖片：有任何其他疑問也歡迎隨時告訴我喔！😊

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 379 · FAQ查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_knowledges

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

96.7%

相關性: 100.0%
完整性: 90.0%
正確性: 100.0%

加權拆解 · 三層 coverage

I 核心: 100.0% · w 60%
II 重要: 100.0% · w 30%
III 補充: —

AI 回覆

稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！如果您在訂單管理中遇到問題，建議您按照以下步驟反應： 1. 進入「訂單管理」頁面，找到有問題的訂單，點擊「客服」按鈕。 2. 進入客服頁面後，點選「新增」來提出您的問題。 3. 請詳細填寫問題明細，盡可能提供問題原因、異常數量及相關圖片，有助於客服人員快速協助處理。特別提醒： - 若遇到商品污損、缺品、貨態異常等狀況，請務必在商品預計到貨日的隔天（D+1）上午10:00以前，從訂單管理中提交反應，以確保能即時處理。 - 若要查詢已經提交的客服問題，可回到主頁左側功能列表「客服管理」查找已提報的內容。如需畫面參考可點此圖片：有任何其他疑問也歡迎隨時告訴我喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%: 您需要進入「訂單管理」頁面
在平台主頁中點擊「訂單管理」按鈕
找到有問題的訂單後，請點擊「客服」按鈕
在客服頁面中點選「新增」
詳述您的問題，盡可能提供問題原因、異常數量及相關圖片
II 重要限制 w 30%: 需在商品預計到貨日的隔天上午10:00前從訂單管理中提交反應

Judge 推理

這個回答完全針對用戶的問題，提供了詳細的步驟來反應訂單管理中的問題，並且涵蓋了所有關鍵點。回答的正確性也符合事實，沒有錯誤的聲明。唯一的缺失是沒有提到任何補充的 CTA，但整體上仍然是完整的回答。

案例 E6E54461

我的訂單狀態怎麼查

已完成
第 1 次嘗試 · 已完成 38712ms
腳本進度 · 訂單查詢 ✓ 已走完

STEP

01

觸發條件
● 已觸發訂單查詢

腳本規則

- When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info). 訂單查詢的 Agent 情景

STEP

02

資訊收集
— 依規則行為（由「回答品質」評分）

此情境無結構化欄位需收集，但 spec rules 約束 bot 行為（驗證關卡、禁止外洩等）— 評分由 answer_quality + spec_rules 維度承擔

STEP

03

API 工具
● 已呼叫：shopline_search_orders

腳本規則

1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- Provide clear and concise answers based on order search results from tool messages - If multiple relevant orders found, combine them logically - If no relevant order found, acknowledge and offer to check with customer service

測試 3 步 · 此案例不測 1 步
對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → shopline_search_orders

USER我的訂單狀態怎麼查

BOT馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！目前查詢不到您的訂單資訊。為了協助您查詢訂單狀態，請提供以下其中一項資訊： - 訂單編號 - 訂購時使用的手機號碼 - 訂購時填寫的電子郵件信箱提供後我會立即幫您查詢，謝謝！😊
情境路由
100.0%

Precision

100.0%

Recall

100.0%

F1

100.0%

預期 (1)

✓ 381 · 訂單查詢

TP 1

FP 0

FN 0

工具使用
100.0%

Precision

100.0%

Recall

100.0%

F1

100.0%

預期 (1)

✓ shopline_search_orders

TP 1

FP 0

FN 0

回答品質
63.3%

相關性

90.0%

完整性

50.0%

正確性

50.0%

加權拆解 · 三層 coverage

I 核心

50.0% · w 60%

請提供到店姓名或聯絡電話

II 重要

—

III 補充

0.0% · w 10%

我才能協助您查詢訂單狀態

AI 回覆

馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！目前查詢不到您的訂單資訊。為了協助您查詢訂單狀態，請提供以下其中一項資訊： - 訂單編號 - 訂購時使用的手機號碼 - 訂購時填寫的電子郵件信箱提供後我會立即幫您查詢，謝謝！😊

預期答案 · 加權拆解

I 核心必答 w 60%

請提供到店姓名或聯絡電話

III 補充說明 w 10%

我才能協助您查詢訂單狀態

Judge 推理

回覆中要求的資訊與正確的查詢要求不符，缺少了必要的到店姓名或聯絡電話，且未能清楚表達協助查詢的條件。
案例 BFA2204D

訂單查詢需要提供什麼個人資訊?

已完成
第 1 次嘗試 · 已完成 32577ms
腳本進度 · 訂單查詢 ✗ 卡關

STEP

01

觸發條件
✗ 未進入訂單查詢

腳本規則

- When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info). 訂單查詢的 Agent 情景

STEP

02

資訊收集
— 依規則行為（由「回答品質」評分）

此情境無結構化欄位需收集，但 spec rules 約束 bot 行為（驗證關卡、禁止外洩等）— 評分由 answer_quality + spec_rules 維度承擔

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：shopline_search_orders

腳本規則

1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- Provide clear and concise answers based on order search results from tool messages - If multiple relevant orders found, combine them logically - If no relevant order found, acknowledge and offer to check with customer service

測試 3 步 · 此案例不測 1 步
對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER訂單查詢需要提供什麼個人資訊?

BOT稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您解答！查詢訂單時，您通常需要提供「訂單編號」或「相關消費者資料」即可協助查找對應的會員進行聯繫或核銷。這些資訊有助於快速且正確地找到您的訂單紀錄。如果您還有其他關於訂單查詢的問題，歡迎隨時告訴我喔！😊
情境路由
0.0%

Precision

0.0%

Recall

0.0%

F1

0.0%

預期 (1)

✗ 381 · 訂單查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用
0.0%

Precision

0.0%

Recall

0.0%

F1

0.0%

預期 (1)

✗ shopline_search_orders

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質
73.3%

相關性

90.0%

完整性

50.0%

正確性

80.0%

加權拆解 · 三層 coverage

I 核心

50.0% · w 60%

您需要提供必要的個人資訊
以便我們能夠幫您查詢特定訂單的詳情、運送狀態或購買歷史

II 重要

—

III 補充

—

AI 回覆

稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您解答！查詢訂單時，您通常需要提供「訂單編號」或「相關消費者資料」即可協助查找對應的會員進行聯繫或核銷。這些資訊有助於快速且正確地找到您的訂單紀錄。如果您還有其他關於訂單查詢的問題，歡迎隨時告訴我喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%

您需要提供必要的個人資訊
以便我們能夠幫您查詢特定訂單的詳情、運送狀態或購買歷史

Judge 推理

回覆中提到的查詢資訊不夠完整，未明確列出所需的個人資訊，且未能涵蓋所有關鍵要點。

案例 B6B0543A

請問我想要查詢有關科技假髮的相關產品，該怎麼做？

已完成

第 1 次嘗試 · 已完成 27704ms

腳本進度 · 產品查詢 ✗ 卡關

STEP

觸發條件

✗ 未進入產品查詢

腳本規則

- 商品/產品
- 推薦/介紹
- 我想要/我需要

產品查詢的 Agent 情景

STEP

資訊收集

✗ 已收集 0 / 2 項

未收集：query、keywords_or_codes

腳本規則

### product_search_parameters — 商品搜尋參數
- query [string] (必填): 用戶當前最想查詢或推薦的商品、需求或關鍵主題（3-20字短語，聚焦最新意圖，排除已解決或無關內容）
- keywords_or_codes [array] (必填): 用戶訊息中出現的所有商品關鍵字、型號、代碼，如無則為空陣列

預期 / 已收集 (0/2)

欄位	預期值（generate）	已收集（run）
query	最新款無線耳機	— （對話未走到）
keywords_or_codes	[]	— （對話未走到）

STEP

API 工具

○ 等待資訊收集完成

腳本規則

1. search_products — 搜尋相關產品或服務資訊

STEP

回覆規則

● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- All recommendations must be based on content output from <tool: search_products>, never fabricate.
- If multiple relevant orders found, combine them logically
- If unable to recommend, clearly explain and suggest human customer service assistance.
- Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_products> outputs.

完整測試 4 個步驟

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER請問我想要查詢有關科技假髮的相關產品，該怎麼做？

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢科技假髮的相關產品，建議您可以透過訂單管理頁面，進入客服管理功能，點選查詢訂單問題或新增問題來進行查詢。如果您有消費者手機末三碼，也可以利用取貨末三碼查詢功能來查找相關訂單。若您需要更詳細的操作步驟或遇到查詢困難，也歡迎隨時告訴我您的需求，我會協助您一步步完成！

情境路由

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ 380 · 產品查詢

意料之外 (1)

! 知識與產品查詢

TP 0

FP 1

FN 1

工具使用

0.0%

Precision: 0.0%
Recall: 0.0%
F1: 0.0%

預期 (1)

✗ search_products

意料之外 (1)

! search_unified

TP 0

FP 1

FN 1

回答品質

43.3%

相關性: 80.0%
完整性: 50.0%
正確性: 0.0%

加權拆解 · 三層 coverage

I 核心: 50.0% · w 60%
II 重要: —
III 補充: 0.0% · w 10%

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 如果您想查詢科技假髮的相關產品，建議您可以透過訂單管理頁面，進入客服管理功能，點選查詢訂單問題或新增問題來進行查詢。如果您有消費者手機末三碼，也可以利用取貨末三碼查詢功能來查找相關訂單。若您需要更詳細的操作步驟或遇到查詢困難，也歡迎隨時告訴我您的需求，我會協助您一步步完成！

預期答案 · 加權拆解

I 核心必答 w 60%: 您可以使用搜尋功能
輸入關鍵字來快速找到科技假髮的相關產品
III 補充說明 w 10%: 我會幫您使用搜尋工具查詢
請稍等

Judge 推理

回覆中提到的查詢方式並不符合用戶的需求，且未使用搜尋工具進行查詢，這違反了規則。回覆缺少了關鍵的搜尋功能建議，導致完整性不足。

錯誤陳述 (3)

正在為您搜尋最新資料
建議您可以透過訂單管理頁面，進入客服管理功能，點選查詢訂單問題或新增問題來進行查詢
如果您有消費者手機末三碼，也可以利用取貨末三碼查詢功能來查找相關訂單

維度總表

各維度品質分 · 覆蓋率

找對資料召回

retrieval

100.0%

[100.0% – 100.0%] · n=8

F1 18.2% · 相關率 31.3% · 精確 10.0%

8 / 10 適用

不亂編造平均

faithfulness

100.0%

[100.0% – 100.0%] · n=10

10 / 10 適用

答得到位平均

answer_quality

83.7%

[67.7% – 96.0%] · n=10

10 / 10 適用

案例 F0570776

手機號碼算不算私密資料？

已完成
第 1 次嘗試 · 已完成 45749ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER手機號碼算不算私密資料？

BOT稍等一下我來幫您查詢 💡 根據我的了解，手機號碼屬於機密資料，請妥善管理並不得外洩。若有其他關於私密資料的疑問，也歡迎隨時詢問喔！😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22074 · 哪些資訊是私密資料？

問題

哪些資訊是私密資料？

回答

手機號碼、訂單明細等屬機密資料，請妥善管理並不得外洩。

意料之外 (9)

! know_22045 · 報末三碼查不到資料怎麼辦？

問題

報末三碼查不到資料怎麼辦？

回答

可以請消費者出示QRCODE，由收銀機或手機掃描查詢。

! know_22137 · 如何確認綁定的帳號是否正確？

問題

如何確認綁定的帳號是否正確？

回答

可於LINE服務專區【團購訂單查詢】內，進入個人資料修改，解除並重新綁定確認操作無誤。

! know_22145 · 修改個人資料時需要身份驗證嗎？

問題

修改個人資料時需要身份驗證嗎？

回答

於功能選單個人資料修改內操作，若需進一步驗證系統會引導完成相關身份確認流程。

! know_22039 · 收銀機QRCODE與末三碼核銷有什麼不同？

問題

收銀機QRCODE與末三碼核銷有什麼不同？

回答

基本作業流程相同，只是查詢取貨清單方式不同。QRCODE刷後可直接顯示取貨內容，也適用於找不到末三碼資料時使用。

! know_22022 · 消費者收到私訊通知後該做什麼？

問題

消費者收到私訊通知後該做什麼？

回答

消費者應依私訊提示至指定門市，並提供手機末三碼取貨。

! know_22040 · 查無末三碼資料時怎麼辦？

問題

查無末三碼資料時怎麼辦？

回答

請請消費者出示QRCODE進行查詢與核銷。

! know_22062 · 社群電商取貨時需注意哪些事項？

問題

社群電商取貨時需注意哪些事項？

回答

請確認消費者資訊（如LINE暱稱、手機末三碼）、核實商品數量避免錯誤取貨。

! know_22063 · 為什麼會查不到訂單資料？

問題

為什麼會查不到訂單資料？

回答

可能因系統未及時同步或消費者資料輸入錯誤，建議請消費者出示QRCODE。![擷取_175395491195551.PNG](https://storage.googleapis.com/dn-argon-prod-saas.appspot.com/ai/cms/wq0604pb9r/kl/image/擷取_175395491195551.PNG)

! know_22044 · 消費者取貨時要提供什麼資料？

問題

消費者取貨時要提供什麼資料？

回答

消費者需到店報手機末三碼，或出示QRCODE供查詢取貨商品。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆中提到手機號碼屬於機密資料，這一點在來源中有明確支持，因此該回覆的所有事實陳述均有根據，沒有虛構的內容。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

稍等一下我來幫您查詢 💡 根據我的了解，手機號碼屬於機密資料，請妥善管理並不得外洩。若有其他關於私密資料的疑問，也歡迎隨時詢問喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%

手機號碼屬於私密資料
請妥善管理並不得外洩

Judge 推理

這個回答完全符合用戶的問題，並且涵蓋了所有關鍵點，沒有遺漏或錯誤的陳述。
案例 42F079FC

請問我可以如何取得完整對話記錄呢？

已完成
第 1 次嘗試 · 已完成 25537ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
✗ 已呼叫 0 / 1 個工具

未呼叫：get_history

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 3 步 · 此案例不測 1 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER請問我可以如何取得完整對話記錄呢？

BOT稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 根據我的了解，若您想查詢歷史通知紀錄，可以在訂單管理或通訊記錄中查詢歷史通知及核銷紀錄。如果您是想查詢某個消費者的所有訂單記錄，請用會員管理搜尋消費者，即可查看其所有訂單記錄。請問您需要的是哪一種完整對話或紀錄呢？如果有更明確的需求，也歡迎補充說明，我會再協助您進一步查詢！
忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆中提到的查詢歷史通知紀錄和消費者訂單記錄的方式均有來源支持，因此沒有虛構的內容。所有的事實陳述都能夠引用來源，符合查詢的要求。

回答品質
33.3%

相關性

70.0%

完整性

30.0%

正確性

0.0%

加權拆解 · 三層 coverage

I 核心

0.0% · w 60%

使用 get_history 方法並帶有 trace 或 end_trace 參數即可返回完整內容

II 重要

—

III 補充

—

AI 回覆

稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 根據我的了解，若您想查詢歷史通知紀錄，可以在訂單管理或通訊記錄中查詢歷史通知及核銷紀錄。如果您是想查詢某個消費者的所有訂單記錄，請用會員管理搜尋消費者，即可查看其所有訂單記錄。請問您需要的是哪一種完整對話或紀錄呢？如果有更明確的需求，也歡迎補充說明，我會再協助您進一步查詢！

預期答案 · 加權拆解

I 核心必答 w 60%

使用 get_history 方法並帶有 trace 或 end_trace 參數即可返回完整內容

Judge 推理

回覆未直接回答用戶的問題，缺少了關鍵的指令內容，導致不完整且不正確。
案例 716EC196

轉接真人客服要確認什麼情況？

已完成
第 1 次嘗試 · 已完成 45045ms
腳本進度 · 轉接真人客服 ✗ 卡關

STEP

01

觸發條件
✗ 未進入轉接真人客服

腳本規則

- 線上客服/轉線上客服 - 在線客服/轉在線客服 - 真人客服/轉真人客服 - 轉真人/找真人 - Direct transfer request - Emotional escalation - Resolution failure 轉接真人客服的 Agent 情景

STEP

02

資訊收集
— 依規則行為（由「回答品質」評分）

此情境無結構化欄位需收集，但 spec rules 約束 bot 行為（驗證關卡、禁止外洩等）— 評分由 answer_quality + spec_rules 維度承擔

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

腳本規則

- Acknowledge situation - Return transfer response in specified format

測試 2 步 · 此案例不測 2 步
對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER轉接真人客服要確認什麼情況？

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 當需要轉接真人客服時，建議您先準備以下資訊，可以加速處理流程： - 請詳述您的問題原因 - 提供異常數量（如果有相關數量問題） - 附上相關圖片或截圖佐證這些資料能幫助客服更快了解您的狀況並協助解決。如果還有其他細節想詢問，也歡迎補充說明喔！有需要我可以再協助您整理要提供的內容～
忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆中提到的資訊均來自於來源，且符合轉接真人客服的情況，沒有虛構的內容。回覆也遵循了所有的規則。

回答品質
46.7%

相關性

90.0%

完整性

50.0%

正確性

0.0%

加權拆解 · 三層 coverage

I 核心

—

II 重要

0.0% · w 30%

需要確認情況並按照指定格式回覆

III 補充

—

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 當需要轉接真人客服時，建議您先準備以下資訊，可以加速處理流程： - 請詳述您的問題原因 - 提供異常數量（如果有相關數量問題） - 附上相關圖片或截圖佐證這些資料能幫助客服更快了解您的狀況並協助解決。如果還有其他細節想詢問，也歡迎補充說明喔！有需要我可以再協助您整理要提供的內容～

預期答案 · 加權拆解

II 重要限制 w 30%

需要確認情況並按照指定格式回覆

Judge 推理

回覆中提到的資訊雖然與轉接真人客服有關，但未能確認情況並按照指定格式回覆，因此在完整性和正確性上都未達標。

錯誤陳述 (1)

未按照指定格式回覆
案例 09368AB9

如果忘記可取貨數量怎麼辦？

已完成
第 1 次嘗試 · 已完成 49127ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER如果忘記可取貨數量怎麼辦？

BOT讓我幫您查詢一下相關資訊 🔍 如果您忘記可取貨數量，可以再次按清單提示來查看可取貨數量，或點選【可取貨商品】按鈕，查看待取貨的商品明細資料。您也可以在訂單管理中選擇檢視可取貨訂單。另外，若是在刷商品條碼時，畫面下方會有「可取貨商品」的提示，點擊即可檢查是否還有其他可取貨的商品。這樣就能輕鬆確認目前可以領取的數量囉！如需操作畫面參考，也可以點擊這張圖片看看：有其他問題也歡迎再問我喔！😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22035 · 忘記可取貨數量時怎麼辦？

問題

忘記可取貨數量時怎麼辦？

回答

可以再次按清單提示來查看可取貨數量。

意料之外 (9)

! know_22034 · 核銷時如何確認商品數量？

問題

核銷時如何確認商品數量？

回答

系統會自動檢核，不可超過可取貨數量。

! know_21935 · 會不會消費者自己忘記有什麼商品可以取貨

問題

會不會消費者自己忘記有什麼商品可以取貨

回答

如果您在刷商品條碼時，畫面下方有「可取貨商品」，點擊即可檢查是否有消費者其他可取貨的商品如何找到檢查按鈕：https://caroltestingv15.zendesk.com/hc/article_attachments/13630074021007.png

! know_22069 · 每次核銷可以多刷幾件商品？

問題

每次核銷可以多刷幾件商品？

回答

核銷應依據系統所登錄的可取貨數量辦理，系統自動防止多領。

! know_22061 · 商品核銷後會自動更新數量嗎？

問題

商品核銷後會自動更新數量嗎？

回答

商品核銷後，系統會自動更新可取貨數量以防止重覆領取。

! know_21962 · 要怎麼設定系統自動幫我按可取貨？

問題

要怎麼設定系統自動幫我按可取貨？

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

! know_22007 · 如何設定系統自動可取貨？

問題

如何設定系統自動可取貨？

回答

請於側邊欄的系統設定中的分店管理中，開啟【系統自動可取貨】功能。 ![3_175583436581309.PNG](https://storage.googleapis.com/dn-argon-prod-saas.appspot.com/ai/cms/wq0604pb9r/kl/image/3_175583436581309.PNG)

! know_21963 · 怎麼設定讓貨一到就自動通知客人取貨？

問題

怎麼設定讓貨一到就自動通知客人取貨？

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

! know_22042 · 如何查看待取貨商品明細？

問題

如何查看待取貨商品明細？

回答

可點選【可取貨商品】按鈕，查看待取貨的商品明細資料。

! know_22031 · 要在哪裡檢視可取貨的訂單？

問題

要在哪裡檢視可取貨的訂單？

回答

可在訂單管理中選擇檢視可取貨訂單。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆中所有的事實性陳述均有來源支持，因此沒有虛構的聲明，且所有引用的資訊都正確地反映了來源內容。

回答品質
86.7%

相關性

100.0%

完整性

60.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

讓我幫您查詢一下相關資訊 🔍 如果您忘記可取貨數量，可以再次按清單提示來查看可取貨數量，或點選【可取貨商品】按鈕，查看待取貨的商品明細資料。您也可以在訂單管理中選擇檢視可取貨訂單。另外，若是在刷商品條碼時，畫面下方會有「可取貨商品」的提示，點擊即可檢查是否還有其他可取貨的商品。這樣就能輕鬆確認目前可以領取的數量囉！如需操作畫面參考，也可以點擊這張圖片看看：有其他問題也歡迎再問我喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%

可以再次按清單提示來查看可取貨數量

Judge 推理

這個回答針對用戶的問題提供了相關的解決方案，並且包含了核心必答的內容，但未能完全聚焦於用戶的需求，導致完整性得分較低。
案例 60F8CEED

賣場連結圖文要怎麼更換？

已完成
第 1 次嘗試 · 已完成 46183ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER賣場連結圖文要怎麼更換？

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 要更換賣場連結的圖文，請按照以下步驟操作： 1. 點選側邊欄的「系統設定」。 2. 進入「分店管理」。 3. 找到您要編輯的分店，點擊「編輯」。 4. 在編輯頁面中，您可以自訂賣場連結的標題、介紹、網址，並上傳新的圖片或影片。 5. 完成後記得點擊「儲存」。如需參考畫面，您可以查看這張圖片說明：如果還有其他操作上的疑問，歡迎隨時告訴我喔！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22001 · 賣場連結圖文如何更換？

問題

賣場連結圖文如何更換？

回答

請至側邊欄>系統設定>分店管理>編輯，即可管理賣場連結圖文。

意料之外 (9)

! know_21904 · 如何分享賣場連結

問題

如何分享賣場連結

回答

1.進入賣場管理：在「全+1」平台主頁，點擊**「賣場管理」**按鈕。 2.點選分享賣場：進入賣場管理頁面後，點選右上角的**「分享賣場」**按鈕。 *系統會自動複製賣場連結。 3.貼連結到群組：將複製的連結直接貼到您要分享的LINE群組中。注意事項：如果您想更換賣場連結的圖文，可以從側邊欄進入**「系統設定」**，再點選**「分店管理」**，最後點擊**「編輯」**進行修改。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13629304454031.png

! know_22140 · 哪裡可以看見店家自訂的賣場連結？

問題

哪裡可以看見店家自訂的賣場連結？

回答

請於分店管理編輯處查看或設定賣場連結內容。

! know_22136 · 分店網址連結可以自訂嗎？

問題

分店網址連結可以自訂嗎？

回答

可以透過分店管理→編輯功能自訂賣場連結內容。

! know_21994 · 分享賣場連結後，消費者怎樣參與？

問題

分享賣場連結後，消費者怎樣參與？

回答

消費者只需點擊賣場連結，進入後選擇欲購買商品，或在群組留言+1即可參加團購。

! know_21964 · 如何設定賣場連結

問題

如何設定賣場連結

回答

1.進入分店管理：在「全+1」平台主頁，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.按下編輯：在分店列表中，找到您要設定的店舖，點選右側的**「編輯」**按鈕。 3.自訂賣場連結內容：在編輯頁面中，您可以自訂標題、賣場介紹、連結網址，並上傳圖片或影片。完成後，點擊**「儲存」**。如有不清楚的地方請見實際操作畫面：https://caroltestingv15.zendesk.com/hc/article_attachments/13652714557583.png

! know_22135 · 系統設定或賣場連結設定操作時需要注意什麼？

問題

系統設定或賣場連結設定操作時需要注意什麼？

回答

請依照平台手冊步驟操作，並確認店舖、賣場連結資訊設定正確，以防發生錯誤。

! know_21879 · 推廣商品無法顯示圖片？

問題

推廣商品無法顯示圖片？

回答

原因：這是因為賣場場景中，有超過200個上架商品，機器人為了加快回覆速度，僅顯示文字。解決：如果需要顯示圖片，您可以到後台將單一商品設為「一直線」、「一起發」或「超級發」，商品才會以圖文形式顯示。

! know_21908 · 賣場商品太滿了，我要怎麼清掉一些商品卡？

問題

賣場商品太滿了，我要怎麼清掉一些商品卡？

回答

1.進入賣場管理：在「全+1」平台主頁，點擊**「賣場管理」**按鈕。 2.選擇上架狀態：進入賣場後可以看到商品圖卡**「上架中」**按鈕，可以自行點選切換上下架狀態，將決定消費者是否能看到商品 *上架限制最多200個商品卡，超過上限後開團不會自動上架，建議您將已完成的訂單進行核銷並將不需要的商品卡設為下架(灰色)，要推播的商品則設為上架(綠色) *另開團日D+30天商品卡會自動上架

! know_21907 · 怎麼把商品關掉不要顯示？或重新上架？

問題

怎麼把商品關掉不要顯示？或重新上架？

回答

1.進入賣場管理：在「全+1」平台主頁，點擊**「賣場管理」**按鈕。 2.選擇上架狀態：進入賣場後可以看到商品圖卡**「上架中」**按鈕，可以自行點選切換上下架狀態，將決定消費者是否能看到商品 *上架限制最多200個商品卡，超過上限後開團不會自動上架，建議您將已完成的訂單進行核銷並將不需要的商品卡設為下架(灰色)，要推播的商品則設為上架(綠色) *另開團日D+30天商品卡會自動上架

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料中的步驟，並且所有的事實陳述都有來源支持，因此沒有任何虛構的內容。

回答品質
90.0%

相關性

100.0%

完整性

70.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

60.0% · w 60%

請至側邊欄>系統設定>分店管理>編輯，即可管理賣場連結圖文

II 重要

—

III 補充

—

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您服務！😊 要更換賣場連結的圖文，請按照以下步驟操作： 1. 點選側邊欄的「系統設定」。 2. 進入「分店管理」。 3. 找到您要編輯的分店，點擊「編輯」。 4. 在編輯頁面中，您可以自訂賣場連結的標題、介紹、網址，並上傳新的圖片或影片。 5. 完成後記得點擊「儲存」。如需參考畫面，您可以查看這張圖片說明：如果還有其他操作上的疑問，歡迎隨時告訴我喔！

預期答案 · 加權拆解

I 核心必答 w 60%

請至側邊欄>系統設定>分店管理>編輯，即可管理賣場連結圖文

Judge 推理

回覆內容雖然提供了詳細的步驟，但未能直接引用關鍵的指示，導致核心內容的完整性不足。
案例 0E130F26

如果我有問題，客服需要什麼資料才能加速處理？

已完成
第 1 次嘗試 · 已完成 45180ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER如果我有問題，客服需要什麼資料才能加速處理？

BOT馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！😊 為了讓客服能更快協助您處理問題，建議您提供以下資料： - 問題描述（請盡量詳述問題原因） - 異常數量（如果有數量上的異常請註明） - 相關圖片或截圖佐證這些資訊能幫助客服更精準、快速地了解您的狀況並加速處理流程。如果是訂單相關問題，也請提供訂單編號或消費者資料。有任何需要都可以隨時告訴我喔！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22077 · 客服需要哪些資料可以加速處理？

問題

客服需要哪些資料可以加速處理？

回答

請詳述問題原因、異常數量，並提供相關圖片，有助於客服加速處理流程。

意料之外 (9)

! know_22073 · 如何查詢所有待處理的客服問題？

問題

如何查詢所有待處理的客服問題？

回答

可在客服管理系統中查詢所有已登錄的客服問題以便追蹤處理。

! know_22020 · 若需要協助，客服如何聯絡？

問題

若需要協助，客服如何聯絡？

回答

請於相關頁面或訂單管理留言給客服，客服會在上班時間內協助處理。路徑如下： https://storage.googleapis.com/dn-argon-prod-saas.appspot.com/ai/cms/wq0604pb9r/kl/image/1_175576635048708.PNG

! know_22076 · 如何加速客訴處理流程？

問題

如何加速客訴處理流程？

回答

請於10:00以前，從訂單管理系統提出客服反應，並盡量詳述問題原因與異常數量，提供相關圖片，可加速處理流程。

! know_22072 · 怎麼查詢或新增客服問題？

問題

怎麼查詢或新增客服問題？

回答

在客服管理頁面點選查詢或新增問題，輸入相關內容即可。

! know_22052 · 如何在客服管理中記錄問題反應？

問題

如何在客服管理中記錄問題反應？

回答

進入客服管理功能，選擇新增問題，詳細填寫問題內容後儲存。

! know_22060 · 客服反應記錄可用來做什麼？

問題

客服反應記錄可用來做什麼？

回答

客服反應記錄可查詢與追蹤訂單問題，協助後續客服處理與改善。

! know_21940 · 請問消費者要如何反應訂單問題

問題

請問消費者要如何反應訂單問題

回答

1. 進入訂單管理： * 在「全+1」平台主頁，點擊**「訂單管理」**按鈕。 * 找到有問題的訂單，點擊**「客服」**按鈕。 2. 新增問題： * 進入客服頁面後，點選**「新增」**。 3. 詳述問題： * 請填寫問題明細，並盡可能提供問題原因、異常數量及相關圖片，以利客服人員快速處理。如需畫面參考請見：https://caroltestingv15.zendesk.com/hc/article_attachments/13651962831759.png 重要提醒： * 如果商品有污損、缺品、貨態異常或任何訂單相關問題，請務必在商品預計到貨日的隔天（D+1）上午10:00以前，從訂單管理中提交反應，才能確保問題能被即時處理。 * 如果您要查詢已經提交的客服問題，請回到主頁左側功能列表「客服管理」查找已提報的反應內容

! know_22068 · 以訂單找人需要什麼資訊？

問題

以訂單找人需要什麼資訊？

回答

需要訂單編號或相關消費者資料即可查找對應會員進行聯繫或核銷。

! know_21925 · 遇到系統異常沒有人回服怎麼辦

問題

遇到系統異常沒有人回服怎麼辦

回答

【針對客服無回覆的應對方式】 1. 確認你是否在正確的時間點反應問題根據手冊第24頁說明：訂單問題（如汙損、欠品、貨態），需於商品預計到貨日隔天（D+1）10:00以前，從【訂單管理】留言給客服，才會加速對應處理。 ✅ 建議：盡量在時效內反應問題，避免排隊處理延遲。 2. 是否有提供足夠資訊？手冊建議如下資訊可加快處理速度：問題描述異常數量截圖或照片佐證 ✅ 建議：留言內容要「具體詳實」，不要只寫「沒到」或「沒看到人處理」。 3. 直接聯絡後台工程單位若客服端遲遲沒有回應，也可以依照第33頁說明：請寄信到電商平台研發課： 📧 TFMN173@family.com.tw 信件中請務必包含：錯誤畫面截圖店號、店名店長姓名與電話發生問題的簡述

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆中提到的資料要求（問題描述、異常數量、相關圖片）均與來源中的建議一致，因此所有的事實陳述都得到了支持，沒有虛構的內容。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

100.0% · w 10%

AI 回覆

馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您服務！😊 為了讓客服能更快協助您處理問題，建議您提供以下資料： - 問題描述（請盡量詳述問題原因） - 異常數量（如果有數量上的異常請註明） - 相關圖片或截圖佐證這些資訊能幫助客服更精準、快速地了解您的狀況並加速處理流程。如果是訂單相關問題，也請提供訂單編號或消費者資料。有任何需要都可以隨時告訴我喔！

預期答案 · 加權拆解

I 核心必答 w 60%

客服需要詳述問題原因
客服需要提供異常數量
客服需要提供相關圖片

III 補充說明 w 10%

有助於客服加速處理流程

Judge 推理

這個回答完全符合用戶的問題，提供了客服需要的所有資料，並且補充了有助於加速處理流程的說明，內容完整且正確。
案例 0E483AC4

擔當要怎麼使用全+1社群電商？

已完成
第 1 次嘗試 · 已完成 35613ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER擔當要怎麼使用全+1社群電商？

BOT正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您解答！如果您是「擔當」想要使用全+1社群電商，請依照以下步驟操作： 1. 請店長協助將您（擔當）設定為小幫手。 2. 之後，您可以從全管家APP登入全+1社群電商。這樣就能順利開始使用囉！如果有遇到權限或登入問題，也歡迎再詢問我～😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_21981 · 擔當無法使用全+1社群電商

問題

擔當無法使用全+1社群電商

回答

1.請店長協助將擔當設定為小幫手 2.從全管家APP登入全+1社群電商

意料之外 (9)

! know_21844 · 全+1社群電商是怎麼運作的？

問題

全+1社群電商是怎麼運作的？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

! know_21840 · 「全+1」社群電商平台是什麼？

問題

「全+1」社群電商平台是什麼？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

! know_21841 · 全+1平台主要提供哪些社群電商功能？

問題

全+1平台主要提供哪些社群電商功能？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

! know_21842 · 可以簡單介紹一下全+1社群電商是做什麼的嗎？

問題

可以簡單介紹一下全+1社群電商是做什麼的嗎？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

! know_21851 · 為甚麼要做「全+1」社群電商平台?

問題

為甚麼要做「全+1」社群電商平台?

回答

1.為了減少店鋪群組團購的勞務 2.管理者可共享共用平台資訊，避免資訊落差

! know_22059 · 全+1社群電商列印有哪些步驟？

問題

全+1社群電商列印有哪些步驟？

回答

進入庫存業務-服務性商品-全+1社群電商列印，選擇條件查詢後即可列印。

! know_21979 · 我為什麼登入全管家APP，找不到全+1社群電商入口

問題

我為什麼登入全管家APP，找不到全+1社群電商入口

回答

請確認您已到SC設定中開啟全家人APP權限，設定後約1小時生效。

! know_21843 · 全+1這個平台和一般電商有什麼不同？

問題

全+1這個平台和一般電商有什麼不同？

回答

「全+1 社群電商」平台是專為全家便利商店設計的營運工具，主要功能是協助店長管理 LINE 群組銷售，透過「全+1」機器人，可以協助推播商品、提醒團友繳費、收集訂單、通知到貨等。此平台結合了全家會員、LINE 帳號，並透過「全管家」APP 進行後台操作與管理，讓店舖能更便利地進行社群團購。

! know_21848 · 為什麼在使用平台時一定要邀請「全+1」進入群組？

問題

為什麼在使用平台時一定要邀請「全+1」進入群組？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源資料，所有的步驟和建議都能在來源中找到支持，因此沒有任何虛構的聲明。

回答品質
86.7%

相關性

100.0%

完整性

60.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

60.0% · w 60%

未提及必須從全管家APP登入全+1社群電商的具體要求

II 重要

—

III 補充

—

AI 回覆

正在為您搜尋最新資料 ⏳ 您好，我是全+1 AI 小幫手，很高興為您解答！如果您是「擔當」想要使用全+1社群電商，請依照以下步驟操作： 1. 請店長協助將您（擔當）設定為小幫手。 2. 之後，您可以從全管家APP登入全+1社群電商。這樣就能順利開始使用囉！如果有遇到權限或登入問題，也歡迎再詢問我～😊

預期答案 · 加權拆解

I 核心必答 w 60%

必須從全管家APP登入全+1社群電商

Judge 推理

回覆中提到的步驟雖然有助於使用全+1社群電商，但未明確強調必須從全管家APP登入的要求，因此在完整性上有所欠缺。
案例 941C8F7F

請問如何列印取貨標籤？

已完成
第 1 次嘗試 · 已完成 45276ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER請問如何列印取貨標籤？

BOT讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您解答！要列印取貨標籤，請依照以下步驟操作： 1. 進入「庫存業務」的「服務性商品」項目。 2. 點選「新標籤列印」。 3. 在「標籤類別」中選擇「社群電商取貨標籤」，即可進行標籤列印。這樣就能順利完成取貨標籤的列印囉！如果需要參考實際畫面操作，歡迎告訴我，我可以提供相關圖片協助您 😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22047 · 如何列印取貨標籤？

問題

如何列印取貨標籤？

回答

經由庫存業務的服務性商品項下，進入(新)標籤列印，選擇【社群電商取貨標籤】即可列印標籤。

意料之外 (9)

! know_21938 · 如何列印「社群電商取貨標籤」

問題

如何列印「社群電商取貨標籤」

回答

請從店舖系統中找到**「庫存業務」進入「服務性商品」，接著點選「新標籤列印」，在「標籤類別」中選擇「社群電商取貨標籤」**即可列印。參考實際畫面操作：https://caroltestingv15.zendesk.com/hc/article_attachments/13651931936271.png

! know_22048 · 標籤列印時怎麼選擇標籤類別？

問題

標籤列印時怎麼選擇標籤類別？

回答

標籤類別請選擇【社群電商取貨標籤】，以協助分辨取貨訂單。

! know_22050 · 標籤貼紙有什麼用？

問題

標籤貼紙有什麼用？

回答

標籤貼紙可用來加速商品整理與分發，提高工作效率。

! know_22056 · 什麼是社群電商取貨標籤？

問題

什麼是社群電商取貨標籤？

回答

社群電商取貨標籤專為全+1等社群訂單設計，方便識別與分撥取貨商品。

! know_22049 · 如何列印訂單明細？

問題

如何列印訂單明細？

回答

進入庫存業務-服務性商品-全+1社群電商列印，選擇日期/狀態後查詢，即可列印訂單明細。

! know_21939 · 如何列印團購訂單的詳細明細

問題

如何列印團購訂單的詳細明細

回答

請從店舖系統中找到**「庫存業務」進入「服務性商品」，點選「全+1社群電商列印」。接著選擇日期和狀態**，並按下**「查詢」和「列印」**，就能取得完整的訂單明細。參考實際畫面操作：https://caroltestingv15.zendesk.com/hc/article_attachments/13651933824015.png

! know_22055 · 如何加快商品整理流程？

問題

如何加快商品整理流程？

回答

有效利用標籤貼紙，可以加快商品整理與配貨作業。

! know_22059 · 全+1社群電商列印有哪些步驟？

問題

全+1社群電商列印有哪些步驟？

回答

進入庫存業務-服務性商品-全+1社群電商列印，選擇條件查詢後即可列印。

! know_22058 · 店長如何管理訂單？

問題

店長如何管理訂單？

回答

店長可利用群友管理、訂單管理或團單管理系統，進行訂單查詢、核銷、標籤列印等作業。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全依據來源材料，所有步驟和指示都與來源一致，因此沒有任何虛構的內容。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

讓我幫您查詢一下相關資訊 🔍 您好，我是全+1 AI 小幫手，很高興為您解答！要列印取貨標籤，請依照以下步驟操作： 1. 進入「庫存業務」的「服務性商品」項目。 2. 點選「新標籤列印」。 3. 在「標籤類別」中選擇「社群電商取貨標籤」，即可進行標籤列印。這樣就能順利完成取貨標籤的列印囉！如果需要參考實際畫面操作，歡迎告訴我，我可以提供相關圖片協助您 😊

預期答案 · 加權拆解

I 核心必答 w 60%

選擇【社群電商取貨標籤】即可列印標籤

Judge 推理

這個回答完整地涵蓋了如何列印取貨標籤的步驟，並且提供了清晰的指示，符合用戶的需求。
案例 B8200EDF

我怎麼快速邀請成員加入LINE群組？

已完成
第 1 次嘗試 · 已完成 41668ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER我怎麼快速邀請成員加入LINE群組？

BOT馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您解答！要快速邀請成員加入LINE群組，您可以按照以下步驟操作： 1. 進入「全+1」平台側邊欄的「LINE群組管理」。 2. 在群組列表中，找到您想邀請成員的群組，點選「快速邀請」。 3. 貼上您的LINE群組邀請連結（可在LINE群組右上角三點→邀請→複製連結）。 4. 在下方列表中勾選要邀請的群友。 5. 點選「立即邀請」，機器人會私訊這些群友，提供群組連結讓他們加入。這樣就能快速又方便地邀請成員囉！如果需要操作畫面參考，可以點這裡看圖片說明：有其他關於LINE群組管理的問題也歡迎隨時問我喔！😊
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_22092 · 如何邀請成員加入LINE群組？

問題

如何邀請成員加入LINE群組？

回答

新成立群組後，可通過全+1機器人私訊發送群組連結給群友，或到側邊欄LINE群組管理，快速邀請貼上連結並選擇群友。

意料之外 (9)

! know_22104 · 新增群組後如何快速邀請群友？

問題

新增群組後如何快速邀請群友？

回答

在LINE群組管理裡，選擇快速邀請，貼上群組連結並挑選要邀請的群友即可完成。

! know_21958 · 要怎麼在既有群組快速邀請群友加入新的群組

問題

要怎麼在既有群組快速邀請群友加入新的群組

回答

1.進入LINE群組管理：在「全+1」平台介面，點選側邊欄的**「Line群組管理」**。 2.按快速邀請：在群組列表中，找到您想邀請群友的群組，然後點選**「快速邀請」**。 3.貼上群組連結並選擇群友： -第一步：貼上您LINE群組的邀請連結（群組右上方三點→邀請→複製連結）。 -第二步：在下方列表中，勾選您要邀請的群友。 4.發送邀請：確認後，點選**「立即邀請」**按鈕，機器人會私訊您選擇的群友，提供群組連結讓他們加入。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652571119375.png

! know_22102 · 如何進行群組管理？

問題

如何進行群組管理？

回答

請於側邊欄選擇LINE群組管理，可編輯群組資料、邀請成員、設定歡迎詞及推播。

! know_21959 · 如何編輯加入群組歡迎詞

問題

如何編輯加入群組歡迎詞

回答

1.進入LINE群組管理：在「全+1」平台介面，點選側邊欄的**「Line群組管理」**。 2.點選「編輯」：在群組列表中，找到您要設定的群組，點選**「編輯」**。 3.自訂歡迎詞：進入編輯頁面後，找到**「入群歡迎詞」**的欄位後，勾選**「自訂」**並在下方的文字框中輸入您想要的歡迎詞。 4.儲存設定：輸入完成後，點擊**「儲存」**按鈕。設定完成後，當新成員加入群組時，就會自動收到這則歡迎訊息。如需畫面引導請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652617542671.png

! know_21993 · 如何在群組快速查詢熱門推薦商品？

問題

如何在群組快速查詢熱門推薦商品？

回答

設定推薦商品關鍵字後，於LINE群組輸入該關鍵字即可呼叫相對應推薦商品卡。

! know_21848 · 為什麼在使用平台時一定要邀請「全+1」進入群組？

問題

為什麼在使用平台時一定要邀請「全+1」進入群組？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

! know_21865 · 如何邀請全+1進入群組？

問題

如何邀請全+1進入群組？

回答

1.進入群組，選擇邀請。 2.搜尋「全+1」進行邀請。 3.「全+1」進入群組後，設定完成。 *若邀請失敗，代表已經邀請過其他機器人（機器人頭像旁出現綠色或是灰色盾牌符號），請先將其刪除。如需參考畫面請看：https://caroltestingv15.zendesk.com/hc/article_attachments/13619939133455.png

! know_21849 · 「全+1」加入群組後會自動執行哪些任務？

問題

「全+1」加入群組後會自動執行哪些任務？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

! know_21846 · 請問把「全+1」加入群組有什麼實際好處？

問題

請問把「全+1」加入群組有什麼實際好處？

回答

「全+1」機器人是社群電商的核心助手。它可以自動將商品圖卡或文字訊息推播到 LINE 群組，幫助店長宣傳商品。同時，它也能收集群組成員的訂單，並在商品到貨後私訊通知消費者取貨，減少店長手動處理訊息的時間，提高效率。

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全符合來源材料中的內容，所有步驟和細節都有來源支持，因此沒有虛構的聲明。

回答品質
100.0%

相關性

100.0%

完整性

100.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

100.0% · w 60%

II 重要

—

III 補充

—

AI 回覆

馬上為您找找看相關內容 📋 您好，我是全+1 AI 小幫手，很高興為您解答！要快速邀請成員加入LINE群組，您可以按照以下步驟操作： 1. 進入「全+1」平台側邊欄的「LINE群組管理」。 2. 在群組列表中，找到您想邀請成員的群組，點選「快速邀請」。 3. 貼上您的LINE群組邀請連結（可在LINE群組右上角三點→邀請→複製連結）。 4. 在下方列表中勾選要邀請的群友。 5. 點選「立即邀請」，機器人會私訊這些群友，提供群組連結讓他們加入。這樣就能快速又方便地邀請成員囉！如果需要操作畫面參考，可以點這裡看圖片說明：有其他關於LINE群組管理的問題也歡迎隨時問我喔！😊

預期答案 · 加權拆解

I 核心必答 w 60%

可以到側邊欄LINE群組管理
快速邀請貼上連結並選擇群友

Judge 推理

這個回答完全符合用戶的問題，提供了清晰的步驟來邀請成員加入LINE群組，並且涵蓋了所有關鍵點，沒有遺漏或錯誤的資訊。
案例 0F4FBD46

怎麼調整全+1的通知設定？

已完成
第 1 次嘗試 · 已完成 34581ms
腳本進度 · early_return ✗ 卡關

STEP

01

觸發條件
✗ 未進入 early_return

STEP

02

資訊收集
— 此案例不測

此案例 info_held 為空 — bot 不需問取資訊

STEP

03

API 工具
— 此案例不測

此案例 expected_tools 為空 — bot 不需呼叫工具

STEP

04

回覆規則
● bot 已回覆（單問單答案例，未啟用多輪迴圈）

測試 2 步 · 此案例不測 2 步

對話流程 · 1 turn

Turn 1 STEP 03 · STEP 04 → search_unified

USER怎麼調整全+1的通知設定？

BOT稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 您可以依照以下步驟調整全+1的通知設定： 1. 使用店長權限，進入「全+1」平台介面，點選側邊欄的「系統設定」，然後選擇「APP通知設定」。 2. 在「全管家通知」區塊，可以根據不同情境（如：滿團通知、消費者+N通知等），開啟或關閉推播通知。店長可自行設定自己和小幫手的通知。 3. 在「全家人通知」區塊，幹部可自行設定是否要將通知推播給所有全家人。提醒您：不同權限（店長、幹部）可以設定的對象會有所不同。如需畫面參考，請點擊這裡查看圖片：如果還有其他細節想了解，歡迎再問我喔！
知識檢索
100.0%

Precision

10.0%

Recall

100.0%

F1

18.2%

預期 (1)

✓ know_21956 · 如何調整通知設定

問題

如何調整通知設定

回答

請使用店長權限參考以下流程設定： 1.進入APP通知設定：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「APP通知設定」**。 2.設定通知（全管家）：在「全管家通知」區塊，您可以根據不同情境（如：滿團通知、消費者+N通知等），開啟或關閉是否要收到推播通知。 *提醒：店長可自行設定自己和小幫手的通知。 3.設定通知（全家人）：在「全家人通知」區塊，幹部可自行設定，決定是否要將通知推播給所有全家人。如需畫面參考請見：https://caroltestingv15.zendesk.com/hc/article_attachments/13652383743503.png

意料之外 (9)

! know_22006 · 什麼是全+1回覆設定？

問題

什麼是全+1回覆設定？

回答

全+1回覆設定是一種訂單通知方式，會根據LINE群組管理的設定，自動私訊消費者或在群組回覆+1成功通知。

! know_22043 · 怎麼進行全+1通知取貨？

問題

怎麼進行全+1通知取貨？

回答

請使用全+1通知功能，將取貨通知私訊給消費者的LINE帳號。

! know_22086 · APP通知推播要去哪裡設定？

問題

APP通知推播要去哪裡設定？

回答

請至側邊欄的APP通知設定，選擇全管家或全家人進行推播設定。

! know_21850 · 「全+1」平台有哪些重要的設定和管理功能？

問題

「全+1」平台有哪些重要的設定和管理功能？

回答

「全+1」平台提供了多樣化的設定功能。在「系統設定」中，可以進行 APP 推播通知設定、設定貨態自動更新為【可取貨】以及自訂賣場連結內容。在「LINE 群組管理」中，可以設定機器人和個人帳號的 +1 回覆模式（文字、圖卡、接龍或靜音）、自訂群組歡迎詞，並透過快速邀請功能將群組連結私訊給群友。此外，「會員管理」功能可讓店長編輯會員標籤和備註。

! know_22113 · 設定全家人通知時怎麼區分通知對象？

問題

設定全家人通知時怎麼區分通知對象？

回答

幹部設定全家人通知，店長則設定自己和小幫手的通知，根據權限分配。

! know_22087 · APP通知推播可以區分哪些權限？

問題

APP通知推播可以區分哪些權限？

回答

幹部可設定全家人通知，店長可設定自己及小幫手通知，請用店長權限設定。

! know_22124 · 怎麼判斷APP推播設定是否正確？

問題

怎麼判斷APP推播設定是否正確？

回答

在APP通知設定中檢查相對應情境的通知開關是否已開啟。

! know_21869 · 首次登入全管家找不到全+1入口，怎麼辦？

問題

首次登入全管家找不到全+1入口，怎麼辦？

回答

操作指引：1. 店舖 SC → APP 權限設定 → 開啟全管家功能（約 1 小時後生效）。2. 重新搜尋全+1。店舖SC設定畫面：https://caroltestingv15.zendesk.com/hc/article_attachments/13619941218959.png

! know_21960 · 如何調整貨態更新設定

問題

如何調整貨態更新設定

回答

1.進入分店管理：在「全+1」平台介面，點選側邊欄的**「系統設定」，然後點選「分店管理」**。 2.開啟自動更新功能：在分店列表中，找到您要設定的店舖，點擊**「到貨由系統更新【可取貨】」右側的開啟**按鈕。 3.確認設定：系統會跳出確認視窗，點選**「確定」**即可完成設定。特別提醒：如果商品到貨時發生貨單脫鉤、LINE好友活動尚未開始等異常狀況，系統將無法自動更新貨態。此時，您仍需手動從訂單管理中，將訂單點選為**【可取貨】**。實際操作畫面請參考：https://caroltestingv15.zendesk.com/hc/article_attachments/13652659172367.png

TP 1

FP 9

FN 0

忠實度
有依據

幻覺比率

0.0%

越低越好

引用依據

100.0%

越高越好

Judge 推理

AI的回覆完全依據來源材料，所有的步驟和提醒都與來源內容一致，因此沒有任何虛構的聲明。

回答品質
93.3%

相關性

100.0%

完整性

80.0%

正確性

100.0%

加權拆解 · 三層 coverage

I 核心

80.0% · w 60%

點選「APP通知設定」來進入通知設定

II 重要

—

III 補充

—

AI 回覆

稍等一下我來幫您查詢 💡 您好，我是全+1 AI 小幫手，很高興為您服務！😊 您可以依照以下步驟調整全+1的通知設定： 1. 使用店長權限，進入「全+1」平台介面，點選側邊欄的「系統設定」，然後選擇「APP通知設定」。 2. 在「全管家通知」區塊，可以根據不同情境（如：滿團通知、消費者+N通知等），開啟或關閉推播通知。店長可自行設定自己和小幫手的通知。 3. 在「全家人通知」區塊，幹部可自行設定是否要將通知推播給所有全家人。提醒您：不同權限（店長、幹部）可以設定的對象會有所不同。如需畫面參考，請點擊這裡查看圖片：如果還有其他細節想了解，歡迎再問我喔！

預期答案 · 加權拆解

I 核心必答 w 60%

在「全+1」平台介面，點選側邊欄的「系統設定」
點選「APP通知設定」來進入通知設定

Judge 推理

這個回答針對用戶的問題提供了詳細的步驟，並且涵蓋了大部分的關鍵點，但缺少了明確提到「點選『APP通知設定』來進入通知設定」這一點，因此在完整性上有所扣分。

Cost & Tokens

Bot 設定快照

Judge 設定快照

知識庫精準度

維度總表

賣場連結在哪裡編輯啊

觸發條件

資訊收集

API 工具

回覆規則

編輯清單時可以刪除推薦商品嗎

觸發條件

資訊收集

API 工具

回覆規則

請問「全+1」平台的會員管理功能可以做些什麼？

觸發條件

資訊收集

API 工具

回覆規則

如何設定推薦商品啊

觸發條件

資訊收集

API 工具

回覆規則

「全+1」機器人可以做什麼?

觸發條件

資訊收集

API 工具

回覆規則

操作手冊可以給外部人員看嗎?

觸發條件

資訊收集

API 工具

回覆規則

立即訂購下單後可以修改嗎

觸發條件

資訊收集

API 工具

回覆規則

異常狀況下怎麼手動按可取貨?

觸發條件

資訊收集

API 工具

回覆規則

請問可以從訂單資訊找到對應的消費者嗎？

觸發條件

資訊收集

API 工具

回覆規則

如何查核會員是否被加入黑名單？

觸發條件

資訊收集

API 工具

回覆規則

情境調用與完成

維度總表

我想查詢商品，怎麼提供關鍵字或需求？

觸發條件

資訊收集

API 工具

回覆規則

我想知道如何開團推播，預約訂購流程是什麼?

觸發條件

資訊收集

API 工具

回覆規則

我想要查詢一下你們的髮片有哪些推薦的款式呢？

觸發條件

資訊收集

API 工具

回覆規則

如何查詢常見問題啊

觸發條件

資訊收集

API 工具

回覆規則

我想查詢一下店內現有商品，需要提供什麼資訊?

觸發條件

資訊收集