執行 #90
CS健康站 (bulk R1) → production-canary (canary)
- 狀態
- 執行中
- 案例
- 27
- 開始時間
- 16 May 11:23
- 耗時
- —
Cost & Tokens
$0.1704
Total Bot Cost · USD
75.1%
Prompt Cache Hit
- cost per case
- $0.0074
- cost per 1k tokens
- $0.0011
- input tokens
- 151,066
- output tokens
- 4,795
- cached tokens — prompt-cache hit
- 113,408
- Total Tokens
- 155,861
- cost per correct
- $0.0012
- pass rate
- 95.5%
- 21 / 22
- judge cost
- $0.0248
設定快照（reproducibility）
Bot 設定快照
-
789d5a07-2ed4-4a0c-a2f6-270a6c0884da
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
23 / 27
0
7
28266 ms
$0.1704
155,861
$0.0248
184,454
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 33.3% · 相關率 41.0% · 精確 20.0%
10 / 10 適用
·
3 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
99.7%
[99.0% – 100.0%] · n=10
10 / 10 適用
-
案例 EF833029
保健食品真的會影響尿液顏色嗎
第 1 次嘗試 · 已完成 29732ms載入詳情中…
-
案例 F3DB435E
好檬鈣的原料來自哪些國家呢？
第 1 次嘗試 · 已完成 34275ms載入詳情中…
-
案例 57D5DD50
保健食品可以取代藥物的治療作用嗎
第 1 次嘗試 · 已完成 38849ms載入詳情中…
-
案例 9FC6E071
這個飛航模式補充包有得過獎嗎?
第 1 次嘗試 · 已完成 31961ms載入詳情中…
-
案例 03A34354
攝取番茄紅素可以降低罹患攝護腺問題的風險嗎？
第 1 次嘗試 · 已完成 32131ms載入詳情中…
-
案例 0CDF2FDE
好酵順的消化酵素可以分解澱粉和脂肪嗎?
第 1 次嘗試 · 已完成 35771ms載入詳情中…
-
案例 44CEE254
保健食品需要避光保存嗎?
第 1 次嘗試 · 已完成 27761ms載入詳情中…
-
案例 01635AEC
飛航模式膠囊真的有助於入睡嗎?
第 1 次嘗試 · 已完成 29002ms載入詳情中…
-
案例 7DEC539A
保健食品會促進或抑制藥物的吸收嗎?
第 1 次嘗試 · 已完成 33369ms載入詳情中…
-
案例 B12D325E
好酵順適合什麼族群？
第 1 次嘗試 · 已完成 32308ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
25.0%
[0.0% – 75.0%] · n=4
F1 25.0% · 召回 25.0% · 精確 25.0%
7 / 7 適用
用對工具
召回
tool_usage
0.0%
[0.0% – 0.0%] · n=4
F1 0.0% · 召回 0.0% · 精確 25.0%
7 / 7 適用
答得到位
平均
answer_quality
87.8%
[80.0% – 93.3%] · n=3
7 / 7 適用
-
案例 036AC3E7
想請教健康檢測會提供什麼樣的建議保健品呢？
第 1 次嘗試 · 已完成 41368ms載入詳情中…
-
案例 CAFB065B
我想查詢飛航模式補充包和膠囊的差別
第 1 次嘗試 · 已完成 40387ms載入詳情中…
-
案例 C1D20D0B
我想做健康檢測，為什麼還需要提供年齡、性別和職業資訊？
第 1 次嘗試 · 已完成 21586ms載入詳情中…
-
案例 820847F8
我想做健康檢測，請問要提供什麼資訊？
第 1 次嘗試 · 已完成 16678ms載入詳情中…
-
案例 51C572A4
我想查一下飛航模式補充包的資訊
第 1 次嘗試 · 執行中載入詳情中…
-
案例 39B9FFB3
如果我查詢訂單，系統找不到我的相關訂單資訊，請問我可以怎麼做？
第 1 次嘗試 · 執行中載入詳情中…
-
案例 F44B0909
我可以查詢什麼產品？
第 1 次嘗試 · 執行中載入詳情中…
-
案例 BF704B3A
我的訂單狀態是怎樣？
等候 orchestrator 處理此案例…
-
案例 C19B284C
現在有什麼常見問題?
等候 orchestrator 處理此案例…
-
案例 37F07A5D
為什麼你們的回答不能引用外部內容？
等候 orchestrator 處理此案例…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
87.5%
[62.5% – 100.0%] · n=8
F1 29.2% · 相關率 45.0% · 精確 17.5%
9 / 10 適用
不亂編造
平均
faithfulness
88.9%
[66.7% – 100.0%] · n=9
10 / 10 適用
答得到位
平均
answer_quality
87.4%
[75.2% – 97.0%] · n=9
10 / 10 適用
-
案例 0B83FDC3
銀杏和人蔘可以幫助集中注意力嗎？
第 1 次嘗試 · 已完成 34439ms載入詳情中…
-
案例 E352FE8C
燕窩酸益生菌有奶素 A.A. 無添加認證嗎?
第 1 次嘗試 · 已完成 36426ms載入詳情中…
-
案例 6ADF06B0
我想轉接真人客服。
第 1 次嘗試 · 已完成 12506ms載入詳情中…
-
案例 8F5C954B
停止吃保健食品後，尿液顏色會變回正常嗎？
第 1 次嘗試 · 已完成 29582ms載入詳情中…
-
案例 C319E09E
保健食品可以提供哪些特定的營養素?
第 1 次嘗試 · 已完成 45262ms載入詳情中…
-
案例 1A009F2D
糖尿病患者在選擇保健食品時要注意什麼?
第 1 次嘗試 · 已完成 31156ms載入詳情中…
-
案例 A24CE7A4
保健食品的劑量可以自己增減嗎?
第 1 次嘗試 · 已完成 25322ms載入詳情中…
-
案例 D5573614
請問在服用保健食品前，有必要諮詢醫師或營養師嗎？
第 1 次嘗試 · 已完成 28984ms載入詳情中…
-
案例 AD9EA4FB
怎麼判斷保健食品適不適合我?
第 1 次嘗試 · 已完成 31706ms載入詳情中…
-
案例 9A5F37AE
兒童需要補充營養素的時候怎麼辦?
第 1 次嘗試 · 執行中載入詳情中…