執行 #89
CS健康站 (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 11:23
- 耗時
- 324.5s
Cost & Tokens
$0.2952
Total Bot Cost · USD
54.8%
Prompt Cache Hit
- cost per case
- $0.0098
- cost per 1k tokens
- $0.0014
- input tokens
- 204,483
- output tokens
- 6,797
- cached tokens — prompt-cache hit
- 112,128
- Total Tokens
- 211,280
- cost per correct
- $0.0013
- pass rate
- 86.7%
- 26 / 30
- judge cost
- $0.0327
設定快照(reproducibility)
Bot 設定快照
-
789d5a07-2ed4-4a0c-a2f6-270a6c0884da
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
8
12117 ms
$0.2952
211,280
$0.0327
237,099
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 33.3% · 相關率 41.0% · 精確 20.0%
10 / 10 適用
·
3 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
99.0%
[97.3% – 100.0%] · n=10
10 / 10 適用
-
案例 EF833029
保健食品真的會影響尿液顏色嗎
第 1 次嘗試 · 已完成 13609ms載入詳情中…
-
案例 F3DB435E
好檬鈣的原料來自哪些國家呢?
第 1 次嘗試 · 已完成 22578ms載入詳情中…
-
案例 57D5DD50
保健食品可以取代藥物的治療作用嗎
第 1 次嘗試 · 已完成 15439ms載入詳情中…
-
案例 9FC6E071
這個飛航模式補充包有得過獎嗎?
第 1 次嘗試 · 已完成 10688ms載入詳情中…
-
案例 03A34354
攝取番茄紅素可以降低罹患攝護腺問題的風險嗎?
第 1 次嘗試 · 已完成 20676ms載入詳情中…
-
案例 0CDF2FDE
好酵順的消化酵素可以分解澱粉和脂肪嗎?
第 1 次嘗試 · 已完成 15175ms載入詳情中…
-
案例 44CEE254
保健食品需要避光保存嗎?
第 1 次嘗試 · 已完成 12333ms載入詳情中…
-
案例 01635AEC
飛航模式膠囊真的有助於入睡嗎?
第 1 次嘗試 · 已完成 13582ms載入詳情中…
-
案例 7DEC539A
保健食品會促進或抑制藥物的吸收嗎?
第 1 次嘗試 · 已完成 12742ms載入詳情中…
-
案例 B12D325E
好酵順適合什麼族群?
第 1 次嘗試 · 已完成 16007ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
20.0%
[0.0% – 50.0%] · n=10
F1 20.0% · 召回 20.0% · 精確 20.0%
10 / 10 適用
用對工具
召回
tool_usage
10.0%
[0.0% – 30.0%] · n=10
F1 10.0% · 召回 10.0% · 精確 20.0%
10 / 10 適用
答得到位
平均
answer_quality
73.7%
[61.0% – 85.0%] · n=10
10 / 10 適用
-
案例 036AC3E7
想請教健康檢測會提供什麼樣的建議保健品呢?
第 1 次嘗試 · 已完成 21589ms載入詳情中…
-
案例 CAFB065B
我想查詢飛航模式補充包和膠囊的差別
第 1 次嘗試 · 已完成 14418ms載入詳情中…
-
案例 C1D20D0B
我想做健康檢測,為什麼還需要提供年齡、性別和職業資訊?
第 1 次嘗試 · 已完成 16396ms載入詳情中…
-
案例 820847F8
我想做健康檢測,請問要提供什麼資訊?
第 1 次嘗試 · 已完成 9906ms載入詳情中…
-
案例 51C572A4
我想查一下飛航模式補充包的資訊
第 1 次嘗試 · 已完成 22140ms載入詳情中…
-
案例 39B9FFB3
如果我查詢訂單,系統找不到我的相關訂單資訊,請問我可以怎麼做?
第 1 次嘗試 · 已完成 12786ms載入詳情中…
-
案例 F44B0909
我可以查詢什麼產品?
第 1 次嘗試 · 已完成 21741ms載入詳情中…
-
案例 BF704B3A
我的訂單狀態是怎樣?
第 1 次嘗試 · 已完成 12172ms載入詳情中…
-
案例 C19B284C
現在有什麼常見問題?
第 1 次嘗試 · 已完成 22256ms載入詳情中…
-
案例 37F07A5D
為什麼你們的回答不能引用外部內容?
第 1 次嘗試 · 已完成 15304ms載入詳情中…
對話素養(混合問答)
對話素養(混合問答)
維度總表
找對資料
召回
retrieval
88.9%
[66.7% – 100.0%] · n=9
F1 29.6% · 相關率 50.0% · 精確 17.8%
9 / 10 適用
不亂編造
平均
faithfulness
90.0%
[70.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
88.0%
[77.0% – 95.3%] · n=10
10 / 10 適用
-
案例 0B83FDC3
銀杏和人蔘可以幫助集中注意力嗎?
第 1 次嘗試 · 已完成 15463ms載入詳情中…
-
案例 E352FE8C
燕窩酸益生菌有奶素 A.A. 無添加認證嗎?
第 1 次嘗試 · 已完成 18959ms載入詳情中…
-
案例 6ADF06B0
我想轉接真人客服。
第 1 次嘗試 · 已完成 9277ms載入詳情中…
-
案例 8F5C954B
停止吃保健食品後,尿液顏色會變回正常嗎?
第 1 次嘗試 · 已完成 15339ms載入詳情中…
-
案例 C319E09E
保健食品可以提供哪些特定的營養素?
第 1 次嘗試 · 已完成 15325ms載入詳情中…
-
案例 1A009F2D
糖尿病患者在選擇保健食品時要注意什麼?
第 1 次嘗試 · 已完成 22033ms載入詳情中…
-
案例 A24CE7A4
保健食品的劑量可以自己增減嗎?
第 1 次嘗試 · 已完成 12997ms載入詳情中…
-
案例 D5573614
請問在服用保健食品前,有必要諮詢醫師或營養師嗎?
第 1 次嘗試 · 已完成 16525ms載入詳情中…
-
案例 AD9EA4FB
怎麼判斷保健食品適不適合我?
第 1 次嘗試 · 已完成 15049ms載入詳情中…
-
案例 9A5F37AE
兒童需要補充營養素的時候怎麼辦?
第 1 次嘗試 · 已完成 14806ms載入詳情中…