執行 #399
李慶成AI 智能客服 (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 13:49
- 耗時
- 519.9s
Cost & Tokens
$0.2599
Total Bot Cost · USD
71.4%
Prompt Cache Hit
- cost per case
- $0.0087
- cost per 1k tokens
- $0.0011
- input tokens
- 224,812
- output tokens
- 6,385
- cached tokens — prompt-cache hit
- 160,512
- Total Tokens
- 231,197
- cost per correct
- $0.0011
- pass rate
- 96.7%
- 29 / 30
- judge cost
- $0.0329
設定快照（reproducibility）
Bot 設定快照
-
86b3fc14-31bc-4b22-a7e5-4b1e678c4c48
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
4
4543 ms
$0.2599
231,197
$0.0329
245,482
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 33.3% · 相關率 30.0% · 精確 20.0%
10 / 10 適用
·
1 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
98.0%
[96.0% – 100.0%] · n=10
10 / 10 適用
-
案例 63E741DA
香灰變深是正常現象嗎?
第 1 次嘗試 · 已完成 15757ms載入詳情中…
-
案例 A4A0A5FC
金檀香的香氣怎麼樣?
第 1 次嘗試 · 已完成 20268ms載入詳情中…
-
案例 49362CB5
電子發票需要另外申請嗎？
第 1 次嘗試 · 已完成 11032ms載入詳情中…
-
案例 1C74BAFB
頂級珍藏老料惠安水沉的容量是多少？
第 1 次嘗試 · 已完成 20543ms載入詳情中…
-
案例 9E0AFBD3
香品適合什麼場合使用?
第 1 次嘗試 · 已完成 18192ms載入詳情中…
-
案例 A62FBE74
環保西澳洲新山檀香的重量是多少?
第 1 次嘗試 · 已完成 19280ms載入詳情中…
-
案例 32647C7E
轉帳後需要怎麼通知你們呢？
第 1 次嘗試 · 已完成 12939ms載入詳情中…
-
案例 0844D5AD
星洲沉香粉的重量是多少?
第 1 次嘗試 · 已完成 16626ms載入詳情中…
-
案例 C2FE6C09
大宗訂單可以怎麼詢價?
第 1 次嘗試 · 已完成 12756ms載入詳情中…
-
案例 07419E26
喜緣慈悲水沉香(小盤香)可以用來做什麼?
第 1 次嘗試 · 已完成 28232ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
80.0%
[50.0% – 100.0%] · n=10
F1 66.7% · 召回 80.0% · 精確 60.0%
10 / 10 適用
用對工具
召回
tool_usage
100.0%
F1 100.0% · 召回 100.0% · 精確 100.0%
1 / 10 適用
答得到位
平均
answer_quality
90.7%
[85.7% – 94.0%] · n=10
10 / 10 適用
-
案例 A60FEAF0
訶子粉跟檀香有什麼差別嗎
第 1 次嘗試 · 已完成 29684ms載入詳情中…
-
案例 DA9CAB9D
請問我在假日下單的話，備註會不會馬上被看到？
第 1 次嘗試 · 已完成 16996ms載入詳情中…
-
案例 89704E67
宮廟需要長期配合供應嗎
第 1 次嘗試 · 已完成 16539ms載入詳情中…
-
案例 7FAD623A
我對煙量敏感，有推薦的香嗎？
第 1 次嘗試 · 已完成 17441ms載入詳情中…
-
案例 3C963D6E
海外訂購的商品價格與官網的價格一樣嗎？
第 1 次嘗試 · 已完成 15543ms載入詳情中…
-
案例 DE33A168
海外訂購的運費要怎麼計算？有沒有免運的優惠？
第 1 次嘗試 · 已完成 17574ms載入詳情中…
-
案例 DC736B51
要取消訂單，有什麼需要提供的嗎?
第 1 次嘗試 · 已完成 14084ms載入詳情中…
-
案例 98489748
我想查詢我的訂單狀態，該怎麼做？
第 1 次嘗試 · 已完成 13862ms載入詳情中…
-
案例 62794DAA
例假日下單有什麼注意事項嗎
第 1 次嘗試 · 已完成 18297ms載入詳情中…
-
案例 076E4174
對煙量敏感的我，無煙竹炭沉香和無煙竹炭檀香哪個比較好？
第 1 次嘗試 · 已完成 30758ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=8
F1 33.3% · 相關率 22.5% · 精確 20.0%
8 / 10 適用
·
3 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
91.3%
[83.3% – 97.3%] · n=10
10 / 10 適用
-
案例 ACE217A8
請問如何聯絡李慶成製香？
第 1 次嘗試 · 已完成 14998ms載入詳情中…
-
案例 635C3CC1
請問臥香座 祥龍獻瑞的描述是什麼呢？
第 1 次嘗試 · 已完成 24478ms載入詳情中…
-
案例 A97A45CE
可以根據什麼資訊搜尋訂單詳情?
第 1 次嘗試 · 已完成 13347ms載入詳情中…
-
案例 4891B000
我怎麼改訂單？需要提供什麼資訊？
第 1 次嘗試 · 已完成 19688ms載入詳情中…
-
案例 8CBE4443
馬拉OK水沉小盤香使用多久?
第 1 次嘗試 · 已完成 20475ms載入詳情中…
-
案例 21F5AA86
水沉香元寶有什麼好處嗎？
第 1 次嘗試 · 已完成 27271ms載入詳情中…
-
案例 F4230802
香茅粉有哪些傳統用途?
第 1 次嘗試 · 已完成 23870ms載入詳情中…
-
案例 3418DF87
拙具羅安息小盤香能幫助什麼?
第 1 次嘗試 · 已完成 30151ms載入詳情中…
-
案例 D75897A1
黃金祈福香有什麼規格?
第 1 次嘗試 · 已完成 19093ms載入詳情中…
-
案例 B77EB51F
48小時專用香環爐圓徑多少?
第 1 次嘗試 · 已完成 17759ms載入詳情中…