執行 #400
李慶成AI 智能客服 (bulk R1) → production-canary (canary)
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 13:49
- 耗時
- 835.0s
Cost & Tokens
$0.2774
Total Bot Cost · USD
67.8%
Prompt Cache Hit
- cost per case
- $0.0092
- cost per 1k tokens
- $0.0012
- input tokens
- 224,829
- output tokens
- 7,053
- cached tokens — prompt-cache hit
- 152,448
- Total Tokens
- 231,882
- cost per correct
- $0.0012
- pass rate
- 96.7%
- 29 / 30
- judge cost
- $0.0335
設定快照（reproducibility）
Bot 設定快照
-
86b3fc14-31bc-4b22-a7e5-4b1e678c4c48
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
4
14177 ms
$0.2774
231,882
$0.0335
246,489
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 33.3% · 相關率 30.0% · 精確 20.0%
10 / 10 適用
·
1 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
98.0%
[95.7% – 100.0%] · n=10
10 / 10 適用
-
案例 63E741DA
香灰變深是正常現象嗎?
第 1 次嘗試 · 已完成 36909ms載入詳情中…
-
案例 A4A0A5FC
金檀香的香氣怎麼樣?
第 1 次嘗試 · 已完成 84133ms載入詳情中…
-
案例 49362CB5
電子發票需要另外申請嗎？
第 1 次嘗試 · 已完成 69754ms載入詳情中…
-
案例 1C74BAFB
頂級珍藏老料惠安水沉的容量是多少？
第 1 次嘗試 · 已完成 40913ms載入詳情中…
-
案例 9E0AFBD3
香品適合什麼場合使用?
第 1 次嘗試 · 已完成 26693ms載入詳情中…
-
案例 A62FBE74
環保西澳洲新山檀香的重量是多少?
第 1 次嘗試 · 已完成 38852ms載入詳情中…
-
案例 32647C7E
轉帳後需要怎麼通知你們呢？
第 1 次嘗試 · 已完成 26007ms載入詳情中…
-
案例 0844D5AD
星洲沉香粉的重量是多少?
第 1 次嘗試 · 已完成 47562ms載入詳情中…
-
案例 C2FE6C09
大宗訂單可以怎麼詢價?
第 1 次嘗試 · 已完成 36105ms載入詳情中…
-
案例 07419E26
喜緣慈悲水沉香(小盤香)可以用來做什麼?
第 1 次嘗試 · 已完成 50631ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
80.0%
[50.0% – 100.0%] · n=10
F1 66.7% · 召回 80.0% · 精確 60.0%
10 / 10 適用
用對工具
召回
tool_usage
100.0%
F1 100.0% · 召回 100.0% · 精確 100.0%
1 / 10 適用
答得到位
平均
answer_quality
89.3%
[85.0% – 93.0%] · n=10
10 / 10 適用
-
案例 A60FEAF0
訶子粉跟檀香有什麼差別嗎
第 1 次嘗試 · 已完成 48704ms載入詳情中…
-
案例 DA9CAB9D
請問我在假日下單的話，備註會不會馬上被看到？
第 1 次嘗試 · 已完成 39971ms載入詳情中…
-
案例 89704E67
宮廟需要長期配合供應嗎
第 1 次嘗試 · 已完成 35348ms載入詳情中…
-
案例 7FAD623A
我對煙量敏感，有推薦的香嗎？
第 1 次嘗試 · 已完成 34308ms載入詳情中…
-
案例 3C963D6E
海外訂購的商品價格與官網的價格一樣嗎？
第 1 次嘗試 · 已完成 30735ms載入詳情中…
-
案例 DE33A168
海外訂購的運費要怎麼計算？有沒有免運的優惠？
第 1 次嘗試 · 已完成 34688ms載入詳情中…
-
案例 DC736B51
要取消訂單，有什麼需要提供的嗎?
第 1 次嘗試 · 已完成 25809ms載入詳情中…
-
案例 98489748
我想查詢我的訂單狀態，該怎麼做？
第 1 次嘗試 · 已完成 45337ms載入詳情中…
-
案例 62794DAA
例假日下單有什麼注意事項嗎
第 1 次嘗試 · 已完成 39235ms載入詳情中…
-
案例 076E4174
對煙量敏感的我，無煙竹炭沉香和無煙竹炭檀香哪個比較好？
第 1 次嘗試 · 已完成 62764ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=8
F1 33.3% · 相關率 18.8% · 精確 20.0%
8 / 10 適用
·
3 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
90.7%
[82.3% – 96.7%] · n=10
10 / 10 適用
-
案例 ACE217A8
請問如何聯絡李慶成製香？
第 1 次嘗試 · 已完成 40062ms載入詳情中…
-
案例 635C3CC1
請問臥香座 祥龍獻瑞的描述是什麼呢？
第 1 次嘗試 · 已完成 53788ms載入詳情中…
-
案例 A97A45CE
可以根據什麼資訊搜尋訂單詳情?
第 1 次嘗試 · 已完成 33772ms載入詳情中…
-
案例 4891B000
我怎麼改訂單？需要提供什麼資訊？
第 1 次嘗試 · 已完成 22515ms載入詳情中…
-
案例 8CBE4443
馬拉OK水沉小盤香使用多久?
第 1 次嘗試 · 已完成 43774ms載入詳情中…
-
案例 21F5AA86
水沉香元寶有什麼好處嗎？
第 1 次嘗試 · 已完成 42021ms載入詳情中…
-
案例 F4230802
香茅粉有哪些傳統用途?
第 1 次嘗試 · 已完成 38005ms載入詳情中…
-
案例 3418DF87
拙具羅安息小盤香能幫助什麼?
第 1 次嘗試 · 已完成 57803ms載入詳情中…
-
案例 D75897A1
黃金祈福香有什麼規格?
第 1 次嘗試 · 已完成 41466ms載入詳情中…
-
案例 B77EB51F
48小時專用香環爐圓徑多少?
第 1 次嘗試 · 已完成 36000ms載入詳情中…