執行 #164
LIBAOS AI 小幫手 (bulk R1) → production-canary (canary)
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 11:58
- 耗時
- 443.5s
Cost & Tokens
$0.6637
Total Bot Cost · USD
42.3%
Prompt Cache Hit
- cost per case
- $0.0221
- cost per 1k tokens
- $0.0014
- input tokens
- 452,627
- output tokens
- 5,687
- cached tokens — prompt-cache hit
- 191,360
- Total Tokens
- 458,314
- cost per correct
- $0.0011
- pass rate
- 76.7%
- 23 / 30
- judge cost
- $0.0264
設定快照（reproducibility）
Bot 設定快照
-
8b573a9c-28ac-4682-ad6f-ce0e52425adb
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
6
34951 ms
$0.6637
458,314
$0.0264
205,495
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 32.4% · 相關率 27.5% · 精確 19.3%
10 / 10 適用
·
4 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
93.3%
[83.3% – 99.3%] · n=10
10 / 10 適用
-
案例 C32CBA28
你們的潤滑油分為哪些類型?
第 1 次嘗試 · 已完成 50037ms載入詳情中…
-
案例 A67573EF
越野胎 DISCOVERER AT3 4S 是什麼類型的胎?
第 1 次嘗試 · 已完成 53732ms載入詳情中…
-
案例 3B5A007D
2T溜油、2T飆油和2T杜漢油可以直接添加使用嗎?
第 1 次嘗試 · 已完成 48229ms載入詳情中…
-
案例 3D559F95
潤滑油產品有哪些類型？
第 1 次嘗試 · 已完成 57394ms載入詳情中…
-
案例 549BE5D7
混用不同種黏度機油會有影響嗎
第 1 次嘗試 · 已完成 40368ms載入詳情中…
-
案例 DC5489FA
越野胎 245/75R16 有沒有提供舒適性?
第 1 次嘗試 · 已完成 45234ms載入詳情中…
-
案例 5703658F
請問越野胎 235/70R16 有什麼特點？
第 1 次嘗試 · 已完成 37577ms載入詳情中…
-
案例 6588072C
轉帳支付的銀行是哪一家？
第 1 次嘗試 · 已完成 37294ms載入詳情中…
-
案例 879E25D1
越野胎 DISCOVERER AT3 4S 265/70R15 適合哪些車輛使用？
第 1 次嘗試 · 已完成 70238ms載入詳情中…
-
案例 62EA803A
MATIC DIAFLUID ATF的商場連結是什麼？
第 1 次嘗試 · 已完成 43771ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
90.0%
[70.0% – 100.0%] · n=10
F1 86.7% · 召回 90.0% · 精確 85.0%
10 / 10 適用
用對工具
召回
tool_usage
90.0%
[70.0% – 100.0%] · n=10
F1 90.0% · 召回 90.0% · 精確 90.0%
10 / 10 適用
答得到位
平均
answer_quality
78.3%
[64.3% – 90.3%] · n=10
10 / 10 適用
-
案例 2F712764
越野胎 DISCOVERER AT3 4S 225/70R15 還有貨嗎
第 1 次嘗試 · 已完成 14254ms載入詳情中…
-
案例 B3466744
請問我的車沒有符合建議的輪胎可以裝嗎？
第 1 次嘗試 · 已完成 36151ms載入詳情中…
-
案例 47F9BFF0
我想查詢機油的詳細資訊，能幫我介紹一下嗎？
第 1 次嘗試 · 已完成 45205ms載入詳情中…
-
案例 AC621410
輪胎規格有哪些比較?
第 1 次嘗試 · 已完成 33994ms載入詳情中…
-
案例 855A635F
三菱 DELICA 2016年要用什麼機油?
第 1 次嘗試 · 已完成 17543ms載入詳情中…
-
案例 2854FED8
想知道5W30的油有哪幾種？
第 1 次嘗試 · 已完成 35140ms載入詳情中…
-
案例 0D821AA0
請問HONDA Crv4 2012年份，要用什麼機油?
第 1 次嘗試 · 已完成 19945ms載入詳情中…
-
案例 8AAED663
請問我想查詢一下 5W30 機油的黏度，可以告訴我有哪些選擇嗎？
第 1 次嘗試 · 已完成 24039ms載入詳情中…
-
案例 C490157C
我想知道我的車要怎麼選輪胎？
第 1 次嘗試 · 已完成 20220ms載入詳情中…
-
案例 F3C324D4
請問 Peugeot 308 1.2T 2017年份，要用甚麼機油?
第 1 次嘗試 · 已完成 31394ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
50.0%
[20.0% – 80.0%] · n=10
F1 15.4% · 相關率 34.0% · 精確 49.1%
10 / 10 適用
·
2 提示
不亂編造
平均
faithfulness
83.3%
[50.0% – 100.0%] · n=6
10 / 10 適用
答得到位
平均
answer_quality
82.0%
[65.0% – 98.7%] · n=10
10 / 10 適用
-
案例 3F12CEB9
潤滑油分為哪幾種類型?
第 1 次嘗試 · 已完成 30287ms載入詳情中…
-
案例 C332CEFB
越野胎 DISCOVERER AT3 4S 可以應對什麼地形？
第 1 次嘗試 · 已完成 62027ms載入詳情中…
-
案例 8C939AD5
汽車汽油精可以加在機車嗎?
第 1 次嘗試 · 已完成 20753ms載入詳情中…
-
案例 AF86162B
1桶和2桶的運費差異為什麼?
第 1 次嘗試 · 已完成 54990ms載入詳情中…
-
案例 87535773
四期/五期/六期 20L/208L 可以在哪裡下單?
第 1 次嘗試 · 已完成 22358ms載入詳情中…
-
案例 B4BF42EC
請問 Brio 5W30 全合成油的包裝是什麼形式呢？
第 1 次嘗試 · 已完成 29630ms載入詳情中…
-
案例 0057E289
我怎麼辨識蝦皮上買的機油是不是公司貨?
第 1 次嘗試 · 已完成 40482ms載入詳情中…
-
案例 2F214457
台中有沒有地方可以換moto hmeoc 10w30機油?
第 1 次嘗試 · 已完成 40458ms載入詳情中…
-
案例 2D4B2AE3
你們的官網連結是什麼?
第 1 次嘗試 · 已完成 29844ms載入詳情中…
-
案例 C6BB08B8
力豹樂機油精可以加到CVT變速箱嗎
第 1 次嘗試 · 已完成 20221ms載入詳情中…