執行 #131
HoHo 好服務 (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 11:42
- 耗時
- 474.6s
Cost & Tokens
$0.2534
Total Bot Cost · USD
66.3%
Prompt Cache Hit
- cost per case
- $0.0084
- cost per 1k tokens
- $0.0012
- input tokens
- 212,724
- output tokens
- 4,937
- cached tokens — prompt-cache hit
- 141,056
- Total Tokens
- 217,661
- cost per correct
- $0.0013
- pass rate
- 90.0%
- 27 / 30
- judge cost
- $0.0358
設定快照（reproducibility）
Bot 設定快照
-
a0b5792d-1405-4b79-916e-18ef1911fd60
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
0
14925 ms
$0.2534
217,661
$0.0358
264,349
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 18.2% · 相關率 22.0% · 精確 10.0%
10 / 10 適用
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
98.3%
[96.7% – 99.7%] · n=10
10 / 10 適用
-
案例 1E13BCDF
合作供應商在提供服務當日要怎麼啟用GPS定位？
第 1 次嘗試 · 已完成 15146ms載入詳情中…
-
案例 032A0C49
使用LinePay時，是否必須同意在LINE中開啟頁面？
第 1 次嘗試 · 已完成 10570ms載入詳情中…
-
案例 FB397823
冷氣清洗的抗菌鍍膜到底怎麼抑制細菌和病毒?
第 1 次嘗試 · 已完成 20552ms載入詳情中…
-
案例 2C328EDE
請問整理師會介入搬家協調嗎？
第 1 次嘗試 · 已完成 13799ms載入詳情中…
-
案例 3263CFE1
如果我取消定期到府服務，會不會失去優惠折扣？
第 1 次嘗試 · 已完成 11760ms載入詳情中…
-
案例 47390393
台南市哪些區域無法提供直立洗衣機清洗服務?
第 1 次嘗試 · 已完成 11246ms載入詳情中…
-
案例 67B1E27D
箱子可以親自送去維修嗎
第 1 次嘗試 · 已完成 10047ms載入詳情中…
-
案例 01326BD1
窗簾清潔後多久會結案通知我?
第 1 次嘗試 · 已完成 9796ms載入詳情中…
-
案例 01532D4F
洗衣機的冷水管可以清洗嗎?
第 1 次嘗試 · 已完成 8700ms載入詳情中…
-
案例 1B0951FF
雲端發票中獎可不可以印出來嗎?
第 1 次嘗試 · 已完成 11926ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
80.0%
[50.0% – 100.0%] · n=10
F1 73.3% · 召回 80.0% · 精確 70.0%
10 / 10 適用
用對工具
召回
tool_usage
33.3%
[0.0% – 66.7%] · n=6
F1 40.0% · 召回 37.5% · 精確 66.7%
6 / 10 適用
答得到位
平均
answer_quality
78.3%
[61.0% – 93.7%] · n=10
10 / 10 適用
-
案例 189302D9
到底去哪裡可以留下評價啊？
第 1 次嘗試 · 已完成 9071ms載入詳情中…
-
案例 BF844864
請問如果我今天想要取消訂單，是否需要提前通知？
第 1 次嘗試 · 已完成 13998ms載入詳情中…
-
案例 DD0F23D5
訂單查詢的資訊不完整的時候怎麼處理？
第 1 次嘗試 · 已完成 12049ms載入詳情中…
-
案例 DFEE2115
請問如果無法進入網站或付款失敗，我應該怎麼做呢？
第 1 次嘗試 · 已完成 11376ms載入詳情中…
-
案例 ECEC295F
我想要線上估價，請問需要提供什麼資料嗎？
第 1 次嘗試 · 已完成 11363ms載入詳情中…
-
案例 47D16049
為什麼你們的清潔服務只能用對應的賣場連結？
第 1 次嘗試 · 已完成 14078ms載入詳情中…
-
案例 E27D9B81
現在有什麼優惠活動嗎
第 1 次嘗試 · 已完成 27329ms載入詳情中…
-
案例 FCE0F2FF
我想預約洗冷氣服務，請問有什麼流程？
第 1 次嘗試 · 已完成 13241ms載入詳情中…
-
案例 D436A571
我真的很生氣，這樣的服務品質太誇張了！
第 1 次嘗試 · 已完成 11502ms載入詳情中…
-
案例 EA38EA3B
我這邊依新北市三芝區可以大掃除嗎
第 1 次嘗試 · 已完成 13466ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=8
F1 18.2% · 相關率 16.3% · 精確 10.0%
8 / 10 適用
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
96.3%
[92.7% – 99.3%] · n=10
10 / 10 適用
-
案例 708209F3
鐘點清潔的影片連結是什麼?
第 1 次嘗試 · 已完成 10284ms載入詳情中…
-
案例 83C8876D
請問我可以怎麼搜尋我的訂單詳情？
第 1 次嘗試 · 已完成 15505ms載入詳情中…
-
案例 D446BB0C
我覺得你們的服務很差，怎麼回事啊
第 1 次嘗試 · 已完成 8917ms載入詳情中…
-
案例 C7C8E5CD
若衣物有特殊汙點，會怎麼處理？
第 1 次嘗試 · 已完成 13374ms載入詳情中…
-
案例 901BDC35
清潔人員可以延長服務時間嗎？
第 1 次嘗試 · 已完成 9492ms載入詳情中…
-
案例 27D3DB38
天然或化纖材質的地毯送洗要多久？
第 1 次嘗試 · 已完成 12174ms載入詳情中…
-
案例 6EDCB018
預約為什麼無法進行啊？
第 1 次嘗試 · 已完成 10310ms載入詳情中…
-
案例 1DBE7B66
如果清潔時間不到四小時，怎麼計費?
第 1 次嘗試 · 已完成 9191ms載入詳情中…
-
案例 E255E1F9
HoHo 裝潢清潔的影片可以在 YouTube 找到嗎?
第 1 次嘗試 · 已完成 25788ms載入詳情中…
-
案例 2FA33502
整理師會請我確認淘汰的物品嗎
第 1 次嘗試 · 已完成 10750ms載入詳情中…