執行 #274
nu9 AI 小幫手 (bulk R1) → production-canary (canary)
- 狀態
- 執行中
- 案例
- 15
- 開始時間
- 16 May 12:52
- 耗時
- —
Cost & Tokens
$0.0611
Total Bot Cost · USD
60.0%
Prompt Cache Hit
- cost per case
- $0.0056
- cost per 1k tokens
- $0.0013
- input tokens
- 43,757
- output tokens
- 1,616
- cached tokens — prompt-cache hit
- 26,240
- Total Tokens
- 45,373
- cost per correct
- $0.0011
- pass rate
- 90.0%
- 9 / 10
- judge cost
- $0.0095
設定快照(reproducibility)
Bot 設定快照
-
c177e40e-8e60-42a0-bf90-472ad1969cdb
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
11 / 15
0
3
8986 ms
$0.0611
45,373
$0.0095
72,825
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=6
F1 33.3% · 相關率 26.7% · 精確 20.0%
7 / 7 適用
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=6
7 / 7 適用
答得到位
平均
answer_quality
97.2%
[92.8% – 100.0%] · n=6
7 / 7 適用
-
案例 010E1030
請問呼叫小編服務後要多久才會聯絡我?
第 1 次嘗試 · 已完成 34723ms載入詳情中…
-
案例 2370ADE5
平口或桃心領婚紗適合搭配什麼內衣?
第 1 次嘗試 · 已完成 33197ms載入詳情中…
-
案例 88A14E99
升級為VIP會員後優惠是什麼
第 1 次嘗試 · 已完成 25064ms載入詳情中…
-
案例 2D453010
運動系列預購商品下單後幾天出貨?
第 1 次嘗試 · 已完成 32781ms載入詳情中…
-
案例 4D5527A3
這個隱形胸托是獨家的嗎
第 1 次嘗試 · 已完成 39067ms載入詳情中…
-
案例 3AD70BE7
上下胸圍差 18–20 cm 對應的罩杯是什麼?
第 1 次嘗試 · 已完成 31204ms載入詳情中…
-
案例 7DC334C6
NuBra 是用什麼材質的?
第 1 次嘗試 · 執行中載入詳情中…
-
案例 692272C4
nu9 是什麼品牌?
等候 orchestrator 處理此案例…
-
案例 244777EE
加入nu9會員可以獲得多少首購禮?
等候 orchestrator 處理此案例…
-
案例 9EB1B23A
請問我可以私訊預約試穿嗎?
等候 orchestrator 處理此案例…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
66.7%
[0.0% – 100.0%] · n=3
F1 66.7% · 召回 66.7% · 精確 66.7%
5 / 5 適用
用對工具
召回
tool_usage
66.7%
[0.0% – 100.0%] · n=3
F1 66.7% · 召回 66.7% · 精確 100.0%
5 / 5 適用
答得到位
平均
answer_quality
56.7%
[26.7% – 86.7%] · n=2
5 / 5 適用
-
案例 1FC0A104
你們的官網和社群媒體資訊是什麼?
第 1 次嘗試 · 已完成 35867ms載入詳情中…
-
案例 E2BF86C4
請問貴公司的營業時間是什麼時候?
第 1 次嘗試 · 已完成 31709ms載入詳情中…
-
案例 FBA47660
內衣尺寸怎麼選?
第 1 次嘗試 · 已完成 29862ms載入詳情中…
-
案例 05C230BB
我想查詢訂單,但找不到相關資料,該怎麼辦?
第 1 次嘗試 · 執行中載入詳情中…
-
案例 EC2FFE28
查詢訂單要提供什麼資訊啊?
第 1 次嘗試 · 執行中載入詳情中…
-
案例 8D9F10C8
請問下圍的測量單位可以是公分或英吋嗎?
等候 orchestrator 處理此案例…
-
案例 136CEEF9
選擇NuBra尺寸需要怎麼測量?
等候 orchestrator 處理此案例…
-
案例 43735B10
我最近體重變化了,內衣尺寸會不會需要重新測量?
等候 orchestrator 處理此案例…
-
案例 F2674303
我想知道內衣尺寸怎麼選,哪裡可以查對照表?
等候 orchestrator 處理此案例…
-
案例 182FEC83
我的訂單編號是ABC123,請幫我查詢一下。
等候 orchestrator 處理此案例…
對話素養(混合問答)
對話素養(混合問答)
維度總表
找對資料
召回
retrieval
100.0%
F1 33.3% · 相關率 20.0% · 精確 20.0%
2 / 3 適用
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=2
3 / 3 適用
答得到位
平均
answer_quality
100.0%
[100.0% – 100.0%] · n=2
3 / 3 適用
-
案例 E4813072
實體專櫃有什麼商品啊
第 1 次嘗試 · 執行中載入詳情中…
-
案例 CFD3D00F
內衣尺寸要怎麼選啊
第 1 次嘗試 · 已完成 24408ms載入詳情中…
-
案例 CDAA83EE
運動系列下單後幾天出貨?
第 1 次嘗試 · 已完成 31026ms載入詳情中…
-
案例 49B0FAEB
請問矽膠款式內衣適合哪種婚紗穿搭?
等候 orchestrator 處理此案例…
-
案例 F711D101
nu9絕世好波這個品牌是怎麼來的?
等候 orchestrator 處理此案例…
-
案例 2AAB6F45
你們有什麼運送選擇嗎?
等候 orchestrator 處理此案例…
-
案例 FF358877
nu9品牌的故事是什麼?
等候 orchestrator 處理此案例…
-
案例 85C7F613
NuBra 是什麼材質做的啊?
等候 orchestrator 處理此案例…
-
案例 AC5B28AA
最近有聽說詐騙問題,這邊有做什麼防範嗎?
等候 orchestrator 處理此案例…
-
案例 77DE7311
E、F、G尺碼的隱形內衣可以穿露肩服裝嗎?
等候 orchestrator 處理此案例…