流程回放搅拌机
输入快照
{ "jev": { "intent": { "choice": "refund", "confidence": 0.97 }, "urgency": { "score": 0.43 }, "chargeback": { "noul": 0.04 } }, "order": { "amount": "129.00", "days_since_delivery": 1 }, "customer": { "refunds_90d": 0 } }
{"jev":{"intent":{"choice":"refund","confidence":0.97},"urgency":{"score":0.43},"chargeback":{"noul":0.04}},"order":{"amount":"129.00","days_since_delivery":1},"customer":{"refunds_90d":0}}结果码AUTO_REFUND
输出
{"amount":129,"jev_confidence":0.97,"priority":"normal"}Ordo 帮你做三件事
01
模型判断,规则决定
Jev 这类模型读懂客户说的话,给出判断。退不退钱、要不要人工看,和折扣、额度一样写在规则里,业务同事也看得懂。
02
改之前先看影响
调一个门槛之前,先看清哪些决策会跟着变,变成了什么。
03
改完马上生效
规则更新后直接生效。业务系统不用改代码,也不用重新发版。
一个例子
一个写死在代码里的 0.85
客户发来一段话,Jev 判断这是退款请求,把握超过 0.85 就自动退钱。这个 0.85 通常写死在代码里,没人看过,模型一升级,它的意思就变了。
放进 Ordo 之后,有人提议降到 0.80。测试全部通过,Ordo 把改动前后放在一起跑了一遍,发现 18 种情况会从「客服确认」变成「直接退款」。要不要这样改,合并之前就能决定。
模型可以换,也可以升级。退款门槛一直留在 Ordo 里,有测试,也有版本记录。
自动退款门槛0.85→0.80
309 种情况里,21 种结果会变
想退款,把握 0.84,订单 129 元,昨天签收
客服确认→直接退款LLM_DRAFT → AUTO_REFUND
想退款,把握 0.80,订单 39.90 元,前天签收
客服确认→直接退款LLM_DRAFT → AUTO_REFUND
其余 288 种情况不变
| 追踪 | 条件 | 输出 | ||||||
|---|---|---|---|---|---|---|---|---|
| # | 追踪 | INchoicestring $.jev.intent.choice | INconfidencenumber $.jev.intent.confidence | INamountnumber $.order.amount | INdays_since_deliverynumber $.order.days_since_delivery | INrefunds_90dnumber $.customer.refunds_90d | OUTdecisionstring decision | OUTreasonstring reason |
| 输入 | 实际值 | refund | 0.97 | 129.00 | 1 | 0 | AUTO_REFUND | |
| 1 | 未命中 0 in [3, ∞) | *实际值: refund | *实际值: 0.97 | *实际值: 129.00 | *实际值: 1 | [3, ∞)实际值: 0 | HUMAN_REVIEW | repeat_refunds |
| 2 | 未命中 1 in (30, ∞) | *实际值: refund | *实际值: 0.97 | *实际值: 129.00 | (30, ∞)实际值: 1 | *实际值: 0 | HUMAN_REVIEW | outside_window |
| 3 | 命中 全部条件命中 | refund实际值: refund | [0.85, ∞)实际值: 0.97 | (-∞, 200]实际值: 129.00 | *实际值: 1 | *实际值: 0 | AUTO_REFUND | |
| 4 | 未命中 全部条件命中 | refund实际值: refund | [0.85, ∞)实际值: 0.97 | *实际值: 129.00 | *实际值: 1 | *实际值: 0 | HUMAN_REVIEW | amount |
| 5 | 未命中 全部条件命中 | refund实际值: refund | [0.6, ∞)实际值: 0.97 | *实际值: 129.00 | *实际值: 1 | *实际值: 0 | LLM_DRAFT | medium_confidence |
| 6 | 未命中 全部条件命中 | *实际值: refund | *实际值: 0.97 | *实际值: 129.00 | *实际值: 1 | *实际值: 0 | HUMAN_REVIEW | low_confidence |