32✓ / 32✗
| Persona \ 任务 | official_01_feimaotui |
|---|---|
| p01_cooperative_worker |
50.0% 32✓ / 32✗
|
| p02_impatient |
39.7% 25✓ / 38✗
|
| Persona | 策略 | 通过率 | 通过/未通过 |
|---|---|---|---|
| p02_impatient | — |
39.7%
|
25 38 |
| p01_cooperative_worker | — |
50.0%
|
32 32 |
| # | 检查点 | 类型 | 严重度 | 失败次数 | 来源指令 |
|---|---|---|---|---|---|
| 1 | 开场应先称呼骑手姓名并自报站长身份 | flow | critical | 6 | 你好,请问是${rider_name}吗?我是站长。 |
| 2 | 被问及超出职责范围的问题时,必须使用指定话术回应 | constraint | critical | 6 | 如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。" |
| 3 | 开场应提及骑手已报名飞毛腿 | flow | major | 6 | 我看到你已报名飞毛腿。 |
| 4 | 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 | flow | major | 6 | 单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。 |
| 5 | 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 | flow | major | 5 | 单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。 |
| 6 | 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 | flow | major | 5 | 骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。 |
| 7 | 每次回复应控制在约30个字以内,不得过长 | style | major | 5 | 每次回复控制在**约 30 个字以内**。 |
| 8 | 开场应提醒骑手午餐和晚餐高峰期需要上线 | flow | major | 4 | 请记住,午餐和晚餐高峰期需要上线。 |
| 9 | 应提醒骑手注意安全 | flow | minor | 4 | 提醒他们注意安全 |
| 10 | 不得出现重复性回复内容 | forbidden | minor | 4 | 避免重复回复;如需重申,请换种方式礼貌表达。 |
| 11 | 如需重申某内容,应换一种方式礼貌表达,而非直接重复 | style | minor | 4 | 如需重申,请换种方式礼貌表达。 |
| 12 | 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 | flow | major | 3 | 尽量挽留不想配送的骑手,鼓励能配送的骑手 |
| 检查点 | 类型 | 严重度 | 判定 | 置信 | 轨迹 | |
|---|---|---|---|---|---|---|
| ▶ | 不得声称或暗示飞毛腿报名名额由站长决定或干预 | forbidden | critical | 通过 | 100% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
|
||||||
| ▶ | 开场应先称呼骑手姓名并自报站长身份 | flow | critical | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提及骑手已报名飞毛腿 | flow | major | 未通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.6})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提醒骑手午餐和晚餐高峰期需要上线 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.7})
第 4 轮 小李,我理解你的疑虑!你可以在App上查站长信息核实我身份。我打电话是为了提醒你合同生效,别错过今天的高峰期! |
||||||
| ▶ | 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 | flow | major | 未通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.9})
第 2 轮 单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦! |
||||||
| ▶ | 应告知骑手今天飞毛腿合同已生效 | flow | critical | 通过 | 97% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮 今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 应询问骑手是否可以开始配送 | flow | major | 通过 | 92% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮 你今天能出来跑单吗? |
||||||
| ▶ | 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 | flow | major | 未通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.5})
第 2 轮 单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦! |
||||||
| ▶ | 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 | flow | major | 通过 | 75% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.7} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.6})
第 4 轮 我打电话是为了提醒你合同生效,别错过今天的高峰期! |
||||||
| ▶ | 应提醒骑手注意安全 | flow | minor | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.5})
(无引述证据)
|
||||||
| ▶ | 应说明飞毛腿报名是按排名进行的,并非站长干预 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.45})
(无引述证据)
|
||||||
| ▶ | 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.5})
(无引述证据)
|
||||||
| ▶ | 若骑手坚持确实无法配送,应安慰骑手后挂断电话 | flow | critical | 不适用 | 100% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.85})
(无引述证据)
|
||||||
| ▶ | 被问及超出职责范围的问题时,必须使用指定话术回应 | constraint | critical | 未通过 | 92% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.9})
第 6 轮 这个我得确认一下,我查完马上回电给你,你稍等哦!第 8 轮 小李,不好意思!这些具体数字我现在手边没有,我马上查清楚再回电给你,保证给你个准数! |
||||||
| ▶ | 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 | constraint | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.85})
第 2 轮 单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦! |
||||||
| ▶ | 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 | constraint | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.85})
第 2 轮 单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦! |
||||||
| ▶ | 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 | constraint | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9})
第 5 轮 退出的话,要在前一天Z点前,在App"飞毛腿报名"里取消,次日才生效哦! |
||||||
| ▶ | 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 | constraint | minor | 通过 | 85% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.75})
第 7 轮 有的!连续完成W天多日合同,每天达标,就有额外奖励,比单日合同每单多+$元! |
||||||
| ▶ | 若无法连续配送Y天,应告知名额可能被他人占用 | constraint | major | 不适用 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.0} / {'verdict': 'na', 'confidence': 0.9} / {'verdict': 'na', 'confidence': 0.7})
(无引述证据)
|
||||||
| ▶ | 不得出现重复性回复内容 | forbidden | minor | 未通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.9})
第 1 轮 具体日期你可以在App里"飞毛腿报名"那边查看,写得很清楚的第 3 轮 具体单数合同里写得清楚,你在App"飞毛腿报名"里查一下,比我说的准 |
||||||
| ▶ | 语气应随意自然,像打电话一样,避免过于正式或书面化 | style | major | 通过 | 80% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.7})
(无引述证据)
|
||||||
| ▶ | 每次回复应控制在约30个字以内,不得过长 | style | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95})
第 1 轮 具体日期你可以在App里"飞毛腿报名"那边查看,写得很清楚的。你今天能出来跑单吗?第 2 轮 单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦!第 4 轮 小李,我理解你的疑虑!你可以在App上查站长信息核实我身份。我打电话是为了提醒你合同生效,别错过今天的高峰期!第 7 轮 有的!连续完成W天多日合同,每天达标,就有额外奖励,比单日合同每单多+$元!具体金额App里看哦!第 8 轮 小李,不好意思!这些具体数字我现在手边没有,我马上查清楚再回电给你,保证给你个准数! |
||||||
| ▶ | 如需重申某内容,应换一种方式礼貌表达,而非直接重复 | style | minor | 未通过 | 85% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.68} / {'verdict': 'fail', 'confidence': 0.6})
第 1 轮 具体日期你可以在App里"飞毛腿报名"那边查看第 3 轮 具体单数合同里写得清楚,你在App"飞毛腿报名"里查一下 |
||||||
| ▶ | 不得声称或暗示飞毛腿报名名额由站长决定或干预 | forbidden | critical | 通过 | 100% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
|
||||||
| ▶ | 开场应先称呼骑手姓名并自报站长身份 | flow | critical | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提及骑手已报名飞毛腿 | flow | major | 未通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.6})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提醒骑手午餐和晚餐高峰期需要上线 | flow | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮 午餐晚餐高峰期记得上线,能开始配送吗? |
||||||
| ▶ | 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 | flow | major | 未通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.8})
第 1 轮 对,小李!今天单日合同,至少要完成 X 单哦。 |
||||||
| ▶ | 应告知骑手今天飞毛腿合同已生效 | flow | critical | 通过 | 98% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.95})
第 0 轮 今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 应询问骑手是否可以开始配送 | flow | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95})
第 1 轮 能开始配送吗? |
||||||
| ▶ | 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.7})
第 1 轮 对,小李!今天单日合同,至少要完成 X 单哦。午餐晚餐高峰期记得上线,能开始配送吗?第 3 轮 如果今天实在没法送,合同和后续派单都可能受到影响。 |
||||||
| ▶ | 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 | flow | major | 通过 | 82% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.55})
第 1 轮 能开始配送吗?第 3 轮 你大概几点有空?尽量高峰期上一下线! |
||||||
| ▶ | 应提醒骑手注意安全 | flow | minor | 未通过 | 99% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.99} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.6})
(无引述证据)
|
||||||
| ▶ | 应说明飞毛腿报名是按排名进行的,并非站长干预 | flow | major | 通过 | 96% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.96} / {'verdict': 'pass', 'confidence': 0.95})
第 11 轮 系统自动排名的,我说了不算!平时少拒单、少超时、恶劣天气多跑,排名自然靠前!第 12 轮 也是系统自动的,我没法手动调!所以平时表现好,名额才稳! |
||||||
| ▶ | 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 | flow | major | 通过 | 88% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.7})
第 6 轮 平时少拒单、少超时,排名会更好!第 11 轮 平时少拒单、少超时、恶劣天气多跑,排名自然靠前! |
||||||
| ▶ | 若骑手坚持确实无法配送,应安慰骑手后挂断电话 | flow | critical | 不适用 | 99% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.99} / {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'na', 'confidence': 0.8})
(无引述证据)
|
||||||
| ▶ | 被问及超出职责范围的问题时,必须使用指定话术回应 | constraint | critical | 未通过 | 92% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.85})
第 2 轮 不好意思小李,具体单数我需要确认一下,你在App的飞毛腿合同里也能看到,我确认后马上回你!第 8 轮 这个我得确认一下,App里"飞毛腿报名"那里应该有写,我查清楚了马上回你!第 10 轮 哈哈,被你抓到了!这几个数字我都得核实,一起确认好了统一回你,不让你跑空! |
||||||
| ▶ | 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 | constraint | major | 通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮 今天单日合同,至少要完成 X 单哦第 3 轮 如果今天实在没法送,合同和后续派单都可能受到影响 |
||||||
| ▶ | 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 | constraint | major | 不适用 | 88% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.88} / {'verdict': 'na', 'confidence': 0.6})
(无引述证据)
|
||||||
| ▶ | 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 | constraint | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.92})
第 7 轮 不能直接不接单哦!得在App'飞毛腿报名'里取消,要在前一天Z点前操作,次日才生效 |
||||||
| ▶ | 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 | constraint | minor | 通过 | 80% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.72} / {'verdict': 'pass', 'confidence': 0.7})
第 9 轮 有的!连续完成多日合同、每天达标,每单会有额外奖励,具体金额我一并确认后回你! |
||||||
| ▶ | 若无法连续配送Y天,应告知名额可能被他人占用 | constraint | major | 通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.85})
第 6 轮 现在很多骑手都在抢飞毛腿名额,连续几天没送的话,名额很可能就被顶掉了! |
||||||
| ▶ | 不得出现重复性回复内容 | forbidden | minor | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.7})
第 6 轮 可以重新报名的!下次排名靠前还是能抢到,平时少拒单、少超时,排名会更好!第 11 轮 系统自动排名的,我说了不算!平时少拒单、少超时、恶劣天气多跑,排名自然靠前! |
||||||
| ▶ | 语气应随意自然,像打电话一样,避免过于正式或书面化 | style | major | 通过 | 85% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.85})
第 2 轮 不好意思小李,具体单数我需要确认一下第 10 轮 哈哈,被你抓到了!这几个数字我都得核实,一起确认好了统一回你,不让你跑空! |
||||||
| ▶ | 每次回复应控制在约30个字以内,不得过长 | style | major | 未通过 | 99% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.99} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!第 1 轮 对,小李!今天单日合同,至少要完成 X 单哦。午餐晚餐高峰期记得上线,能开始配送吗?第 2 轮 不好意思小李,具体单数我需要确认一下,你在App的飞毛腿合同里也能看到,我确认后马上回你!第 3 轮 如果今天实在没法送,合同和后续派单都可能受到影响。你大概几点有空?尽量高峰期上一下线! |
||||||
| ▶ | 如需重申某内容,应换一种方式礼貌表达,而非直接重复 | style | minor | 未通过 | 92% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.55})
第 6 轮 可以重新报名的!下次排名靠前还是能抢到,平时少拒单、少超时,排名会更好!第 11 轮 系统自动排名的,我说了不算!平时少拒单、少超时、恶劣天气多跑,排名自然靠前! |
||||||
| ▶ | 不得声称或暗示飞毛腿报名名额由站长决定或干预 | forbidden | critical | 通过 | 100% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
|
||||||
| ▶ | 开场应先称呼骑手姓名并自报站长身份 | flow | critical | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.9})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊! |
||||||
| ▶ | 开场应提及骑手已报名飞毛腿 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.55})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊! |
||||||
| ▶ | 开场应提醒骑手午餐和晚餐高峰期需要上线 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.9})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊! |
||||||
| ▶ | 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.5})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊! |
||||||
| ▶ | 应告知骑手今天飞毛腿合同已生效 | flow | critical | 通过 | 100% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 1.0} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮 今天你的飞毛腿合同已经生效了,恭喜啊! |
||||||
| ▶ | 应询问骑手是否可以开始配送 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
(无引述证据)
|
||||||
| ▶ | 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 | flow | major | 未通过 | 92% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.55})
第 1 轮 今天是单日合同的话,你需要完成 X 单,记得在午餐晚餐高峰期保持在线哦!第 6 轮 连续完成 W 天多日合同、每天达到 Y 单,就有额外奖励,比单日合同每单多 +$ 元,很划算的! |
||||||
| ▶ | 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 | flow | major | 未通过 | 88% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.7})
第 9 轮 没事的,理解你,保重身体要紧!有空再努力冲单,注意安全,拜拜! |
||||||
| ▶ | 应提醒骑手注意安全 | flow | minor | 通过 | 98% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.95})
第 9 轮 注意安全,拜拜! |
||||||
| ▶ | 应说明飞毛腿报名是按排名进行的,并非站长干预 | flow | major | 通过 | 97% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.95})
第 3 轮 名额这个我没办法帮你留,飞毛腿是按排名系统自动分配的,站长这边干预不了的。 |
||||||
| ▶ | 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 | flow | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.5})
(无引述证据)
|
||||||
| ▶ | 若骑手坚持确实无法配送,应安慰骑手后挂断电话 | flow | critical | 通过 | 93% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.93} / {'verdict': 'pass', 'confidence': 0.92})
第 9 轮 没事的,理解你,保重身体要紧!有空再努力冲单,注意安全,拜拜! |
||||||
| ▶ | 被问及超出职责范围的问题时,必须使用指定话术回应 | constraint | critical | 未通过 | 82% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.7} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'fail', 'confidence': 0.7})
第 8 轮 申诉这块我得跟同事确认一下再回电给你,但今天合同影响肯定是有的,建议尽量安排一下! |
||||||
| ▶ | 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 | constraint | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92})
第 1 轮 今天是单日合同的话,你需要完成 **X 单**,记得在午餐晚餐高峰期保持在线哦!第 2 轮 完不成的话,当天合同和后续派单都可能受影响,所以尽量冲一下哈! |
||||||
| ▶ | 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 | constraint | major | 不适用 | 80% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.6})
(无引述证据)
|
||||||
| ▶ | 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 | constraint | major | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95})
第 5 轮 退出的话,要在**前一天 Z 点之前**,在 App 的"飞毛腿报名"里取消,次日才会生效哦。 |
||||||
| ▶ | 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 | constraint | minor | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92})
第 6 轮 连续完成 **W 天**多日合同、每天达到 **Y 单**,就有额外奖励,比单日合同每单多 +$ 元,很划算的! |
||||||
| ▶ | 若无法连续配送Y天,应告知名额可能被他人占用 | constraint | major | 未通过 | 85% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'na', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.6})
第 3 轮 名额这个我没办法帮你留,飞毛腿是按排名系统自动分配的,站长这边干预不了的。 |
||||||
| ▶ | 不得出现重复性回复内容 | forbidden | minor | 通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.6})
(无引述证据)
|
||||||
| ▶ | 语气应随意自然,像打电话一样,避免过于正式或书面化 | style | major | 通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.9})
第 2 轮 完不成的话,当天合同和后续派单都可能受影响,所以尽量冲一下哈!第 9 轮 没事的,理解你,保重身体要紧!有空再努力冲单,注意安全,拜拜! |
||||||
| ▶ | 每次回复应控制在约30个字以内,不得过长 | style | major | 未通过 | 95% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 1 轮 今天是单日合同的话,你需要完成 X 单,记得在午餐晚餐高峰期保持在线哦!第 3 轮 名额这个我没办法帮你留,飞毛腿是按排名系统自动分配的,站长这边干预不了的。第 4 轮 你可以在咱们外卖 App 里查飞毛腿合同详情,信息都在上面,或者你打站点电话核实也行。第 5 轮 退出的话,要在前一天 Z 点之前,在 App 的飞毛腿报名里取消,次日才会生效哦。第 6 轮 连续完成 W 天多日合同、每天达到 Y 单,就有额外奖励,比单日合同每单多 +$ 元,很划算的!第 8 轮 申诉这块我得跟同事确认一下再回电给你,但今天合同影响肯定是有的,建议尽量安排一下! |
||||||
| ▶ | 如需重申某内容,应换一种方式礼貌表达,而非直接重复 | style | minor | 通过 | 90% | official_01_feimaotui · p01_cooperative_worker |
|
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.6})
(无引述证据)
|
||||||
| ▶ | 不得声称或暗示飞毛腿报名名额由站长决定或干预 | forbidden | critical | 通过 | 100% | official_01_feimaotui · p02_impatient |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
|
||||||
| ▶ | 开场应先称呼骑手姓名并自报站长身份 | flow | critical | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.55})
第 0 轮 你好,请问是飞毛腿吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提及骑手已报名飞毛腿 | flow | major | 未通过 | 90% | official_01_feimaotui · p02_impatient |
|
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.5})
第 0 轮 你好,请问是飞毛腿吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提醒骑手午餐和晚餐高峰期需要上线 | flow | major | 未通过 | 88% | official_01_feimaotui · p02_impatient |
|
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.5})
第 1 轮 记得高峰期要上线 |
||||||
| ▶ | 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 | flow | major | 通过 | 92% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.7} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92})
第 2 轮 单日合同今天至少完成X单,多日合同每天Y单,记住了吗? |
||||||
| ▶ | 应告知骑手今天飞毛腿合同已生效 | flow | critical | 通过 | 99% | official_01_feimaotui · p02_impatient |
|
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.99} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.95})
第 0 轮 你好,请问是飞毛腿吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 应询问骑手是否可以开始配送 | flow | major | 通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.85})
第 1 轮 好嘞!今天合同生效,记得高峰期要上线,单子要完成够数,你今天能出来跑吗? |
||||||
| ▶ | 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 | flow | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.55})
第 2 轮 单日合同今天至少完成X单,多日合同每天Y单,记住了吗? |
||||||
| ▶ | 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 | flow | major | 通过 | 80% | official_01_feimaotui · p02_impatient |
|
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.8})
第 6 轮 连续完成W天多日合同、每天够Y单,比单日合同每单多+$,值得冲! |
||||||
| ▶ | 应提醒骑手注意安全 | flow | minor | 通过 | 98% | official_01_feimaotui · p02_impatient |
|
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.97})
第 9 轮 你跑单注意安全,有消息我马上联系你。 |
||||||
| ▶ | 应说明飞毛腿报名是按排名进行的,并非站长干预 | flow | major | 通过 | 97% | official_01_feimaotui · p02_impatient |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.95})
第 4 轮 名额是系统按排名自动分的,我没法干预,你得自己少拒单、少超时,排名高才能保住。 |
||||||
| ▶ | 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 | flow | major | 未通过 | 90% | official_01_feimaotui · p02_impatient |
|
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.6})
第 4 轮 你得自己少拒单、少超时,排名高才能保住。 |
||||||
| ▶ | 若骑手坚持确实无法配送,应安慰骑手后挂断电话 | flow | critical | 不适用 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
|
||||||
| ▶ | 被问及超出职责范围的问题时,必须使用指定话术回应 | constraint | critical | 未通过 | 85% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.55})
第 7 轮 这个我得跟同事确认一下再回电给你,上次奖励没到账的事我帮你查查!第 8 轮 这个我真不敢乱说,说错了坑你。我马上查清楚第一时间回你,行吗? |
||||||
| ▶ | 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 | constraint | major | 通过 | 92% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92})
第 2 轮 单日合同今天至少完成X单第 3 轮 跑不够的话,合同和后续派单都会受影响,严重的话资格也可能没了。 |
||||||
| ▶ | 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 | constraint | major | 通过 | 90% | official_01_feimaotui · p02_impatient |
|
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.9})
第 2 轮 多日合同每天Y单第 3 轮 跑不够的话,合同和后续派单都会受影响,严重的话资格也可能没了 |
||||||
| ▶ | 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 | constraint | major | 通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95})
第 5 轮 退出的话,前一天Z点前在App"飞毛腿报名"里自己取消,次日生效 |
||||||
| ▶ | 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 | constraint | minor | 通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92})
第 6 轮 连续完成W天多日合同、每天够Y单,比单日合同每单多+$,值得冲! |
||||||
| ▶ | 若无法连续配送Y天,应告知名额可能被他人占用 | constraint | major | 未通过 | 82% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'fail', 'confidence': 0.6})
第 4 轮 名额是系统按排名自动分的,我没法干预,你得自己少拒单、少超时,排名高才能保住。 |
||||||
| ▶ | 不得出现重复性回复内容 | forbidden | minor | 通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.72} / {'verdict': 'pass', 'confidence': 0.62})
(无引述证据)
|
||||||
| ▶ | 语气应随意自然,像打电话一样,避免过于正式或书面化 | style | major | 通过 | 92% | official_01_feimaotui · p02_impatient |
|
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.92})
第 1 轮 好嘞!今天合同生效,记得高峰期要上线第 6 轮 比单日合同每单多+$,值得冲!第 8 轮 这个我真不敢乱说,说错了坑你。 |
||||||
| ▶ | 每次回复应控制在约30个字以内,不得过长 | style | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.7})
第 1 轮 好嘞!今天合同生效,记得高峰期要上线,单子要完成够数,你今天能出来跑吗?第 4 轮 名额是系统按排名自动分的,我没法干预,你得自己少拒单、少超时,排名高才能保住。第 6 轮 连续完成W天多日合同、每天够Y单,比单日合同每单多+$,值得冲!第 7 轮 这个我得跟同事确认一下再回电给你,上次奖励没到账的事我帮你查查!第 8 轮 这个我真不敢乱说,说错了坑你。我马上查清楚第一时间回你,行吗? |
||||||
| ▶ | 如需重申某内容,应换一种方式礼貌表达,而非直接重复 | style | minor | 通过 | 90% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.78})
(无引述证据)
|
||||||
| ▶ | 不得声称或暗示飞毛腿报名名额由站长决定或干预 | forbidden | critical | 通过 | 100% | official_01_feimaotui · p02_impatient |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
|
||||||
| ▶ | 开场应先称呼骑手姓名并自报站长身份 | flow | critical | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长 |
||||||
| ▶ | 开场应提及骑手已报名飞毛腿 | flow | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.75})
(无引述证据)
|
||||||
| ▶ | 开场应提醒骑手午餐和晚餐高峰期需要上线 | flow | major | 通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.95})
第 1 轮 午餐晚餐高峰期记得上线 |
||||||
| ▶ | 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 | flow | major | 未通过 | 97% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.85})
第 2 轮 单日合同当天要完成 X 单,多日是每天 Y 单第 3 轮 这个我待会儿确认一下具体数字再告诉你 |
||||||
| ▶ | 应告知骑手今天飞毛腿合同已生效 | flow | critical | 通过 | 99% | official_01_feimaotui · p02_impatient |
|
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.99} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮 今天你的飞毛腿合同已经生效啦! |
||||||
| ▶ | 应询问骑手是否可以开始配送 | flow | major | 通过 | 92% | official_01_feimaotui · p02_impatient |
|
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.7})
第 1 轮 能跑起来吗? |
||||||
| ▶ | 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 | flow | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.55})
第 2 轮 单日合同当天要完成 X 单,多日是每天 Y 单,记得高峰期上线哦! |
||||||
| ▶ | 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 | flow | major | 未通过 | 88% | official_01_feimaotui · p02_impatient |
|
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.5})
第 1 轮 今天单日合同要完成规定单数哦,午餐晚餐高峰期记得上线,能跑起来吗? |
||||||
| ▶ | 应提醒骑手注意安全 | flow | minor | 未通过 | 97% | official_01_feimaotui · p02_impatient |
|
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'na', 'confidence': 0.5})
(无引述证据)
|
||||||
| ▶ | 应说明飞毛腿报名是按排名进行的,并非站长干预 | flow | major | 未通过 | 97% | official_01_feimaotui · p02_impatient |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
|
||||||
| ▶ | 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 | flow | major | 未通过 | 97% | official_01_feimaotui · p02_impatient |
|
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.55})
(无引述证据)
|
||||||
| ▶ | 若骑手坚持确实无法配送,应安慰骑手后挂断电话 | flow | critical | 不适用 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.9})
第 1 轮 能跑,没问题。你直接说今天得完成几单? |
||||||
| ▶ | 被问及超出职责范围的问题时,必须使用指定话术回应 | constraint | critical | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 3 轮 这个我待会儿确认一下具体数字再告诉你,但高峰期一定要上线哈! |
||||||
| ▶ | 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 | constraint | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.8})
第 2 轮 单日合同当天要完成 X 单 |
||||||
| ▶ | 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 | constraint | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'fail', 'confidence': 0.78})
第 2 轮 多日是每天 Y 单 |
||||||
| ▶ | 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 | constraint | major | 不适用 | 100% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
|
||||||
| ▶ | 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 | constraint | minor | 不适用 | 100% | official_01_feimaotui · p02_impatient |
|
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
|
||||||
| ▶ | 若无法连续配送Y天,应告知名额可能被他人占用 | constraint | major | 不适用 | 100% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
|
||||||
| ▶ | 不得出现重复性回复内容 | forbidden | minor | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.85})
第 1 轮 午餐晚餐高峰期记得上线第 2 轮 记得高峰期上线哦第 3 轮 高峰期一定要上线哈 |
||||||
| ▶ | 语气应随意自然,像打电话一样,避免过于正式或书面化 | style | major | 通过 | 80% | official_01_feimaotui · p02_impatient |
|
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.8})
第 1 轮 今天单日合同要完成规定单数哦,午餐晚餐高峰期记得上线,能跑起来吗?第 3 轮 这个我待会儿确认一下具体数字再告诉你,但高峰期一定要上线哈! |
||||||
| ▶ | 每次回复应控制在约30个字以内,不得过长 | style | major | 通过 | 80% | official_01_feimaotui · p02_impatient |
|
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.6})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效啦!第 1 轮 今天单日合同要完成规定单数哦,午餐晚餐高峰期记得上线,能跑起来吗?第 2 轮 单日合同当天要完成 X 单,多日是每天 Y 单,记得高峰期上线哦!第 3 轮 这个我待会儿确认一下具体数字再告诉你,但高峰期一定要上线哈! |
||||||
| ▶ | 如需重申某内容,应换一种方式礼貌表达,而非直接重复 | style | minor | 未通过 | 90% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.55})
第 1 轮 午餐晚餐高峰期记得上线第 2 轮 记得高峰期上线哦第 3 轮 高峰期一定要上线哈 |
||||||
| ▶ | 不得声称或暗示飞毛腿报名名额由站长决定或干预 | forbidden | critical | 通过 | 100% | official_01_feimaotui · p02_impatient |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
|
||||||
| ▶ | 开场应先称呼骑手姓名并自报站长身份 | flow | critical | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提及骑手已报名飞毛腿 | flow | major | 未通过 | 85% | official_01_feimaotui · p02_impatient |
|
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.5})
第 0 轮 你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 开场应提醒骑手午餐和晚餐高峰期需要上线 | flow | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.55})
第 1 轮 总之今天要全天在线,高峰期别掉线! |
||||||
| ▶ | 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 | flow | major | 未通过 | 97% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.95})
第 1 轮 今天单日合同要完成规定单数,完不成会影响后续派单第 2 轮 具体单数我再确认一下,稍后回电告诉你第 5 轮 多日合同每天也有规定单数,具体数字我一并确认后回你 |
||||||
| ▶ | 应告知骑手今天飞毛腿合同已生效 | flow | critical | 通过 | 99% | official_01_feimaotui · p02_impatient |
|
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.99} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮 今天你的飞毛腿合同已经生效了! |
||||||
| ▶ | 应询问骑手是否可以开始配送 | flow | major | 通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮 你今天能出来跑吗? |
||||||
| ▶ | 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 | flow | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.6})
第 1 轮 今天单日合同要完成规定单数,完不成会影响后续派单第 5 轮 多日合同每天也有规定单数,具体数字我一并确认后回你 |
||||||
| ▶ | 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 | flow | major | 未通过 | 90% | official_01_feimaotui · p02_impatient |
|
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.5})
第 1 轮 用户说能跑能跑,客服未给予鼓励,直接转向单数确认第 9 轮 用户问如何退出飞毛腿,客服未尽力挽留,直接说在App里取消 |
||||||
| ▶ | 应提醒骑手注意安全 | flow | minor | 未通过 | 98% | official_01_feimaotui · p02_impatient |
|
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.98} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.75})
(无引述证据)
|
||||||
| ▶ | 应说明飞毛腿报名是按排名进行的,并非站长干预 | flow | major | 通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.95})
第 12 轮 系统按排名自动分配的,我们站长没法干预,靠你自己少拒单、少超时 |
||||||
| ▶ | 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 | flow | major | 未通过 | 85% | official_01_feimaotui · p02_impatient |
|
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.55})
第 12 轮 靠你自己少拒单、少超时 |
||||||
| ▶ | 若骑手坚持确实无法配送,应安慰骑手后挂断电话 | flow | critical | 不适用 | 100% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
|
||||||
| ▶ | 被问及超出职责范围的问题时,必须使用指定话术回应 | constraint | critical | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9})
第 2 轮 具体单数我再确认一下,稍后回电告诉你。第 8 轮 具体金额我手头没数据,但加钱是真的有,我确认完马上告诉你,不拖!第 10 轮 具体几点我去确认,一并回你! |
||||||
| ▶ | 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 | constraint | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.8})
第 1 轮 今天单日合同要完成规定单数,完不成会影响后续派单第 2 轮 具体单数我再确认一下,稍后回电告诉你。 |
||||||
| ▶ | 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 | constraint | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.8})
第 5 轮 多日合同每天也有规定单数,具体数字我一并确认后回你,一个电话说清楚! |
||||||
| ▶ | 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 | constraint | major | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.65})
第 9 轮 要退的话,在App"飞毛腿报名"里取消,要在前一天规定时间前操作,次日生效!第 10 轮 具体几点我去确认,一并回你! |
||||||
| ▶ | 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 | constraint | minor | 未通过 | 90% | official_01_feimaotui · p02_impatient |
|
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.75})
第 7 轮 有奖励!连续跑满多日合同,每单比单日多加钱,我确认具体金额一起回你! |
||||||
| ▶ | 若无法连续配送Y天,应告知名额可能被他人占用 | constraint | major | 未通过 | 75% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.5})
第 5 轮 多日合同每天也有规定单数,具体数字我一并确认后回你,一个电话说清楚! |
||||||
| ▶ | 不得出现重复性回复内容 | forbidden | minor | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.95})
第 3 轮 我确认单数后马上回你!第 4 轮 我确认完细节马上回你,放心!第 5 轮 具体数字我一并确认后回你,一个电话说清楚!第 8 轮 我确认完马上告诉你,不拖!第 2 轮 高峰期别掉线!第 6 轮 今天高峰期记得在线!第 11 轮 今天高峰期记得上线! |
||||||
| ▶ | 语气应随意自然,像打电话一样,避免过于正式或书面化 | style | major | 通过 | 85% | official_01_feimaotui · p02_impatient |
|
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.85})
第 6 轮 你说得对,不好意思!第 8 轮 兄弟我理解你 |
||||||
| ▶ | 每次回复应控制在约30个字以内,不得过长 | style | major | 未通过 | 98% | official_01_feimaotui · p02_impatient |
|
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.98} / {'verdict': 'fail', 'confidence': 0.93} / {'verdict': 'fail', 'confidence': 0.85})
第 1 轮 今天单日合同要完成规定单数,完不成会影响后续派单,你今天能出来跑吗?第 2 轮 具体单数我再确认一下,稍后回电告诉你。总之今天要全天在线,高峰期别掉线!第 3 轮 没完成的话,合同会受影响,后续派单也可能减少。我确认单数后马上回你!第 4 轮 主要影响近期派单,不是永久的。我确认完细节马上回你,放心!第 5 轮 多日合同每天也有规定单数,具体数字我一并确认后回你,一个电话说清楚!第 6 轮 你说得对,不好意思!我马上去核实,确认完立刻回你,耽误不了你出单,今天高峰期记得在线!第 7 轮 有奖励!连续跑满多日合同,每单比单日多加钱,我确认具体金额一起回你! |
||||||
| ▶ | 如需重申某内容,应换一种方式礼貌表达,而非直接重复 | style | minor | 未通过 | 95% | official_01_feimaotui · p02_impatient |
|
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.9})
第 2 轮 高峰期别掉线!第 6 轮 今天高峰期记得在线!第 11 轮 今天高峰期记得上线!第 3 轮 我确认单数后马上回你!第 4 轮 我确认完细节马上回你,放心!第 5 轮 具体数字我一并确认后回你,一个电话说清楚!第 8 轮 我确认完马上告诉你,不拖! |
||||||