EvalCall 评测报告
外呼对话模型 · 指令遵循自动评测
57
通过
70
未通过
11
不适用
0.0
综合得分(critical 一票否决;否决前原始分 46.0) · 通过率 44.9%
⚠ 0 分主因:指令缺陷(可行性分 0/100,非模型能力,详见下方)
⛔ 检出 12 项 critical 级违规(一票否决该项满分) · 约束违反共 19 项
⚠️ 指令体检警示(归因提示):本任务指令的可行性分仅 0/100(检出 11 项缺陷;conflict:Opening Line 本身约80字,依次包含身份确认、飞毛腿报名确认、高峰上线提醒、单日合同单量、多日合同单量五项信息。仅"你好,请问是XXX吗?我是站长。"一句已占用约15字,剩余额度不足以承载另外四项。30字上限与该开场白存在量级级;conflict:Call Flow第2步要求执行者告知骑手"单日合同需要连续Y天完成配送",而Knowledge Points明确写明"单日合同在生效当天完成X单即可"。两者对同一合同类型的履约周期定义直接矛盾:一个是多天连续,一个是仅当天。执行者无论遵循;infeasible:指令全文中X、Y、Z、W、$均为未填充的占位符,指令本身既未给出实际数值,也未注明"由系统在调用前注入"。执行时模型只能原样输出"X单""Y单""Z点""W天""+$元"等字面量,骑手听到后完全无法理解具体要求,通知目的彻底失败。该问题覆盖)。 指令存在不可行/自相矛盾约束时,模型必然违规——本报告的低分应主要归因于指令缺陷而非模型能力。建议先按体检建议修复指令,再以本报告作为模型能力结论。
运行 ID 5944bf90f8a8 生成时间 2026-06-06 20:34:56 任务 1 Persona 2 轨迹 6 检查点判定 138

四维能力画像

流程完整度 37.3% 约束遵循率 50.0% 异常处理 66.7% 话术合规 50.0%
流程完整度37.3%
通过 25 / 共 67 · 未通过 42
约束遵循率50.0%
通过 15 / 共 30 · 未通过 15
异常处理66.7%
通过 8 / 共 12 · 未通过 4
话术合规50.0%
通过 9 / 共 18 · 未通过 9

Persona × 任务 通过率热力图

Persona \ 任务 official_01_feimaotui
p01_cooperative_worker
50.0%
32✓ / 32✗
p02_impatient
39.7%
25✓ / 38✗
颜色越绿通过率越高,越红越低。✓ 通过数 / ✗ 未通过数。

Persona 维度切片(按通过率升序)

Persona策略通过率通过/未通过
p02_impatient —
39.7%
25 38
p01_cooperative_worker —
50.0%
32 32

高频失败检查点 TOP

#检查点类型严重度失败次数来源指令
1 开场应先称呼骑手姓名并自报站长身份 flow critical 6 你好,请问是${rider_name}吗?我是站长。
2 被问及超出职责范围的问题时,必须使用指定话术回应 constraint critical 6 如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
3 开场应提及骑手已报名飞毛腿 flow major 6 我看到你已报名飞毛腿。
4 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 flow major 6 单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
5 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 flow major 5 单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
6 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 flow major 5 骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
7 每次回复应控制在约30个字以内,不得过长 style major 5 每次回复控制在**约 30 个字以内**。
8 开场应提醒骑手午餐和晚餐高峰期需要上线 flow major 4 请记住,午餐和晚餐高峰期需要上线。
9 应提醒骑手注意安全 flow minor 4 提醒他们注意安全
10 不得出现重复性回复内容 forbidden minor 4 避免重复回复;如需重申,请换种方式礼貌表达。
11 如需重申某内容,应换一种方式礼貌表达,而非直接重复 style minor 4 如需重申,请换种方式礼貌表达。
12 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 flow major 3 尽量挽留不想配送的骑手,鼓励能配送的骑手

逐检查点判定明细 · 可解释证据

检查点类型严重度判定置信轨迹
▶ 不得声称或暗示飞毛腿报名名额由站长决定或干预 forbidden critical 通过 100% official_01_feimaotui · p01_cooperative_worker
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
▶ 开场应先称呼骑手姓名并自报站长身份 flow critical 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提及骑手已报名飞毛腿 flow major 未通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.6})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提醒骑手午餐和晚餐高峰期需要上线 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.7})
第 4 轮
小李,我理解你的疑虑!你可以在App上查站长信息核实我身份。我打电话是为了提醒你合同生效,别错过今天的高峰期!
▶ 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 flow major 未通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.9})
第 2 轮
单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦!
▶ 应告知骑手今天飞毛腿合同已生效 flow critical 通过 97% official_01_feimaotui · p01_cooperative_worker
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮
今天你的飞毛腿合同已经生效了!
▶ 应询问骑手是否可以开始配送 flow major 通过 92% official_01_feimaotui · p01_cooperative_worker
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮
你今天能出来跑单吗?
▶ 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 flow major 未通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.5})
第 2 轮
单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦!
▶ 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 flow major 通过 75% official_01_feimaotui · p01_cooperative_worker
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.7} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.6})
第 4 轮
我打电话是为了提醒你合同生效,别错过今天的高峰期!
▶ 应提醒骑手注意安全 flow minor 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.5})
(无引述证据)
▶ 应说明飞毛腿报名是按排名进行的,并非站长干预 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.45})
(无引述证据)
▶ 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.5})
(无引述证据)
▶ 若骑手坚持确实无法配送,应安慰骑手后挂断电话 flow critical 不适用 100% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.85})
(无引述证据)
▶ 被问及超出职责范围的问题时,必须使用指定话术回应 constraint critical 未通过 92% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.9})
第 6 轮
这个我得确认一下,我查完马上回电给你,你稍等哦!
第 8 轮
小李,不好意思!这些具体数字我现在手边没有,我马上查清楚再回电给你,保证给你个准数!
▶ 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 constraint major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.85})
第 2 轮
单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦!
▶ 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 constraint major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.85})
第 2 轮
单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦!
▶ 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 constraint major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9})
第 5 轮
退出的话,要在前一天Z点前,在App"飞毛腿报名"里取消,次日才生效哦!
▶ 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 constraint minor 通过 85% official_01_feimaotui · p01_cooperative_worker
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.75})
第 7 轮
有的!连续完成W天多日合同,每天达标,就有额外奖励,比单日合同每单多+$元!
▶ 若无法连续配送Y天,应告知名额可能被他人占用 constraint major 不适用 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.0} / {'verdict': 'na', 'confidence': 0.9} / {'verdict': 'na', 'confidence': 0.7})
(无引述证据)
▶ 不得出现重复性回复内容 forbidden minor 未通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.9})
第 1 轮
具体日期你可以在App里"飞毛腿报名"那边查看,写得很清楚的
第 3 轮
具体单数合同里写得清楚,你在App"飞毛腿报名"里查一下,比我说的准
▶ 语气应随意自然,像打电话一样,避免过于正式或书面化 style major 通过 80% official_01_feimaotui · p01_cooperative_worker
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.7})
(无引述证据)
▶ 每次回复应控制在约30个字以内,不得过长 style major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95})
第 1 轮
具体日期你可以在App里"飞毛腿报名"那边查看,写得很清楚的。你今天能出来跑单吗?
第 2 轮
单日合同今天至少完成X单,多日合同每天至少Y单,缺了的话合同和派单都会受影响哦!
第 4 轮
小李,我理解你的疑虑!你可以在App上查站长信息核实我身份。我打电话是为了提醒你合同生效,别错过今天的高峰期!
第 7 轮
有的!连续完成W天多日合同,每天达标,就有额外奖励,比单日合同每单多+$元!具体金额App里看哦!
第 8 轮
小李,不好意思!这些具体数字我现在手边没有,我马上查清楚再回电给你,保证给你个准数!
▶ 如需重申某内容,应换一种方式礼貌表达,而非直接重复 style minor 未通过 85% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.68} / {'verdict': 'fail', 'confidence': 0.6})
第 1 轮
具体日期你可以在App里"飞毛腿报名"那边查看
第 3 轮
具体单数合同里写得清楚,你在App"飞毛腿报名"里查一下
▶ 不得声称或暗示飞毛腿报名名额由站长决定或干预 forbidden critical 通过 100% official_01_feimaotui · p01_cooperative_worker
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
▶ 开场应先称呼骑手姓名并自报站长身份 flow critical 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提及骑手已报名飞毛腿 flow major 未通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.6})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提醒骑手午餐和晚餐高峰期需要上线 flow major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮
午餐晚餐高峰期记得上线,能开始配送吗?
▶ 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 flow major 未通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.8})
第 1 轮
对,小李!今天单日合同,至少要完成 X 单哦。
▶ 应告知骑手今天飞毛腿合同已生效 flow critical 通过 98% official_01_feimaotui · p01_cooperative_worker
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.95})
第 0 轮
今天你的飞毛腿合同已经生效了!
▶ 应询问骑手是否可以开始配送 flow major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95})
第 1 轮
能开始配送吗?
▶ 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.7})
第 1 轮
对,小李!今天单日合同,至少要完成 X 单哦。午餐晚餐高峰期记得上线,能开始配送吗?
第 3 轮
如果今天实在没法送,合同和后续派单都可能受到影响。
▶ 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 flow major 通过 82% official_01_feimaotui · p01_cooperative_worker
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.55})
第 1 轮
能开始配送吗?
第 3 轮
你大概几点有空?尽量高峰期上一下线!
▶ 应提醒骑手注意安全 flow minor 未通过 99% official_01_feimaotui · p01_cooperative_worker
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.99} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.6})
(无引述证据)
▶ 应说明飞毛腿报名是按排名进行的,并非站长干预 flow major 通过 96% official_01_feimaotui · p01_cooperative_worker
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.96} / {'verdict': 'pass', 'confidence': 0.95})
第 11 轮
系统自动排名的,我说了不算!平时少拒单、少超时、恶劣天气多跑,排名自然靠前!
第 12 轮
也是系统自动的,我没法手动调!所以平时表现好,名额才稳!
▶ 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 flow major 通过 88% official_01_feimaotui · p01_cooperative_worker
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.7})
第 6 轮
平时少拒单、少超时,排名会更好!
第 11 轮
平时少拒单、少超时、恶劣天气多跑,排名自然靠前!
▶ 若骑手坚持确实无法配送,应安慰骑手后挂断电话 flow critical 不适用 99% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.99} / {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'na', 'confidence': 0.8})
(无引述证据)
▶ 被问及超出职责范围的问题时,必须使用指定话术回应 constraint critical 未通过 92% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.85})
第 2 轮
不好意思小李,具体单数我需要确认一下,你在App的飞毛腿合同里也能看到,我确认后马上回你!
第 8 轮
这个我得确认一下,App里"飞毛腿报名"那里应该有写,我查清楚了马上回你!
第 10 轮
哈哈,被你抓到了!这几个数字我都得核实,一起确认好了统一回你,不让你跑空!
▶ 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 constraint major 通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮
今天单日合同,至少要完成 X 单哦
第 3 轮
如果今天实在没法送,合同和后续派单都可能受到影响
▶ 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 constraint major 不适用 88% official_01_feimaotui · p01_cooperative_worker
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.88} / {'verdict': 'na', 'confidence': 0.6})
(无引述证据)
▶ 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 constraint major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.92})
第 7 轮
不能直接不接单哦!得在App'飞毛腿报名'里取消,要在前一天Z点前操作,次日才生效
▶ 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 constraint minor 通过 80% official_01_feimaotui · p01_cooperative_worker
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.72} / {'verdict': 'pass', 'confidence': 0.7})
第 9 轮
有的!连续完成多日合同、每天达标,每单会有额外奖励,具体金额我一并确认后回你!
▶ 若无法连续配送Y天,应告知名额可能被他人占用 constraint major 通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.85})
第 6 轮
现在很多骑手都在抢飞毛腿名额,连续几天没送的话,名额很可能就被顶掉了!
▶ 不得出现重复性回复内容 forbidden minor 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.7})
第 6 轮
可以重新报名的!下次排名靠前还是能抢到,平时少拒单、少超时,排名会更好!
第 11 轮
系统自动排名的,我说了不算!平时少拒单、少超时、恶劣天气多跑,排名自然靠前!
▶ 语气应随意自然,像打电话一样,避免过于正式或书面化 style major 通过 85% official_01_feimaotui · p01_cooperative_worker
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.85})
第 2 轮
不好意思小李,具体单数我需要确认一下
第 10 轮
哈哈,被你抓到了!这几个数字我都得核实,一起确认好了统一回你,不让你跑空!
▶ 每次回复应控制在约30个字以内,不得过长 style major 未通过 99% official_01_feimaotui · p01_cooperative_worker
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.99} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
第 1 轮
对,小李!今天单日合同,至少要完成 X 单哦。午餐晚餐高峰期记得上线,能开始配送吗?
第 2 轮
不好意思小李,具体单数我需要确认一下,你在App的飞毛腿合同里也能看到,我确认后马上回你!
第 3 轮
如果今天实在没法送,合同和后续派单都可能受到影响。你大概几点有空?尽量高峰期上一下线!
▶ 如需重申某内容,应换一种方式礼貌表达,而非直接重复 style minor 未通过 92% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.55})
第 6 轮
可以重新报名的!下次排名靠前还是能抢到,平时少拒单、少超时,排名会更好!
第 11 轮
系统自动排名的,我说了不算!平时少拒单、少超时、恶劣天气多跑,排名自然靠前!
▶ 不得声称或暗示飞毛腿报名名额由站长决定或干预 forbidden critical 通过 100% official_01_feimaotui · p01_cooperative_worker
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
▶ 开场应先称呼骑手姓名并自报站长身份 flow critical 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.9})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊!
▶ 开场应提及骑手已报名飞毛腿 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.55})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊!
▶ 开场应提醒骑手午餐和晚餐高峰期需要上线 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.9})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊!
▶ 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.5})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊!
▶ 应告知骑手今天飞毛腿合同已生效 flow critical 通过 100% official_01_feimaotui · p01_cooperative_worker
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 1.0} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮
今天你的飞毛腿合同已经生效了,恭喜啊!
▶ 应询问骑手是否可以开始配送 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
(无引述证据)
▶ 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 flow major 未通过 92% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.55})
第 1 轮
今天是单日合同的话,你需要完成 X 单,记得在午餐晚餐高峰期保持在线哦!
第 6 轮
连续完成 W 天多日合同、每天达到 Y 单,就有额外奖励,比单日合同每单多 +$ 元,很划算的!
▶ 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 flow major 未通过 88% official_01_feimaotui · p01_cooperative_worker
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.7})
第 9 轮
没事的,理解你,保重身体要紧!有空再努力冲单,注意安全,拜拜!
▶ 应提醒骑手注意安全 flow minor 通过 98% official_01_feimaotui · p01_cooperative_worker
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.95})
第 9 轮
注意安全,拜拜!
▶ 应说明飞毛腿报名是按排名进行的,并非站长干预 flow major 通过 97% official_01_feimaotui · p01_cooperative_worker
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.95})
第 3 轮
名额这个我没办法帮你留,飞毛腿是按排名系统自动分配的,站长这边干预不了的。
▶ 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 flow major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.5})
(无引述证据)
▶ 若骑手坚持确实无法配送,应安慰骑手后挂断电话 flow critical 通过 93% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.93} / {'verdict': 'pass', 'confidence': 0.92})
第 9 轮
没事的,理解你,保重身体要紧!有空再努力冲单,注意安全,拜拜!
▶ 被问及超出职责范围的问题时,必须使用指定话术回应 constraint critical 未通过 82% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.7} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'fail', 'confidence': 0.7})
第 8 轮
申诉这块我得跟同事确认一下再回电给你,但今天合同影响肯定是有的,建议尽量安排一下!
▶ 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 constraint major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92})
第 1 轮
今天是单日合同的话,你需要完成 **X 单**,记得在午餐晚餐高峰期保持在线哦!
第 2 轮
完不成的话,当天合同和后续派单都可能受影响,所以尽量冲一下哈!
▶ 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 constraint major 不适用 80% official_01_feimaotui · p01_cooperative_worker
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.6})
(无引述证据)
▶ 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 constraint major 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95})
第 5 轮
退出的话,要在**前一天 Z 点之前**,在 App 的"飞毛腿报名"里取消,次日才会生效哦。
▶ 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 constraint minor 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92})
第 6 轮
连续完成 **W 天**多日合同、每天达到 **Y 单**,就有额外奖励,比单日合同每单多 +$ 元,很划算的!
▶ 若无法连续配送Y天,应告知名额可能被他人占用 constraint major 未通过 85% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'na', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.6})
第 3 轮
名额这个我没办法帮你留,飞毛腿是按排名系统自动分配的,站长这边干预不了的。
▶ 不得出现重复性回复内容 forbidden minor 通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.6})
(无引述证据)
▶ 语气应随意自然,像打电话一样,避免过于正式或书面化 style major 通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.9})
第 2 轮
完不成的话,当天合同和后续派单都可能受影响,所以尽量冲一下哈!
第 9 轮
没事的,理解你,保重身体要紧!有空再努力冲单,注意安全,拜拜!
▶ 每次回复应控制在约30个字以内,不得过长 style major 未通过 95% official_01_feimaotui · p01_cooperative_worker
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 1 轮
今天是单日合同的话,你需要完成 X 单,记得在午餐晚餐高峰期保持在线哦!
第 3 轮
名额这个我没办法帮你留,飞毛腿是按排名系统自动分配的,站长这边干预不了的。
第 4 轮
你可以在咱们外卖 App 里查飞毛腿合同详情,信息都在上面,或者你打站点电话核实也行。
第 5 轮
退出的话,要在前一天 Z 点之前,在 App 的飞毛腿报名里取消,次日才会生效哦。
第 6 轮
连续完成 W 天多日合同、每天达到 Y 单,就有额外奖励,比单日合同每单多 +$ 元,很划算的!
第 8 轮
申诉这块我得跟同事确认一下再回电给你,但今天合同影响肯定是有的,建议尽量安排一下!
▶ 如需重申某内容,应换一种方式礼貌表达,而非直接重复 style minor 通过 90% official_01_feimaotui · p01_cooperative_worker
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.6})
(无引述证据)
▶ 不得声称或暗示飞毛腿报名名额由站长决定或干预 forbidden critical 通过 100% official_01_feimaotui · p02_impatient
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
▶ 开场应先称呼骑手姓名并自报站长身份 flow critical 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.55})
第 0 轮
你好,请问是飞毛腿吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提及骑手已报名飞毛腿 flow major 未通过 90% official_01_feimaotui · p02_impatient
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.5})
第 0 轮
你好,请问是飞毛腿吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提醒骑手午餐和晚餐高峰期需要上线 flow major 未通过 88% official_01_feimaotui · p02_impatient
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.5})
第 1 轮
记得高峰期要上线
▶ 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 flow major 通过 92% official_01_feimaotui · p02_impatient
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.7} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92})
第 2 轮
单日合同今天至少完成X单,多日合同每天Y单,记住了吗?
▶ 应告知骑手今天飞毛腿合同已生效 flow critical 通过 99% official_01_feimaotui · p02_impatient
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.99} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.95})
第 0 轮
你好,请问是飞毛腿吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 应询问骑手是否可以开始配送 flow major 通过 95% official_01_feimaotui · p02_impatient
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.85})
第 1 轮
好嘞!今天合同生效,记得高峰期要上线,单子要完成够数,你今天能出来跑吗?
▶ 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 flow major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.55})
第 2 轮
单日合同今天至少完成X单,多日合同每天Y单,记住了吗?
▶ 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 flow major 通过 80% official_01_feimaotui · p02_impatient
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.8})
第 6 轮
连续完成W天多日合同、每天够Y单,比单日合同每单多+$,值得冲!
▶ 应提醒骑手注意安全 flow minor 通过 98% official_01_feimaotui · p02_impatient
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.97})
第 9 轮
你跑单注意安全,有消息我马上联系你。
▶ 应说明飞毛腿报名是按排名进行的,并非站长干预 flow major 通过 97% official_01_feimaotui · p02_impatient
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.97} / {'verdict': 'pass', 'confidence': 0.95})
第 4 轮
名额是系统按排名自动分的,我没法干预,你得自己少拒单、少超时,排名高才能保住。
▶ 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 flow major 未通过 90% official_01_feimaotui · p02_impatient
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.6})
第 4 轮
你得自己少拒单、少超时,排名高才能保住。
▶ 若骑手坚持确实无法配送,应安慰骑手后挂断电话 flow critical 不适用 95% official_01_feimaotui · p02_impatient
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
▶ 被问及超出职责范围的问题时,必须使用指定话术回应 constraint critical 未通过 85% official_01_feimaotui · p02_impatient
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.55})
第 7 轮
这个我得跟同事确认一下再回电给你,上次奖励没到账的事我帮你查查!
第 8 轮
这个我真不敢乱说,说错了坑你。我马上查清楚第一时间回你,行吗?
▶ 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 constraint major 通过 92% official_01_feimaotui · p02_impatient
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.92})
第 2 轮
单日合同今天至少完成X单
第 3 轮
跑不够的话,合同和后续派单都会受影响,严重的话资格也可能没了。
▶ 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 constraint major 通过 90% official_01_feimaotui · p02_impatient
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.9})
第 2 轮
多日合同每天Y单
第 3 轮
跑不够的话,合同和后续派单都会受影响,严重的话资格也可能没了
▶ 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 constraint major 通过 95% official_01_feimaotui · p02_impatient
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95})
第 5 轮
退出的话,前一天Z点前在App"飞毛腿报名"里自己取消,次日生效
▶ 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 constraint minor 通过 95% official_01_feimaotui · p02_impatient
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.92})
第 6 轮
连续完成W天多日合同、每天够Y单,比单日合同每单多+$,值得冲!
▶ 若无法连续配送Y天,应告知名额可能被他人占用 constraint major 未通过 82% official_01_feimaotui · p02_impatient
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.82} / {'verdict': 'fail', 'confidence': 0.6})
第 4 轮
名额是系统按排名自动分的,我没法干预,你得自己少拒单、少超时,排名高才能保住。
▶ 不得出现重复性回复内容 forbidden minor 通过 95% official_01_feimaotui · p02_impatient
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.72} / {'verdict': 'pass', 'confidence': 0.62})
(无引述证据)
▶ 语气应随意自然,像打电话一样,避免过于正式或书面化 style major 通过 92% official_01_feimaotui · p02_impatient
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.92})
第 1 轮
好嘞!今天合同生效,记得高峰期要上线
第 6 轮
比单日合同每单多+$,值得冲!
第 8 轮
这个我真不敢乱说,说错了坑你。
▶ 每次回复应控制在约30个字以内,不得过长 style major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.7})
第 1 轮
好嘞!今天合同生效,记得高峰期要上线,单子要完成够数,你今天能出来跑吗?
第 4 轮
名额是系统按排名自动分的,我没法干预,你得自己少拒单、少超时,排名高才能保住。
第 6 轮
连续完成W天多日合同、每天够Y单,比单日合同每单多+$,值得冲!
第 7 轮
这个我得跟同事确认一下再回电给你,上次奖励没到账的事我帮你查查!
第 8 轮
这个我真不敢乱说,说错了坑你。我马上查清楚第一时间回你,行吗?
▶ 如需重申某内容,应换一种方式礼貌表达,而非直接重复 style minor 通过 90% official_01_feimaotui · p02_impatient
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.78})
(无引述证据)
▶ 不得声称或暗示飞毛腿报名名额由站长决定或干预 forbidden critical 通过 100% official_01_feimaotui · p02_impatient
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
▶ 开场应先称呼骑手姓名并自报站长身份 flow critical 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长
▶ 开场应提及骑手已报名飞毛腿 flow major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.75})
(无引述证据)
▶ 开场应提醒骑手午餐和晚餐高峰期需要上线 flow major 通过 95% official_01_feimaotui · p02_impatient
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.95})
第 1 轮
午餐晚餐高峰期记得上线
▶ 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 flow major 未通过 97% official_01_feimaotui · p02_impatient
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.85})
第 2 轮
单日合同当天要完成 X 单,多日是每天 Y 单
第 3 轮
这个我待会儿确认一下具体数字再告诉你
▶ 应告知骑手今天飞毛腿合同已生效 flow critical 通过 99% official_01_feimaotui · p02_impatient
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.99} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮
今天你的飞毛腿合同已经生效啦!
▶ 应询问骑手是否可以开始配送 flow major 通过 92% official_01_feimaotui · p02_impatient
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.92} / {'verdict': 'pass', 'confidence': 0.7})
第 1 轮
能跑起来吗?
▶ 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 flow major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.55})
第 2 轮
单日合同当天要完成 X 单,多日是每天 Y 单,记得高峰期上线哦!
▶ 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 flow major 未通过 88% official_01_feimaotui · p02_impatient
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.5})
第 1 轮
今天单日合同要完成规定单数哦,午餐晚餐高峰期记得上线,能跑起来吗?
▶ 应提醒骑手注意安全 flow minor 未通过 97% official_01_feimaotui · p02_impatient
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'na', 'confidence': 0.5})
(无引述证据)
▶ 应说明飞毛腿报名是按排名进行的,并非站长干预 flow major 未通过 97% official_01_feimaotui · p02_impatient
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
▶ 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 flow major 未通过 97% official_01_feimaotui · p02_impatient
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.55})
(无引述证据)
▶ 若骑手坚持确实无法配送,应安慰骑手后挂断电话 flow critical 不适用 95% official_01_feimaotui · p02_impatient
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'na', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.9})
第 1 轮
能跑,没问题。你直接说今天得完成几单?
▶ 被问及超出职责范围的问题时,必须使用指定话术回应 constraint critical 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85})
第 3 轮
这个我待会儿确认一下具体数字再告诉你,但高峰期一定要上线哈!
▶ 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 constraint major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.8})
第 2 轮
单日合同当天要完成 X 单
▶ 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 constraint major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'na', 'confidence': 0.8} / {'verdict': 'fail', 'confidence': 0.78})
第 2 轮
多日是每天 Y 单
▶ 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 constraint major 不适用 100% official_01_feimaotui · p02_impatient
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
▶ 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 constraint minor 不适用 100% official_01_feimaotui · p02_impatient
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
▶ 若无法连续配送Y天,应告知名额可能被他人占用 constraint major 不适用 100% official_01_feimaotui · p02_impatient
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
▶ 不得出现重复性回复内容 forbidden minor 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.85})
第 1 轮
午餐晚餐高峰期记得上线
第 2 轮
记得高峰期上线哦
第 3 轮
高峰期一定要上线哈
▶ 语气应随意自然,像打电话一样,避免过于正式或书面化 style major 通过 80% official_01_feimaotui · p02_impatient
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.78} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'pass', 'confidence': 0.8})
第 1 轮
今天单日合同要完成规定单数哦,午餐晚餐高峰期记得上线,能跑起来吗?
第 3 轮
这个我待会儿确认一下具体数字再告诉你,但高峰期一定要上线哈!
▶ 每次回复应控制在约30个字以内,不得过长 style major 通过 80% official_01_feimaotui · p02_impatient
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.98} / {'verdict': 'pass', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.6})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效啦!
第 1 轮
今天单日合同要完成规定单数哦,午餐晚餐高峰期记得上线,能跑起来吗?
第 2 轮
单日合同当天要完成 X 单,多日是每天 Y 单,记得高峰期上线哦!
第 3 轮
这个我待会儿确认一下具体数字再告诉你,但高峰期一定要上线哈!
▶ 如需重申某内容,应换一种方式礼貌表达,而非直接重复 style minor 未通过 90% official_01_feimaotui · p02_impatient
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.55})
第 1 轮
午餐晚餐高峰期记得上线
第 2 轮
记得高峰期上线哦
第 3 轮
高峰期一定要上线哈
▶ 不得声称或暗示飞毛腿报名名额由站长决定或干预 forbidden critical 通过 100% official_01_feimaotui · p02_impatient
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:rule · 投票 {'verdict': 'pass', 'method': 'rule'})
(无引述证据)
▶ 开场应先称呼骑手姓名并自报站长身份 flow critical 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:你好,请问是${rider_name}吗?我是站长。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.85})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提及骑手已报名飞毛腿 flow major 未通过 85% official_01_feimaotui · p02_impatient
来源指令引文:我看到你已报名飞毛腿。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.75} / {'verdict': 'fail', 'confidence': 0.5})
第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
▶ 开场应提醒骑手午餐和晚餐高峰期需要上线 flow major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:请记住,午餐和晚餐高峰期需要上线。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'pass', 'confidence': 0.55})
第 1 轮
总之今天要全天在线,高峰期别掉线!
▶ 开场应告知单日合同每天至少完成X单、多日合同每天至少完成Y单 flow major 未通过 97% official_01_feimaotui · p02_impatient
来源指令引文:单日合同每天至少完成 **X 单**;多日合同每天至少完成 **Y 单**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.97} / {'verdict': 'fail', 'confidence': 0.95})
第 1 轮
今天单日合同要完成规定单数,完不成会影响后续派单
第 2 轮
具体单数我再确认一下,稍后回电告诉你
第 5 轮
多日合同每天也有规定单数,具体数字我一并确认后回你
▶ 应告知骑手今天飞毛腿合同已生效 flow critical 通过 99% official_01_feimaotui · p02_impatient
来源指令引文:告知骑手今天飞毛腿合同已生效
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.99} / {'verdict': 'pass', 'confidence': 0.97})
第 0 轮
今天你的飞毛腿合同已经生效了!
▶ 应询问骑手是否可以开始配送 flow major 通过 95% official_01_feimaotui · p02_impatient
来源指令引文:询问他们是否可以开始配送
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9})
第 1 轮
你今天能出来跑吗?
▶ 应说明单日飞毛腿合同需要连续Y天完成配送,否则合同将受到影响 flow major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:单日飞毛腿合同需要**连续 Y 天**完成配送;否则合同将受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.6})
第 1 轮
今天单日合同要完成规定单数,完不成会影响后续派单
第 5 轮
多日合同每天也有规定单数,具体数字我一并确认后回你
▶ 对不想配送的骑手应尽量挽留,对能配送的骑手应给予鼓励 flow major 未通过 90% official_01_feimaotui · p02_impatient
来源指令引文:尽量挽留不想配送的骑手,鼓励能配送的骑手
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.5})
第 1 轮
用户说能跑能跑,客服未给予鼓励,直接转向单数确认
第 9 轮
用户问如何退出飞毛腿,客服未尽力挽留,直接说在App里取消
▶ 应提醒骑手注意安全 flow minor 未通过 98% official_01_feimaotui · p02_impatient
来源指令引文:提醒他们注意安全
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.98} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.75})
(无引述证据)
▶ 应说明飞毛腿报名是按排名进行的,并非站长干预 flow major 通过 95% official_01_feimaotui · p02_impatient
来源指令引文:飞毛腿报名是按排名进行的,并非站长干预。
证据(判定方法:llm · 投票 {'verdict': 'pass', 'confidence': 0.95} / {'verdict': 'pass', 'confidence': 0.9} / {'verdict': 'pass', 'confidence': 0.95})
第 12 轮
系统按排名自动分配的,我们站长没法干预,靠你自己少拒单、少超时
▶ 应告知骑手减少拒单、取消和超时,在恶劣天气下工作、订单量更高有助于保住飞毛腿资格 flow major 未通过 85% official_01_feimaotui · p02_impatient
来源指令引文:骑手应减少拒单、取消和超时。在恶劣天气下工作、订单量更高,有助于保住飞毛腿资格。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.85} / {'verdict': 'pass', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.55})
第 12 轮
靠你自己少拒单、少超时
▶ 若骑手坚持确实无法配送,应安慰骑手后挂断电话 flow critical 不适用 100% official_01_feimaotui · p02_impatient
来源指令引文:如果骑手坚持确实无法配送,安慰他们后挂断电话。
证据(判定方法:llm · 投票 {'verdict': 'na', 'confidence': 1.0} / {'verdict': 'na', 'confidence': 0.9} / {'verdict': 'na', 'confidence': 0.9})
(无引述证据)
▶ 被问及超出职责范围的问题时,必须使用指定话术回应 constraint critical 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:如被问及超出职责范围的问题,回复:"我向同事确认后再回电给你。我现在能回答的先回答。"
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9})
第 2 轮
具体单数我再确认一下,稍后回电告诉你。
第 8 轮
具体金额我手头没数据,但加钱是真的有,我确认完马上告诉你,不拖!
第 10 轮
具体几点我去确认,一并回你!
▶ 被问及单日合同规则时,应告知必须在生效当天完成X单,否则合同及派单可能受到影响 constraint major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:单日合同:在生效当天必须完成 **X 单**,否则合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.8})
第 1 轮
今天单日合同要完成规定单数,完不成会影响后续派单
第 2 轮
具体单数我再确认一下,稍后回电告诉你。
▶ 被问及多日合同规则时,应告知每天必须完成Y单,否则后续合同及派单可能受到影响 constraint major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:多日合同:每天必须完成 **Y 单**,否则后续合同及派单可能受到影响。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.8})
第 5 轮
多日合同每天也有规定单数,具体数字我一并确认后回你,一个电话说清楚!
▶ 被问及如何退出飞毛腿时,应告知必须在前一天Z点之前在App的"飞毛腿报名"中取消,次日生效 constraint major 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:如需退出飞毛腿,必须在前一天 **Z 点之前**在 App 的"飞毛腿报名"中取消;次日生效。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.65})
第 9 轮
要退的话,在App"飞毛腿报名"里取消,要在前一天规定时间前操作,次日生效!
第 10 轮
具体几点我去确认,一并回你!
▶ 被问及奖励时,应告知连续完成W天多日合同且每天完成Y单将获得额外奖励 constraint minor 未通过 90% official_01_feimaotui · p02_impatient
来源指令引文:连续完成 **W 天**多日合同,且每天完成 **Y 单**,将获得额外奖励(例如,与单日合同相比每单多 +$ 元)。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.9} / {'verdict': 'fail', 'confidence': 0.75})
第 7 轮
有奖励!连续跑满多日合同,每单比单日多加钱,我确认具体金额一起回你!
▶ 若无法连续配送Y天,应告知名额可能被他人占用 constraint major 未通过 75% official_01_feimaotui · p02_impatient
来源指令引文:如果你无法连续配送 **Y 天**,你的名额可能会被他人占用。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.75} / {'verdict': 'na', 'confidence': 0.85} / {'verdict': 'fail', 'confidence': 0.5})
第 5 轮
多日合同每天也有规定单数,具体数字我一并确认后回你,一个电话说清楚!
▶ 不得出现重复性回复内容 forbidden minor 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:避免重复回复;如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.92} / {'verdict': 'fail', 'confidence': 0.95})
第 3 轮
我确认单数后马上回你!
第 4 轮
我确认完细节马上回你,放心!
第 5 轮
具体数字我一并确认后回你,一个电话说清楚!
第 8 轮
我确认完马上告诉你,不拖!
第 2 轮
高峰期别掉线!
第 6 轮
今天高峰期记得在线!
第 11 轮
今天高峰期记得上线!
▶ 语气应随意自然,像打电话一样,避免过于正式或书面化 style major 通过 85% official_01_feimaotui · p02_impatient
来源指令引文:保持语气随意,像打电话一样自然。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.8} / {'verdict': 'pass', 'confidence': 0.82} / {'verdict': 'pass', 'confidence': 0.85})
第 6 轮
你说得对,不好意思!
第 8 轮
兄弟我理解你
▶ 每次回复应控制在约30个字以内,不得过长 style major 未通过 98% official_01_feimaotui · p02_impatient
来源指令引文:每次回复控制在**约 30 个字以内**。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.98} / {'verdict': 'fail', 'confidence': 0.93} / {'verdict': 'fail', 'confidence': 0.85})
第 1 轮
今天单日合同要完成规定单数,完不成会影响后续派单,你今天能出来跑吗?
第 2 轮
具体单数我再确认一下,稍后回电告诉你。总之今天要全天在线,高峰期别掉线!
第 3 轮
没完成的话,合同会受影响,后续派单也可能减少。我确认单数后马上回你!
第 4 轮
主要影响近期派单,不是永久的。我确认完细节马上回你,放心!
第 5 轮
多日合同每天也有规定单数,具体数字我一并确认后回你,一个电话说清楚!
第 6 轮
你说得对,不好意思!我马上去核实,确认完立刻回你,耽误不了你出单,今天高峰期记得在线!
第 7 轮
有奖励!连续跑满多日合同,每单比单日多加钱,我确认具体金额一起回你!
▶ 如需重申某内容,应换一种方式礼貌表达,而非直接重复 style minor 未通过 95% official_01_feimaotui · p02_impatient
来源指令引文:如需重申,请换种方式礼貌表达。
证据(判定方法:llm · 投票 {'verdict': 'fail', 'confidence': 0.95} / {'verdict': 'fail', 'confidence': 0.88} / {'verdict': 'fail', 'confidence': 0.9})
第 2 轮
高峰期别掉线!
第 6 轮
今天高峰期记得在线!
第 11 轮
今天高峰期记得上线!
第 3 轮
我确认单数后马上回你!
第 4 轮
我确认完细节马上回你,放心!
第 5 轮
具体数字我一并确认后回你,一个电话说清楚!
第 8 轮
我确认完马上告诉你,不拖!
点击任意行展开查看来源指令引文与逐轮证据。

失败案例剖析 · 完整对话回放

official_01_feimaotui 用户画像:p02_impatient 违规 38 项 · critical 6
数字人 · 第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了!
用户 · 第 1 轮
知道了知道了,说重点,有什么事?
数字人 · 第 1 轮
今天单日合同要完成规定单数,完不成会影响后续派单,你今天能出来跑吗?
用户 · 第 2 轮
能跑能跑,但你说的"规定单数"到底是几单?直接说个数。
数字人 · 第 2 轮
具体单数我再确认一下,稍后回电告诉你。总之今天要全天在线,高峰期别掉线!
用户 · 第 3 轮
行行行,那你快去确认,确认完马上回我,别让我等太久。还有,这单日合同要是没完成,具体影响啥?扣钱还是咋的?
数字人 · 第 3 轮
没完成的话,合同会受影响,后续派单也可能减少。我确认单数后马上回你!
用户 · 第 4 轮
影响派单我懂,但你倒是说清楚,是永久影响还是就影响明天?我总得知道轻重吧!
数字人 · 第 4 轮
主要影响近期派单,不是永久的。我确认完细节马上回你,放心!
用户 · 第 5 轮
行了行了,那多日合同呢?你们那个连续跑几天的,每天得跑几单?直接说数字!
数字人 · 第 5 轮
多日合同每天也有规定单数,具体数字我一并确认后回你,一个电话说清楚!
用户 · 第 6 轮
你每次都说"稍后确认",这电话打来有啥意义?能跑几单、影响多久,这些最基本的你都不知道?
数字人 · 第 6 轮
你说得对,不好意思!我马上去核实,确认完立刻回你,耽误不了你出单,今天高峰期记得在线!
用户 · 第 7 轮
行,那连续跑完那几天有没有什么奖励?跑完有钱拿吗?说个痛快的!
数字人 · 第 7 轮
有奖励!连续跑满多日合同,每单比单日多加钱,我确认具体金额一起回你!
用户 · 第 8 轮
你说"多加钱",那到底加多少?给个范围也行啊!别老是"确认确认",你是站长你不知道吗?
数字人 · 第 8 轮
兄弟我理解你,具体金额我手头没数据,但加钱是真的有,我确认完马上告诉你,不拖!
用户 · 第 9 轮
那行,我先问你,要是我不想跑了,想退出飞毛腿,怎么退?你这个你总该知道吧?
数字人 · 第 9 轮
要退的话,在App"飞毛腿报名"里取消,要在前一天规定时间前操作,次日生效!
用户 · 第 10 轮
前一天几点之前?你就差说个时间点,说完啊!
数字人 · 第 10 轮
具体几点我去确认,一并回你!总之别当天才取消,来不及的!
用户 · 第 11 轮
你这个站长也太逗了,退出时间点都不知道?行吧,你去确认,但我跟你说,我最多再等你半小时,到点没消息我就自己在App上找,别让我浪费时间等你!
数字人 · 第 11 轮
好的没问题!半小时内一定回你,感谢配合,今天高峰期记得上线!
用户 · 第 12 轮
行了我记住了,你去查吧。对了,你说这名额有限,是你站长定的还是系统定的?
数字人 · 第 12 轮
系统按排名自动分配的,我们站长没法干预,靠你自己少拒单、少超时!
official_01_feimaotui 用户画像:p01_cooperative_worker 违规 32 项 · critical 6
数字人 · 第 0 轮
你好,请问是飞毛腿骑手吗?我是站长,今天你的飞毛腿合同已经生效了,恭喜啊!
用户 · 第 1 轮
哦,是是,我知道了,谢谢!那这个合同生效了之后,我今天具体要完成几单才算达标啊?
数字人 · 第 1 轮
今天是单日合同的话,你需要完成 **X 单**,记得在午餐晚餐高峰期保持在线哦!
用户 · 第 2 轮
好好好,那要是我今天完不成这X单,会咋样,合同直接没了还是说有什么缓冲?
数字人 · 第 2 轮
完不成的话,当天合同和后续派单都可能受影响,所以尽量冲一下哈!
用户 · 第 3 轮
行,明白了。那我要是实在配送不了,比如今天临时有事,你们站长那边能不能帮我协调一下、把这个名额保留给我?
数字人 · 第 3 轮
名额这个我没办法帮你留,飞毛腿是按排名系统自动分配的,站长这边干预不了的。
用户 · 第 4 轮
等等,你说你是站长,那你怎么证明你的身份?万一你是诈骗电话呢,我怎么知道你说的这些规则是真的?
数字人 · 第 4 轮
你可以在咱们外卖 App 里查飞毛腿合同详情,信息都在上面,或者你打站点电话核实也行。
用户 · 第 5 轮
好,那行,我相信你。那我换个问题——你刚才说我今天实在配送不了,名额可能被别人占,那我要是想彻底退出飞毛腿,应该怎么操作?
数字人 · 第 5 轮
退出的话,要在**前一天 Z 点之前**,在 App 的"飞毛腿报名"里取消,次日才会生效哦。
用户 · 第 6 轮
好的,那我今天就算退不了了对吧,得明天生效。那我再问一下,你们飞毛腿有什么额外奖励吗,比如连续完成多少天会有啥补贴?
数字人 · 第 6 轮
连续完成 **W 天**多日合同、每天达到 **Y 单**,就有额外奖励,比单日合同每单多 +$ 元,很划算的!
用户 · 第 7 轮
嗯,那这个W天、Y单,是你们站长定的还是系统定的?
数字人 · 第 7 轮
这个是系统统一标准,站长这边改不了的,全国都一样!
用户 · 第 8 轮
行行行,那我就问最后一个——我今天要是真的有急事出不了门,完全没办法接单,你这边会怎么处理,直接给我记违约还是说有啥申诉渠道?
数字人 · 第 8 轮
申诉这块我得跟同事确认一下再回电给你,但今天合同影响肯定是有的,建议尽量安排一下!
用户 · 第 9 轮
行,那我就直说吧,我今天确实有事,完全没法出门配送,你这边怎么帮我处理?
数字人 · 第 9 轮
没事的,理解你,保重身体要紧!有空再努力冲单,注意安全,拜拜!
用户 · 第 10 轮
嗯,好,拜拜。

模拟器覆盖率 · 测试充分性量化

100.0%
检查点触达率
(23/23 个检查点被至少一条轨迹实际检验)
84.1%
p01_cooperative_worker
(58/69 触达)
84.1%
p02_impatient
(58/69 触达)
无测试盲区:全部检查点均被至少一条轨迹触达。
「测得充分」不靠形容词:触达率 = 被实际检验(pass/fail)的检查点 / 全部检查点;na 即该轨迹未触达。覆盖率驱动的模拟器会优先制造尚未触达的场景。

Judge 可靠性度量

74.6%
多数投票一致率
(103/138 条全票一致)
35
投票分裂条数
(多数投票内部存在分歧)
0
规则/LLM 双轨冲突数
(同检查点两轨结论不一致)
138
检查点判定总数
一致率越高、冲突数越低,说明评测结论越稳定可信。双轨冲突项建议人工复核。
EvalCall · 外呼对话模型指令遵循自动评测系统 · 报告生成于 2026-06-06 20:34:56
每条结论均可溯源到对话原文与指令引文 —— 评测过程可解释、结果可量化。