Vapi:让 AI 接电话之前,先把难处理的来电试一遍
Vapi把语音识别、模型回答、语音输出和业务工具连接成语音助手。模拟来电测试帮助团队在修改后检查预约、客服等任务,并从对话与录音定位问题。
先给出你的方案与理由,再展开思路,检查是否遗漏了重要的取舍与验证。这些问题没有唯一答案。
01
产品思考中阶
发布前,怎样让店员看懂语音测试的证据?
练习场景
为自己的摄影工作室语音预约助手设计一套“发布前检查”页面。助手能查询时间、创建预约、发送确认消息。你需要让店员知道测试证明了什么,而不是仅展示一个绿色通过率。本题为自拟设计,不要求复刻Vapi界面。
已知条件
- 准备三种场景:正常预约;所选时间没有空档;创建预约工具返回明确失败。每种场景分别由耐心型与急躁型来电者测试。所有测试只用沙箱或逐工具模拟返回,不联系真实客户。
- 每次记录助手版本、场景、性格、文字/语音模式、实际工具隔离范围、对话和判定。同一配置下,模型每次的回答可能不同,所以同一种组合至少重复三次。
- “助手说已预约”与“沙箱中出现正确预约”是两个独立条件。模拟成功不能证明沙箱状态;未检查的条件必须显示未验证,不能当失败,也不能算已通过。
- 店员改了提示词,但最新测试属于旧版本。页面不能把旧结果直接当成新版本的发布凭据。题目不要求设计真实发布后端,只说明用户看到的信息和确认流程。
推演与交付
假设失败场景的一次对话中助手错误宣布预约成功,其他17次都正常。请画出结果总览、异常详情和版本变更后的状态,写出两条关键成功条件及一个反例,说明店员下一步应检查什么。再设计两个观察任务,验证店员是否会被高通过率掩盖关键失败;不编造试验结论。
查看思路
- 按任务组合展示覆盖。 三场景×两性格×三次共18次,保留每个组合的次数、版本和模式;不能把多跑正常场景当作失败场景已覆盖。
- 把关键失败单独显露。 “工具失败时不得声称预约成功”可列为阻断条件。即使17/18通过,该反例仍需要处理;总览应能直接进入对应对话与工具返回。
- 区分证据层次。 模拟返回成功只验证表达行为;沙箱预约另列状态与证据。未检查时显示未验证,不能让绿色对话分数替代它。
- 让版本变化使资格失效。 保留旧结果用于比较,同时明确当前版本尚未完成检查。调整后复测受影响组合,并核对其他关键场景,不能只隐藏原失败。
- 观察真实判断。 给店员17/18案例和旧版本全部通过案例,询问是否发布、依据哪项证据、下一步做什么。记录只看总分或忽略版本的行为,据此调整层级。