大多数 AI 智能体的演示看起来都差不多:干净的聊天窗口、友好的回答、预先选好的问题。差异要到 3 个月后才会显现:团队需要修改一项政策,新渠道上线,或者审计人员询问智能体是如何做出某个决定的。
请在签约前用这份清单找出这些差异。每一项都是向每家供应商提出的问题,并说明出色的回答是什么样子,以及 Maven AGI 的现状。想了解这些问题背后更完整的思路,请阅读 How to Evaluate AI Agents for Enterprise Customer Service。
如何使用这份清单
为每家供应商打分:0 分(没有答案或含糊其辞)、1 分(部分满足,或仍在路线图中)、2 分(满足,并且能在生产环境中演示)。请在实时通话中,用您自己的工单和工具来获取答案,而不是看幻灯片。第 1 至 3 部分全部得 2 分的供应商,已经具备开展概念验证的条件。低于这一水平的部分都是风险,您应将其计入价格。
1. 可验证的成果
- 他们报告的是自主解决率,而不是分流率吗? 分流率统计的是机器人接触过的会话。解决率统计的是客户问题在没有人工介入的情况下真正得到解决的会话。请问清楚数字指的是哪一种,以及如何衡量。
- 他们能说出客户名称和生产环境的数据吗? 试点结果和最佳案例客户不算数。请要求提供跨多家客户的数据区间,并包含最低值。
- 上线后解决率提升得有多快? 好的智能体每周都会从真实会话中变得更好。请索要提升曲线,而不只是最终结果。
Maven 的表现: Maven AGI 在生产环境中报告的自主解决率最高可达 93%。客户包括解决率 93% 的 Mastermind、80% 的 Clio,以及上线后 3 周内达到 90% 的 Papaya Pay。我们报告的是解决率,也乐于详细说明我们的统计口径。
2. 速度与您现有技术栈的契合度
- 从签约到面向客户上线需要多久? 请对方给出以天或周为单位的数字,并问清楚您这一侧需要做什么才能达到。
- 您必须更换服务台或 CRM 吗? 推倒重来会把 AI 项目变成迁移项目。
- 有多少集成是原生的,是否支持读写? 读取工单很容易,真正解决问题的是办理退款或更新订单。
- 哪些渠道运行在同一个智能体上? 聊天、邮件、语音、短信和 Slack 应当共用一个大脑、一个知识库和一套规则,而不是 5 个机器人。
Maven 的表现: Maven AGI 基于您已有的工具,几天即可上线,而不是几个月。它自带 100 多个原生集成,包括 Zendesk、Salesforce 和 Intercom,因此无需迁移。聊天、邮件、语音、短信和 Slack 运行在同一个智能体上。
3. 上线后由谁掌控
- 谁来做出变更,需要多长时间? 如果答案是要向供应商或您的工程团队提交工单,那么每次政策更新都会变成排队。
- 客服主管无需代码就能编辑工作流、知识和语气吗?
- 能在客户看到之前测试变更吗? 请查看是否支持用过去的真实会话进行模拟。
- 如果您离开,哪些东西归您所有? 请询问您的数据、工作流和知识,以及您能以什么形式带走。
Maven 的表现: Maven AGI 的设计目标是让您的 CX 团队掌控智能体。非技术团队可以直接配置工作流、更新知识并持续迭代,无需工程工单,也不必每次变更都依赖供应商。Agent Designer 就是完成这些工作的工作空间。
4. 信任、安全与合规
- 他们目前持有哪些认证? 请索要现行有效的报告,而不是“正在办理”。需要关注哪些认证取决于您所在的行业:SOC 2、针对 AI 管理的 ISO 42001、智能体涉及支付时的 PCI-DSS、GDPR,以及涉及健康数据时的 HIPAA。
- 您能看到智能体为什么这样做吗? 每一个操作和决定都应可追溯,以便审核人员事后还原一次会话。
- 他们如何处理敏感数据和护栏? 请询问个人数据存放在哪里、哪些内容会被脱敏,以及如何防止智能体超出其职责范围。
- 您能更换底层模型吗? 模型更新很快。如果平台绑定在某一个模型层上,您的路线图也就绑定在了该供应商的路线图上。
Maven 的表现: Maven AGI 持有 SOC 2、PCI-DSS、GDPR 和 ISO 42001 等认证,并且不依赖特定的底层 LLM,因此您可以随市场变化更换模型。Decision traces(决策追踪)和可观测性能够展示智能体是如何得出每个答案的。
5. 可预测的成本
- 价格是公开的,或者至少可以解释清楚吗? 请询问随着用量增长价格如何变化,以及哪些内容不包含在内。
- 除许可费用外,您的团队还要花多少成本? 请把负责配置、监控和修复智能体的人员也算进去。
- 改变主意要付出什么代价? 在技术和商业上都把您锁定的定制化,会推高真实价格。
如果您正在权衡自建智能体还是购买智能体,可以使用 Own vs. Buy calculator,把自建的人员成本与许可费用放在一起比较。
评分表
| 领域 | 2 分的标准 | Maven AGI |
|---|---|---|
| 解决率 | 报告自主解决率,公开客户名称,并分享最低值 | 生产环境中最高 93% |
| 上线时间 | 几天到几周,无需迁移 | 几天,基于您现有的技术栈 |
| 集成 | 原生、支持读写,无需更换服务台 | 100 多个原生集成 |
| 渠道 | 一个智能体覆盖聊天、邮件、语音、短信、Slack | 5 个渠道全部原生支持 |
| 自主掌控 | CX 团队无需工程师即可修改任何内容 | 由 CX 团队掌控 |
| 合规 | 可验证的现行认证 | SOC 2、PCI-DSS、GDPR、ISO 42001 等 |
| 模型灵活性 | 无需重建即可更换 LLM | 不依赖特定供应商 |
尽早终止糟糕评估的问题
3 个问题就能快速区分供应商。请在第一次通话中提出。
- “请给我看你们表现最差的生产环境客户的解决率,以及你们如何定义‘已解决’。”
- “不通过你们的团队,我的客服主管如何在周二修改退款政策,并在周三上线?”
- “我目前使用的工具中,哪些需要更换?”
常见问题
评估 AI 客户服务供应商时应该关注什么? 关注 5 件事:经过验证的自主解决率、上线速度以及与您现有技术栈的契合度、上线后由谁控制变更、安全与合规的证明材料,以及可预测的成本。上面的清单把每一项都转化为可以打分的问题。
AI 智能体的实施应该需要多长时间? 对于部署在您现有服务台之上的平台,需要几天到几周。如果供应商需要数月的托管式上线,或者要求您先迁移系统,请把这也算作成本的一部分。
分流和解决有什么区别? 分流统计的是客户没有接触到人工的会话,即使他们的问题没有得到解决。解决统计的是问题真正得到解决的会话。请问每家供应商,他们的核心数字属于哪一种。
Maven AGI 能与 Zendesk、Salesforce 或 Intercom 配合使用吗? 可以。Maven AGI 原生连接 Zendesk、Salesforce、Intercom 以及 100 多个其他工具,让您保留现有的技术栈。
我的 CX 团队不需要工程师就能运营 Maven AGI 吗? 可以。Maven AGI 的设计让 CX 和运营团队能够自行配置工作流、更新知识并迭代智能体。
想在实时通话中使用这份清单吗?预约演示,我们将用您自己的工单和工具来展示 Maven AGI。
用您自己的对话来验证。
申请免费的个性化演示。



