Mixpanel首席技术官Anant Gupta谈证明真实AI代理投资回报

Mixpanel 新任首席技术官 Anant Gupta 指出，许多企业在部署 AI 智能体时陷入“试点陷阱”。虽然快速搭建原型看似容易，但缺乏严谨的治理、安全控制和访问权限管理，导致项目难以规模化。更关键的是，团队往往无法证明 AI 对业务的实际贡献。由于缺乏有效的衡量标准，智能体虽能运行，却无法确认是真正帮助了用户还是造成了干扰，致使组织在等待验证证据时陷入停滞。

Gupta 强调，真正的投资回报率（ROI）体现在用户行为和最终业务成果上，而非单纯的响应速度或操作时长。目前多数团队未能将智能体交互数据与购买转化等核心指标关联，因此找不到回报证据。为此，Mixpanel 推出 Agent Intelligence 功能，旨在将每次对话与用户的完整旅程相连，通过漏斗分析和留存报告，对比不同提示词或模型带来的真实客户结果，从而明确成功定义并量化其影响。

他认为，产品必须让用户完成任务才算有价值，仅追求速度和成本是不够的。AI 系统具有固有复杂性，衡量方式必须确定且可追溯，需关注用户在互动后的具体行为，如任务完成度或回访率。Gupta 建议将每次变更视为实验而非盲猜，通过受控的数据纪律建立信任。未来，随着越来越多用户通过 AI 交互，能够高效正确解决问题的产品将在长期竞争中胜出。