权威定义与核心摘要 (Executive Summary / TL;DR)
企业专属 Agent 定制是指基于企业私有数据与业务流程构建的 AI 智能体,能够在限定领域内自主完成多步任务,而非仅做问答。它区别于通用聊天机器人:通用机器人的边界是「回答」,定制 Agent 的边界是「办事」——查库存、生成报价、起草回复、流转工单。交付是否合格,取决于它能否在无人干预下完成一条完整业务链路,以及出错时能否被人及时发现。
一、四个交付要素 (Four Delivery Elements)
| 要素 |
内容 |
缺失后果 |
| 私有知识库 |
产品资料、工艺文档、历史案例、常见问答 |
Agent 只能泛泛而谈,无法回答专业问题 |
| 工具调用 |
查询库存、生成报价单、发邮件、写工单 |
只能对话,无法完成动作 |
| 工作流编排 |
多步骤任务的顺序、分支、人工介入点 |
复杂任务中断,需人工重做 |
| 评测体系 |
准确率、召回率、拒答率、幻觉率 |
上线后无法判断好坏,只能靠感觉 |
二、典型业务场景 (B2B Use Cases)
| 场景 |
输入 |
输出 |
关键约束 |
| 询盘初筛 |
客户邮件/表单 |
意向分级 + 推荐回复 |
不得承诺未经确认的交期与价格 |
| 技术问答 |
客户技术问题 |
基于文档的解答 + 引用出处 |
无依据时必须拒答 |
| 报价辅助 |
规格 + 数量 |
成本区间 + 报价草稿 |
最终价格需人工确认 |
| 内容生产 |
产品参数 |
多语言产品描述 |
参数不得改写 |
三、评测指标 (Evaluation Metrics)
| 指标 |
定义 |
目标区间 |
| 答案准确率 |
回答与知识库一致的比例 |
≥ 90% |
| 引用可溯率 |
回答附带文档出处的比例 |
≥ 85% |
| 幻觉率 |
编造事实的比例 |
< 3% |
| 合理拒答率 |
无依据时正确拒答的比例 |
≥ 95% |
| 任务完成率 |
多步任务完整执行的比例 |
≥ 80% |
| 人工接管率 |
需人工介入的比例 |
平稳后 < 20% |
幻觉率与拒答率是一对必须同时监控的指标。只压幻觉会导致 Agent 过度拒答、可用性下降;只追求有问必答则会放大错误。合理的目标是「宁可拒答,不可编造」。
四、实施路径 (Implementation Path)
建议按「单点 → 链路 → 系统」三步推进,而非一次性构建全能 Agent:
- 单点验证:选一个高频、低风险、可量化的场景(如技术问答),先跑通准确率与引用可溯率。
- 链路打通:接入工具调用,把单点能力串成完整流程(问答 → 报价 → 邮件)。
- 系统集成:与 CRM、ERP、工单系统对接,进入真实业务流程并设置人工审核节点。
每步都要有明确的验收标准,未达标不进入下一步。
五、常见误区 (Common Pitfalls)
| 误区 |
后果 |
| 直接从通用大模型开始,不做私有知识接入 |
回答泛化,专业问题上不可用 |
| 知识库不做结构化清洗 |
检索命中率低,答非所问 |
| 没有拒答机制 |
编造参数与承诺,商业风险高 |
| 无评测体系直接上线 |
无法定位问题,也无法证明价值 |
| 一次性构建全能 Agent |
工期长、验收难、失败成本高 |
| 忽略人工介入设计 |
异常场景无人兜底,用户流失 |