业务负责人验收 AI 项目,核心不是看“它会不会回答”,而是看三件事:知识库能不能支撑真实业务问题,Agent 能不能在正确权限下完成任务,以及任务结果有没有回到业务系统形成闭环。如果这三项没有验收标准,项目上线后大概率会变成“演示很好用、业务用不起来”。
下面这份清单,按业务负责人能直接操作的方式组织,不需要技术背景也能逐项判断。
业务负责人为什么不能只让技术团队验收
技术团队验收的是功能:接口通不通、响应快不快、答案有没有来源。但业务负责人要验收的是另一层问题:
- 这个 AI 上线后,谁在用、解决什么问题、替代了哪一步人工动作?
- 知识库里的内容,是不是一线员工实际会查、会用的版本?
- Agent 调用了系统,但它调用的权限边界对不对?会不会出现“销售能看到财务数据”的问题?
- 做完任务之后,结果有没有回到 CRM、工单系统、审批流里,还是只停留在对话窗口?
一个典型的失败模式是:项目验收时演示了 10 个漂亮回答,业务部门点头,上线后第一周就发现知识库内容过时、权限没配好、Agent 查不到真实数据。业务负责人被迫在项目交付前“补验收”,而不是在交付时“确认验收”。
AI 项目验收前,先确认业务目标写清楚了没有
验收的第一个动作,不是打开系统测试,而是回到项目启动时的业务目标。如果当时只写了“提升效率”“智能问答”这类模糊表述,现在就需要业务负责人把它翻译成可检查的标准。
建议对照三个问题:
- 这个 AI 上线后,哪个岗位的哪一步工作会被替代或加速?
- 如果没有这个 AI,这个岗位现在是怎么做的?耗时多少、错误率多少、瓶颈在哪?
- 上线后一个月,业务上能看到什么变化才算合格?
以客服场景为例,合格目标可以是“常见售前咨询由 AI 直接处理,人工客服只接手退换货、投诉和复杂定制需求,AI 处理比例达到 X%”。其中的具体比例,应由业务负责人根据现有客服数据来定,而不是由技术团队拍一个数。
以销售场景为例,目标可以是“AI Agent 每天自动完成新线索的企业信息补全和初步意向标注,销售主管在 CRM 里能直接看到结果,不再需要销售手工填写”。这句话本身就包含了闭环要求:结果必须回到 CRM。
知识库验收:不只是“回答准确”,而是“业务上敢用”
知识库验收最容易被误解为“问几个问题看答得对不对”。业务负责人需要检查的是四个更实际的问题。
覆盖范围是否来自真实业务问题
随机测试几个问题没有意义。应该从一线员工的真实提问里抽样,比如客服对话记录、销售常见问题、售后工单里的高频问题。用这些真实问题去测,看知识库能不能覆盖。
如果 AI 能回答高管提的“公司战略是什么”,但回答不了客户问的“这个型号能不能用第三方配件”,这个知识库就没有业务价值。
更新机制是否在项目里存在
知识库不是交付时拍一张快照,而是要有更新路径。业务负责人在验收时应确认:
- 哪些部门负责哪部分知识的更新?
- 产品参数、价格、政策变化后,多久会进入知识库?
- 如果业务人员明天改了一个流程,这个改动要经过谁、多久才能被 AI 用上?
如果答案是“需要重新提交需求给技术团队”,这个知识库会在三个月内过期。可用的方案是:指定业务侧的知识负责人,用运营后台直接更新内容,技术团队只维护系统本身不做日常内容修改。
回答是否有“不敢放手”的部分
业务负责人要把高风险问题挑出来单独验收。例如涉及合同条款、退款条件、医疗建议、数据合规的问题,AI 的回答方式应当被限制或转人工。验收时要看:这类问题能不能被识别出来,识别后有没有强制转人工或附加提醒。
权限是否先于知识库生效
很多项目上线后才发现,销售政策类知识对全员可见,包括外聘客服和代理商账号。验收时需要抽取不同权限的账号,确认同一句提问在不同角色下看到的结果是否一致。
Agent 验收:不是“能调接口”,而是“任务能跑完并有人负责”
如果项目包含 AI Agent,业务负责人要验收的不只是“它能不能调用系统”,而是整个任务执行链是否可靠。
先看任务边界,再看技术完成度
把 Agent 要做的任务写成一句业务话术,例如:“新线索进入 CRM 后,Agent 自动补全企业信息并按行业打标,再根据规则分配销售,最后在系统里创建跟进任务。”
验收时按这句话逐步走一遍,重点看中间有没有断点:
- 信息来源不对:企业信息来自过期数据库,补全结果是错的。
- 打标规则没定:技术团队用“相似度”打标,业务上实际需要的是“有预算、有决策权、预计采购时间”这类判断。
- 任务创建了,但没有责任人:跟进任务没有归属销售,或者没有截止时间。
这些不是模型问题,而是业务规则没有被翻译进系统。业务负责人必须参与这部分验收,否则 Agent 上线后就是“自动做错事”。
权限不是“能用”,而是“只能做该做的事”
Agent 调用系统通常涉及比普通员工更复杂的权限,因为它可能跨越多个系统。验收时至少需要确认:
- Agent 用的账号或密钥,能看到哪些数据、不能看到哪些数据?
- 如果 Agent 要写入系统,它只能写哪些字段、不能动哪些字段?
- 涉及个人微信、电话外呼、客户数据时,有没有权限确认和人工确认环节?
例如 Agent 要自动外呼客户,那么验收必须包含:谁有权触发外呼、外呼名单从哪里来、客户是否已同意接触。这些应作为交付方案的一部分写清楚,而不是上线后发现问题再补。
失败时会发生什么
Agent 不是每次都能成功。业务负责人应当问一个关键问题:“如果这个任务跑到一半失败了,业务上会发生什么?”
好的设计是:失败后任务回到人工队列,业务人员能在系统里看到失败原因;坏的设计是:失败后静默无记录,业务人员以为系统在跑,实际上数据一直没动。验收时必须制造一个失败场景,看它暴露出来的结果。
业务闭环验收:结果必须回到业务系统
这是业务负责人最需要较真的一项。AI 项目的最终交付物如果只是“一个对话窗口”,那它很难进入真实业务。
闭环的验收标准是:AI 产生的结果,必须在业务系统里被看到、被使用、被记录。
常见的三种闭环形态:
- 客服闭环:AI 解答后,自动生成服务记录,写入工单或 CRM;转人工时带上下文,不要求客户重复描述。
- 销售闭环:Agent 完成线索补全和打标后,销售人员在自己的系统里能看到更新后的记录,并且能一键创建跟进任务。
- 内容闭环:AI 生成的初稿进入审批流程,修改意见回流到知识库,后续生成质量有改进依据。
验收时不要只看前端显示,要切到 CRM、工单或 OA 系统里去确认数据真的写进去了,字段正确、权限正确、时间正确。
部署环境验收:私有化不是“装上了”,而是“边界清晰”
如果项目要求私有化部署,业务负责人不需要懂底层架构,但需要让技术团队用业务语言回答三个问题:
- 模型、知识库、业务数据分别部署在什么环境?哪些数据不出企业内网?
- 哪些接口和数据对外部依赖?外部依赖中断时,哪些功能会受影响?
- 日常运维由谁负责?知识库更新、系统升级、权限变更分别找谁?
这些问题的答案应当形成一份交付文档,而不是口头确认。
验收清单:上线前逐项确认
下面这份清单可直接用于验收会议。
| 模块 | 验收项 | 通过标准 | |---|---|---| | 业务目标 | 目标岗位、替代动作、预期结果 | 已用业务语言写清,并明确上线后一个月指标 | | 知识库 | 覆盖真实业务问题 | 从一线真实问题抽样,覆盖率达到业务约定线 | | 知识库 | 更新机制 | 指定业务侧负责人,有后台更新路径和时限 | | 知识库 | 高风险问题处理 | 敏感问题可识别并转人工或加提醒 | | 权限 | 角色权限差异 | 不同角色看到的数据范围正确 | | Agent | 任务链路 | 从触发到任务完成全链路无断点 | | Agent | 写入权限 | 只能写指定字段,不能越权 | | Agent | 失败处理 | 失败后进入人工队列并有记录 | | 业务闭环 | 结果写回业务系统 | 在业务系统里可查到 AI 产生的数据 | | 部署 | 环境边界 | 数据、接口、运维责任有文档确认 |
常见问题
公司准备上一个 AI 知识库,业务负责人需要从哪几块验收?
从四个方面:知识库覆盖范围是否来自真实业务问题、有没有持续更新机制、高风险问题能否识别并转人工、不同角色权限是否正确。回答准确只是第一步,业务上敢用才是验收通过的标准。
AI Agent 上线前最容易被忽略的问题是什么?
是权限和失败处理。Agent 能调用系统不代表它只做该做的事,要确认它能看什么、不能写什么;同时要测试任务失败后有没有人工接手和记录机制,不能静默失败。
我们想让 AI 回答客户问题,但担心答错,验收时怎么控?
把高风险问题单独列出来测试,例如涉及合同、退款、合规的内容,看系统能不能识别并转人工。验收标准不是“不犯错”,而是“高风险问题不擅自回答”。
怎么判断 AI 项目是真的进入业务了,还是只能做演示?
看闭环。AI 产生的结果有没有写回 CRM、工单或审批系统,业务人员有没有在系统里实际使用这些结果。如果只停留在对话窗口,说明还没进入业务。
企业 AI 项目验收中,业务负责人和技术团队的分工边界怎么划?
技术团队负责系统功能、接口和稳定性验收;业务负责人负责目标确认、知识库覆盖、权限边界、任务规则和业务闭环。智未来 AI 在交付企业 AI 应用时,会把权限、客户数据合规和人工确认环节写进交付方案,确保业务侧验收有据可依。具体项目需求可通过联系智未来 AI 咨询企业 AI 项目沟通。
需要进一步了解企业知识库与 RAG 系统或AI Agent 与数字员工的交付范围,可以对照各自的验收模块,结合这份清单一起使用。智未来(上海)智能科技有限公司专注企业 AI 落地服务,帮助业务团队在验收时把业务要求讲清楚、把边界确认到位。