引言:热潮之下,企业更该问的是“怎么用”
九月的北京,一场聚集了全球创业者的峰会,再次把大模型推到聚光灯下。台上谈论的是时代机遇,台下企业负责人散场后追问的却是另一个问题:这套东西,怎么装进我自己的业务里?
这个落差,恰恰是当下AI技术落地最真实的写照。模型能力在过去两年里以季度为单位刷新,但企业侧的项目成功率并没有同步提升。原因不在于模型不够强,而在于大多数团队把“接入一个API”误当成了“完成一次AI转型”。真正决定成败的,是模型之外的那一层工程能力:知识如何组织、流程如何编排、结果如何评估、风险如何兜底。
本文不谈宏大叙事,只从技术落地的角度,拆解大模型应用、RAG、智能客服与AI Agent开发这四条主线,以及它们如何与企业的网站、小程序、APP和后台系统咬合在一起。
一、大模型不是产品,它只是产品的一个零件
很多企业在做AI规划时,习惯性地把“选哪个模型”当成第一个决策。这其实是把顺序搞反了。模型是通用能力供给,它擅长的是语言理解、生成、归纳和一定的推理,但它不知道你的库存规则、不清楚你的售后政策、也无法判断某位客户是否属于重点客户。
所以更合理的思考顺序是:先确定业务场景的输入输出,再确定需要哪些知识,最后才决定用哪个模型、要不要微调、要不要加检索。
从工程视角看,一个可用的企业级AI应用通常由四层构成:
- 交互层:用户从哪里进入,是网页、小程序、APP内的对话框,还是嵌入在客服工单系统里的辅助面板;
- 编排层:负责意图识别、任务拆解、工具调用、多轮状态管理,这一层决定了系统是“聊天机器人”还是“能干活的助手”;
- 知识层:企业私有文档、商品库、订单数据、FAQ,通过检索或结构化查询供给模型;
- 模型层:基础大模型,可能是一个,也可能是大小模型混用的组合。
绝大多数项目的价值差异,其实发生在中间的编排层和知识层,而不是模型层。这也是为什么同样的基础模型,不同团队做出来的产品体验会差出几个量级。
二、RAG:让模型学会说“企业自己的话”
检索增强生成(RAG)是当前企业落地最主流的技术路径。它的核心逻辑并不复杂:用户提问后,系统先从企业知识库中检索出相关片段,再把片段作为上下文交给模型生成答案。听上去简单,但真正做好的项目并不多。
常见的三个坑
第一,切分策略粗暴。把一份产品手册按固定字数硬切,会把一条完整的规格说明拆成两半,检索出来的上下文残缺不全,模型只能靠猜。更合理的做法是按语义结构切分,保留标题层级和表格结构,并对过短的片段做合并。
第二,只用向量检索。纯向量检索擅长语义相似,但对型号、编号、专有名词这类精确匹配并不敏感。生产环境里,向量检索与关键词检索的混合召回,再加上重排序模型,通常比单一方案稳定得多。
第三,没有评测集。这是最致命的一点。没有一批固定的问答对作为回归测试,任何一次知识库更新或提示词调整都是在盲改。建议在项目早期就沉淀一百到三百条真实问题,标注标准答案和可接受的引用来源,把它当作长期资产维护。
RAG的边界在哪里
RAG适合回答“文档里写了什么”,不适合回答“统计一下这个月的情况”。涉及数值计算、聚合查询、实时状态的任务,应该走结构化查询或工具调用,而不是硬塞给检索。判断标准很简单:如果答案需要动态计算,就不要指望RAG。
三、智能客服:从关键词匹配到意图理解
智能客服是AI技术最早商业化、也最容易被低估的场景。过去基于规则和关键词的客服系统,用户体验往往止步于“您说的是不是以下问题”。大模型带来的变化是,系统开始能理解口语化的、带情绪的、信息不完整的表达。
但企业在评估智能客服时,不能只看“回答得像不像人”。更值得关注的是四组指标:
- 首次解决率:用户一轮对话内问题被解决的比例;
- 转人工率与转人工准确率:该转的转、不该转的不转;
- 幻觉率:系统给出无依据答案的比例,这个指标直接决定合规风险;
- 平均处理时长与人力节省:最终要回到成本账上。
实践经验是,把智能客服设计成“人机协同”而非“完全替代”,效果通常更好。AI负责意图识别、信息收集、常见问题解答和工单预处理,遇到高价值客户、投诉、退款争议等敏感场景,平滑移交人工,并把对话摘要和已收集信息一并带过去。人工坐席的接起效率提升了,用户的等待感反而下降了。
需要提醒的是,客服系统往往不是孤立存在的。它需要读取订单系统的数据、调用物流接口、写入工单库。这就意味着,AI能力的上限,常常取决于企业后台系统的开放程度。系统定制做得扎实的企业,AI接入会快得多。
四、AI Agent:从“会回答”到“能办事”
如果说RAG解决的是知识问题、智能客服解决的是服务问题,那么AI Agent解决的是执行问题。
Agent的本质,是让模型在一个循环里工作:理解目标、规划步骤、调用工具、观察结果、修正下一步。它不再只是输出一段文字,而是能查库存、下工单、发通知、生成报表、触发审批流。
Agent落地的三个关键条件
一是工具定义要清晰。每个可被调用的能力,都要有明确的输入输出结构和边界说明。工具描述写得含糊,模型就会乱调用,这是Agent失败最常见的原因。
二是权限与审计要前置。Agent能做什么、不能做什么,必须在系统层约束,而不是靠提示词祈祷。涉及资金、对外发布、数据删除的动作,应当设置人工确认节点。
三是失败处理要设计。工具调用超时、返回异常、参数不合法,这些在真实环境中是常态。一个成熟的Agent项目,处理异常路径的代码量往往超过正常路径。
什么样的场景适合先上Agent
建议从“高频、低风险、流程清晰、结果可验证”的场景切入。例如内部知识问答与文档检索、销售线索的初步筛选与信息补全、售后工单的自动分类与派发、运营数据的定时汇总与异常提醒。这些场景的共同点是:即使Agent偶尔出错,也不会造成不可逆的损失,而节省的人力却实实在在。
相反,涉及合同签署、定价决策、对外客服承诺等高风险动作,应当先做辅助建议,由人确认后再执行。
五、为什么大量AI项目卡在POC阶段
做过几个AI项目的团队大概都有类似体会:演示效果惊艳,上线后无人使用。常见原因有四个。
- 数据没治理。知识库里的文档版本混乱、互相矛盾,模型再强也只能输出矛盾答案。AI项目的一半工作量在数据侧。
- 流程没打通。AI给出的结论无法进入业务系统,用户还要手动复制粘贴,价值瞬间归零。
- 缺少评估机制。没有指标就无法迭代,团队只能在感觉里打转。
- 成本模型没算清。长上下文、频繁调用、重排序模型叠加起来,单次对话成本可能远超预期。合理的做法是做模型分级,简单任务用小模型,复杂任务才升级。
一个务实的态度是:把AI项目当作业务系统项目来做,而不是当作技术尝鲜来做。它需要产品定义、需要数据准备、需要上线后的运营和持续调优。
六、载体决定体验:AI能力需要落在用户真正会用的地方
很多企业忽略了这一点:AI能力再强,如果入口不对,用户就不会用。企业客户习惯在官网查找资料,终端消费者习惯在小程序里下单,内部员工习惯在APP或后台系统里处理任务。同一套AI能力,需要以不同形态出现在不同入口。
这也是为什么在实际项目中,AI建设往往和前端载体建设同步推进。深圳网站建设团队在做企业官网时,已经开始把智能问答、产品选型助手、资料检索作为标准模块嵌入;惠州网站开发项目中,制造业客户更关注产品参数查询与售后指引的自动化;小程序开发场景里,AI被用来做导购、预约和订单状态解释;APP开发则承担了更复杂的多轮交互和离线场景。而在这些入口背后,系统定制与AI Agent开发共同构成了真正支撑业务运转的底座。
换句话说,前端是触点,后端是能力,中间的价值在于打通。只做前端不加AI,体验平庸;只做AI不接系统,价值悬空。
七、给企业的五条落地建议
- 选一个能算清账的场景先做。不要一上来就做“企业级AI中台”,先做一个能在三个月内看到效果的切口。
- 把知识资产当作长期工程。文档规范化、版本管理、权限体系,这些枯燥的工作决定了RAG的上限。
- 先建评测集,再谈优化。没有度量就没有迭代,这是所有AI项目的第一性原理。
- 保留人工兜底。尤其在对外的客服、销售场景,人机协同的满意度通常高于纯自动。
- 选择懂系统的团队,而不是只会调模型的团队。AI落地的难点在集成,在数据,在流程,不在模型本身。
结语:把AI装进业务,才是真正的高度
峰会上的热度会周期性出现,但企业内部的效率提升是日复一日积累出来的。大模型提供了前所未有的通用能力,而能否把它转化为可衡量的业务价值,取决于三件事:知识是否被有效组织,流程是否被打通,入口是否被用户真正使用。
微商派(vsppt)长期专注于网站开发、小程序开发、APP开发、系统定制与AI Agent开发,服务过大量从传统业务转向数字化运营的企业。在实际项目中,团队更倾向于先把数据与流程梳理清楚,再把RAG、智能客服、Agent等能力嵌入到企业已有的网站、小程序与后台系统中,让人工智能成为业务链条上的一环,而不是一个孤立的演示品。技术的高度最终要由落地的深度来证明,这条路没有捷径,但每一步都算数。