大多数传统企业系统建立在三项基本假设之上:任务快速完成、重试成本几乎为零,以及相同输入始终产生相同输出。然而,智能体(Agent)工作负载彻底打破了这些预期。这也解释了为何许多在试点阶段表现良好的项目,一旦进入无人值守的生产环境,便迅速演变为运营灾难。

问题的核心往往不在于模型本身,而在于基础设施和管理实践仍沿用旧有逻辑,未能适配智能体的新特性。

底层逻辑的根本性转变

智能体的运作规则与传统软件存在显著差异,主要体现在以下三个方面:

任务执行以分钟计,而非毫秒。 智能体任务的运行时长可能远超技术栈中设定的超时阈值。看似稳定的系统开始出现神秘故障,直到团队检查任务持续时间时,才察觉端倪。

重试机制产生真实成本。 传统软件中,重试逻辑的成本可忽略不计,因此团队常设置宽松的重试策略。但在按量计费的智能体模式中,每次尝试无论结果如何,均消耗计算资源。宽松的质量阈值结合自动重试,极易导致预算超支。由于云服务和大模型API费用通常按月异步结算,这些累积成本往往在数周后收到发票时才显现。

故障无法复现。 这是最大的挑战。传统调试中,工程师可通过重新运行来复现错误。但在智能体场景中,若缺乏对决策路径、工具调用和API运行的逐步追踪,调查将无从下手,审查只能沦为猜测。

为何试点环境掩盖了风险

经验丰富的团队之所以中招,是因为评估环境掩盖了上述风险。在交互式试点中,人类充当了“错误处理器”:他们阅读每个结果,发现问题并手动重试。由于尝试次数可见且修复由人工完成,成本透明,无需复杂的审计记录。

相比之下,自动化智能体工作流在“无头模式”下运行。当一个人在旁监督时表现可靠的工作流,若在夜间由调度器自动触发数百次且无人注视,其行为将截然不同。人类操作员在试点中逐个吸收并纠正了错误,使其在生产环境中变得不可见,而未记录的故障则可能破坏下游系统。

因此,在将智能体移至自动化生产前,工程负责人必须识别出所有由人类手动执行的任务,并指定由何种自动化检查或系统接管该职责。

生产环境面临的三大风险

隐形成本失控。 支出不再仅由使用量决定。自主AI循环会自动重试失败任务、重新生成响应并反复调用API,无需人工干预。开发人员设定的阈值可能导致月度账单波动幅度超过采购谈判的效果。团队应关注“每个完成单位的成本”,而非单纯的“每次API调用成本”,因为后者忽略了被丢弃的尝试次数。

“报告成功”的故障。 最昂贵的缺陷并非报错,而是结构有效但实质内容错误的结果。概率型智能体无法识别自身逻辑错误,可能输出格式正确但数据有误的内容。下游自动化系统会接受这些数据而不触发警报,常规监控系统也会因无“失败”信号而遗漏。因此,AI输出质量必须通过预定义的程序化标准(如断言检查、LLM-as-a-judge规则或语义基准)来衡量。

无人能解释的事件。 若团队无法说明是哪个模型版本、输入和设置产生了特定输出,就无法进行调查,审计人员亦然。在工作运行时捕获这些信息成本极低,但事后重建几乎不可能。

工程团队需自问的五个关键问题

  • 验收标准是否明确且书面化? 自动化需要清晰、可重现的验收标准。若成功标准在审查中随主观意见变化,软件将无法自动验证输出。
  • 典型完成单位需要多少次尝试?是否有上限? 针对模糊标准的无界重试循环是导致过度支出的最常见原因。
  • 我们记录了哪些运行数据?六个月后能否提供? 作业数据应包括确切的输入负载、提示词/模型版本、时间戳、执行延迟、重试次数、Token成本和最终输出工件。
  • 谁负责审批各类输出? 责任必须落实到具体个人,而非团队。这是出现问题时首要追溯的对象。
  • 提供商更新模型时会发生什么? 模型更新可能微妙地改变响应格式、准确性或推理逻辑,进而破坏自动化流水线。必须在部署生产前,在暂存环境中测试模型版本变更。

构建集中式AI工作区

目前,智能体工作往往分散:提示词存在于代码库,工件存放在存储桶,审批发生在聊天线程中。若无深入的“考古挖掘”,无人能提供完整的执行记录。

理想的AI工作区应是一个集中场所,共同记录运行、输入、输出、质量结果和审批情况。这不仅是产品决策,更是一种纪律:报告和日志记录必须在每次执行中连续进行,以便团队实时追踪异常并保持可审计性。服务于生产管道的供应商正越来越多地暴露此类信息,以区分故障、拒绝和性能下降的结果,而非仅展示精心策划的最佳案例。

填补技能缺口

构建智能体功能的团队多来自应用开发领域,习惯同步请求-响应模式。而智能体工作负载表现为长运行时间、部分失败且重新执行成本高的数据管道。若团队缺乏此类系统运维经验,技能差距将以一系列意外事件的形式显现。

智能体AI并未创造新的运营问题,而是移除了存在数十年的假设。大多数事件归因于流程缺口,而非模型质量。在任务运行前定义正确标准、衡量单位完成成本、记录足够调查信息、指定责任人,这些原则并不新奇,但却是当前大多数技术栈所未能原生支持的。