Agent Runtime 已成基础设施:告别自建,聚焦 Trace、Policy 与垂直智能

Agent Runtime坍缩:从自建沙箱到托管会话的工程范式转移 Agent runtime 是支撑 AI 智能体安全、可靠、可追溯执行的基础层,其核心涉及会话管理、沙箱隔离、凭证管控与事件日志等关键技术。随着 Anthropic Managed Agents、AWS Bedrock AgentCore 等托管服务成熟,runtime 正从定制化基础设施演进为标准化云能力——不再需要手动维护 microVM 集群或自研 state manager,而是通过 YAML 契约定义行为、以 session-as-event-log 实现状态持久与故障恢复、依托 scope-aw 阅读详情

1. 这不是新赛道,而是 runtime 层的“临终公告”

上周四(4月8日,2026年),Anthropic 宣布 Claude Managed Agents 进入公开测试阶段。新闻稿里写着“十倍提速”“Notion 和 Asana 已接入”“沙箱执行+会话快照+凭证托管由 Anthropic 全权负责”,技术博客则用更克制的语言描述:他们把 agent 架构拆成了三个稳定抽象层——Session(持久化事件日志)、Harness(无状态执行器)、Sandbox(按需拉起的隔离环境)。p50 首 token 延迟下降约 60%,p95 稳定性优于 90%。这些数字很亮眼,但真正值得你停下来看一眼的,不是“Anthropic 又做了什么”,而是“为什么偏偏是现在,而且是以这种方式”。

我用“临终公告”这个词,不是危言耸听,而是基于过去三年亲手搭过七套生产级 agent 系统的真实体感。Managed Agents 的核心设计——session 作为外部事件日志、harness 无状态、sandbox 按需销毁——本质上是对一个早已被反复验证、却长期被忽视的工程事实的正式承认: 模型上下文窗口从来就不该是你的状态存储层 。它不是数据库,不是 Redis,更不是你业务逻辑的备份盘。把它当状态层用,就像把冰箱当保险柜——短期能塞进去,时间一长,东西发霉、标签脱落、开门时还可能砸到脚。

关键词“Towards AI - Medium”背后代表的是一类典型读者:不是刚学 Python 的大学生,也不是只看 Demo 视频的 CTO,而是每天在 LangChain、LlamaIndex、CrewAI 之间切来切去,在本地跑通后上云就崩、在测试环境 OK 上线就丢 session 的一线工程师。你们知道 context overflow 是什么味道——不是报错红屏,而是凌晨三点收到告警,发现用户提交的报销单被自动改成“请报销我的火星殖民地建设费”,而日志里只有一行模糊的 context truncated at position 32768 。这种失败不吵闹,但昂贵得让人失眠。

Anthropic 这次没发明新轮子,他们只是把行业里最痛的那个补丁,缝进了一件剪裁合体的西装里。YAML 定义 agent 行为、沙箱内 credential 隔离、$0.08/小时的 session 运行计费——这些都不是魔法,而是过去两年我们团队在 AWS Lambda + ECS + Secrets Manager 上踩坑踩出来的标准答案。区别在于,Anthropic 把这套方案封装成服务,开箱即用;而你如果自己搭,光是搞定 sandbox 内 credential 注入不泄露这一项,就得花掉两个高级工程师两周时间,还得祈祷下次 CVE 不爆在你用的容器运行时里。

所以,这不是一篇教你“如何快速上手 Managed Agents”的入门指南。这是一份给正在评估是否要自建 agent runtime、是否要押注某家初创公司、或者正被老板追问“为什么我们的销售 agent 总在第三步掉链子”的工程师写的战地笔记。接下来我会一层层拆开这个“已注定走向零价”的 layer:它到底解决了什么真问题,为什么 AWS 五个月前就交了卷,以及——更重要的是——当 runtime 本身变成水电煤一样的基础设施时,你该把精力和预算,投向哪一层才不会在未来十八个月内发现自己在维护一个正在快速贬值的资产。

2. 核心设计解构:为什么 Session 必须是事件日志,而不是上下文快照

2.1 “Session-as-Event-Log” 不是架构炫技,而是对失败模式的精准外科手术

先说一个真实案例。去年 Q3,我们为一家跨境物流客户上线了一个“智能运单异常处理 agent”。流程分四步:1)解析用户上传的 PDF 运单;2)调用 DHL API 查询实时轨迹;3)比对合同条款判断是否触发赔偿;4)生成中英文赔偿说明并邮件发送。整个流程设计时预估耗时 12 分钟。上线第一周,p95 响应时间稳定在 14 分钟以内。但到了第二周,开始出现诡异现象:用户反馈“系统说已处理完成,但没收到邮件”,后台日志显示第 4 步执行成功,可邮件服务提供商的 webhook 日志里根本没有那条记录。

排查三天后,真相浮出水面:模型上下文在第 3 步结束时已逼近 Claude 3.5 Sonnet 的 200K token 上限。当第 4 步需要注入邮件模板、收件人列表、附件元数据时,LLM 自动执行了“智能截断”——它没有报错,而是静默丢弃了最早加载的 PDF 解析结果(约 18K tokens),转而保留了最新调用的 DHL API 返回体(含大量冗余字段)。于是,agent 在缺失原始运单信息的情况下,凭记忆“脑补”出一封格式正确但内容全错的邮件,再调用 SMTP 接口发送——而那个接口,恰好不校验收件人真实性,只管发。

提示:这不是模型 bug,而是上下文管理机制的必然结果。所有主流 LLM 的 context window 都是 FIFO(先进先出)缓冲区,而非 LRU(最近最少使用)缓存。当你持续追加 token,最老的内容必然被挤出,且模型自身无法感知这一过程。它看到的永远是“当前上下文”,而不知道“当前上下文”已经残缺。

Anthropic 的 Session-as-Event-Log 正是针对此病灶的根治方案。它把 session 拆成两个物理实体:

  • Harness 层 :纯粹的执行引擎,只做三件事——接收 execute(tool_name, input) 请求、调用对应工具、返回字符串结果。它不保存任何状态,不记住历史,甚至不关心这次调用是第几步。你可以随时 kill 掉这个进程,只要 sessionId 不变,下一次 awake(sessionId) 就能从上次中断处继续。
  • Session Store 层 :独立的、持久化的事件日志服务。每次 tool call 的输入、输出、时间戳、调用者身份、沙箱 ID 全部以结构化事件(如 JSONL)写入。这个 store 可以是 S3 + Athena,可以是 TimescaleDB,也可以是 Anthropic 托管的专用服务。关键是——它与模型推理完全解耦。

这种分离带来的直接收益,远超性能数字:

  • 可审计性 :当用户投诉“你们赔错了”,你不再需要翻三天前的千行日志大海捞针。只需查 SELECT * FROM session_events WHERE session_id = 'xxx' ORDER BY timestamp ,就能还原出每一步的原始输入和机器输出,连模型生成的中间思考链(if enabled)都清晰可见。
  • 可重放性 :发现 bug 后,开发无需复现整个用户操作流。直接用 session log 中的 events 重放,精准定位是工具返回异常,还是模型解析逻辑有误。
  • 可迁移性 :当你要把 agent 从 Anthropic 迁移到 Bedrock AgentCore,或从云端迁回私有集群,唯一需要适配的只有 Harness 的 execute() 接口协议。Session log 格式是标准的,事件语义是稳定的,业务逻辑不随 infra 变动而失效。

2.2 Credential 隔离:不是安全合规的装饰品,而是生产环境的生存底线

再聊一个更隐蔽、但杀伤力更强的设计细节:credential 隔离。Managed Agents 文档里轻描淡写一句“credentials live in vau

LLM Agent Runtime 已成基础设施:三层分离架构与生产落地实践 LLM Agent Runtime 是指支撑大语言模型智能体持续运行、状态管理与工具调用的底层执行环境,其核心原理在于将状态存储(State)、执行调度(Harness)和工具运行(Sandbox)解耦,以解决生产中状态不可靠、执行不可控、凭证不安全等共性问题。该技术已从早期实验性方案演进为云厂商标配能力,具备高可用、可审计、强隔离等工程价值,广泛应用于销售线索评分、合规文档分析、跨系统知识协同等企业级AI场景。本文基于 Anthropic Managed Agents 的实战经验,深入解析 session 阅读详情

相关推荐

Agent Runtime 正在退化为水电基础设施

Agent 运行时(runtime)是支撑大模型智能体持续交互、状态管理与安全执行的基础层,其核心原理在于解耦状态、隔离执行与统一可观测性。随着 Anthropic Managed Agents 等工业级方案落地,runtime 的技术价值正从‘自建复杂系统’转向‘稳定、轻量、可计费的抽象层’,类似90年代操作系统对硬件的虚拟化。这一演进显著提升了工程确定性与安全水位,使企业得以聚焦于 prompt 设计、tool 编排与业务 guardrail 等高价值环节。典型应用场景包括金融分析 agent、客服会话

341

Agent Runtime 正在退化为基础设施:从胶水代码到电力插座

Agent 运行时(agent runtime)已不再是可选的技术组件,而是像 HTTP 协议栈或容器运行时一样,正快速演进为默认的底层基础设施。其核心原理在于解耦状态管理与模型执行——通过 Session-as-Event-Log 实现持久化、可审计、可回放的状态契约,配合无状态 Harness 与牲畜化 Sandbox 构建高可靠、强隔离、易扩展的执行平面。这一技术范式大幅降低长流程 agent 的工程风险与合规成本,尤其在金融、医疗等强监管场景中,成为保障审计追溯、凭证安全与 SLA 可控的关键底座。

chunchan1381的博客 343

Agent Runtime:AI 应用的新型操作系统基础设施

Agent runtime 是支撑智能体(Agent)可靠执行的核心基础设施层,其本质是将状态管理、工具调度与沙箱隔离等复杂性封装为标准化接口,类似操作系统对硬件资源的抽象。它基于事件日志(Session-as-Event-Log)、无状态执行器(Harness)和按需销毁沙箱(Sandbox)三大原理构建,显著提升长周期、高合规场景下的可审计性、断点续传能力与安全隔离水平。技术价值在于降低 AI 应用运维熵值,推动 agent 从实验原型走向金融、法律、销售等生产级场景。当前主流云厂商(AWS Bedro

weixin_30458043的博客 412

AI Agent Runtime层价格战:从自建Harness到托管服务的工程经济性抉择

AI Agent Runtime层正经历类似云计算早期的基础设施标准化进程——它不再是个体技术组件,而是承载Agent生命周期管理、状态持久化与安全执行的‘AI操作系统内核’。其核心原理在于解耦计算上下文与状态存储,通过结构化事件日志(durable event log)实现可审计、可恢复的会话管理,并依托凭证隔离(credential vault)满足SOC2、HIPAA等合规刚性需求。这一层的技术价值已从性能优化转向工程经济性与法律确定性:降低运维熵增、压缩迁移成本、固化API契约。典型应用场景覆盖销售

weixin_30527323的博客 437

Agent Runtime 正在商品化:从沙箱到事件日志的架构演进

Agent runtime 是支撑大模型智能体稳定运行的底层基础设施,其核心原理在于解耦状态管理与模型推理——通过将 session 建模为可持久化、可审计的事件日志,并采用无状态执行器(Harness)与隔离沙箱(Sandbox)实现安全、可靠、可重放的自动化工作流。这一设计显著降低 prompt 工程复杂度,提升多 step 多 tool 场景下的稳定性与可观测性,已成为金融、法律、销售等高要求行业的生产级标配。随着 AWS、Anthropic、Google 等厂商推动 runtime 免费化与云原生集

ajwh64482的博客 340

AI Agent Runtime 层的归零时刻:从托管服务到安全操作系统

AI Agent Runtime 是支撑智能体执行的核心抽象层,其本质是将模型推理、工具调用、状态管理与安全策略进行工程化封装。随着 Anthropic Managed Agents 等方案采用 Harness-Sandbox-Vault 三权分立架构,Runtime 正加速走向标准化、轻量化与云原生化——这既是技术成熟的标志,也预示着其商业价值正被压缩为接近零的基础设施成本。在此背景下,真正的技术价值已向上迁移至 Trace Store(可审计的行为黑匣子)、Policy Engine(可编程的治理宪法)

562

Agent Runtime 正在成为 AI 时代的操作系统层

Agent runtime 是支撑大模型智能体稳定、安全、可追溯运行的基础执行环境,其核心在于会话状态管理、沙箱隔离与凭证管控。它通过抽象底层资源,让开发者聚焦业务逻辑而非基础设施运维,技术价值体现在生产就绪性、跨模型兼容性与企业级治理能力。典型应用场景包括客服自动化、金融风控、研发提效等需长周期、多工具协同的复杂任务。随着 AWS AgentCore、Anthropic Managed Agents 等方案成熟,runtime 正加速从定制化组件演进为云平台标配能力,而 trace store、gover

cixu3288的博客 386

linux 特殊符号含义

linux 特殊符号含义 #¥等字符组合

海康WEB3.3控件开发包 V3.3 前端vue项目调用实时监控画面

本需求的完成离不开后端将设备映射到公网, 以及前端单独部署demo页面这个思路的转变。

hero8011的博客 1万+

STM32 ES8266上阿里云IOT MQTT实践【第七章】:ESP8266+MQTT上阿里云物联网平台实践

本篇文章讲述了如何使用stm32接入阿里云IOT,WiFi模块为ESP8266,可以实现发布以及订阅。

超级大洋葱的博客 2万+

手机摄影新宠:In-line Hardware EIS如何让你的4K视频稳如鸡头(附实测对比)

本文深入解析了手机摄影中的In-line Hardware EIS(硬件级行内电子图像稳定)技术。通过对比传统软件EIS,阐述了其通过硬件管道实时处理实现极低延迟、减少画面裁切和有效抑制果冻效应的核心优势,并结合4K视频的日夜间实测,展示了该技术如何让手持拍摄的视频“稳如鸡头”,显著提升创作体验与成片质量。

tree的博客 994

SAP采购订单行项目增强实战:用BADI ME_GUI_PO_CUST添加自定义字段(避坑指南)

本文详细解析了如何通过BADI ME_GUI_PO_CUST在SAP采购订单行项目中添加自定义字段,包括技术架构理解、字段扩展步骤、自定义函数组创建及BADI实现。文章特别强调了避开官方文档未提及的陷阱,如字段映射限制和屏幕显示问题,并提供了高级优化技巧和性能建议。

weixin_30402343的博客 594

为什么idea已经改了UTF-8还是乱码,如何解决?

🏆本文收录于 《全栈Bug调优(实战版)》 专栏,该专栏专注于分享我在真实项目开发中遇到的各类疑难Bug及其深层成因,并系统提供高效、可复现的解决思路和实操方案。无论你是刚入行的新手开发者,还是拥有多年项目经验的资深工程师,本专栏都将为你提供一条系统化、高质量的问题排查与优化路径,助力你加速成长,攻克技术壁垒,迈向技术价值最大化与职业发展的更高峰🚀!

**My Coding Family** 1576

零基础教你学RDMA驱动开发:从入门到精通--第6章 内存管理与DMA映射​6.2 DMA地址转换:内核dma_map_single()与硬件IOVA(I/O虚拟地址)​

本文深入探讨RDMA驱动中DMA地址转换机制,重点分析内核dma_map_single()函数与硬件IOVA的作用。主要内容包括:1)DMA地址转换的必要性,解决CPU虚拟地址与HCA设备DMA地址的空间割裂问题;2)内核DMA映射机制实现原理,涵盖无IOMMU(直接物理地址映射)和有IOMMU(IOVA转换)两种场景;3)硬件IOVA的工作流程及其与RDMA内存注册的结合;4)RDMA驱动开发中的关键问题,如缓存一致性、映射方向错误、IOVA泄漏等;5)以mlx5驱动为例的实践分析。文章强调DMA地址转换

xiaoheshang_123的博客 239

使用 Simulink 进行电力电子系统的小信号模型仿真

电力电子系统(Power Electronics System)包括各种功率转换器(如 DC-DC 转换器、逆变器等)。这些设备中的关键组件(如 MOSFET、IGBT、电容器、电感器等)不仅影响系统的性能,还直接关系到系统的稳定性、效率和可靠性。因此,在设计阶段进行详细的建模和仿真至关重要。小信号模型仿真的目的是通过线性化非线性系统来评估其动态特性,包括增益、相位裕度、带宽等指标。通过本教程,我们介绍了如何使用 Simulink 进行电力电子系统的小信号模型仿真。背景介绍。

xiaoheshang_123的博客 480

手把手教你学Simulink--基于Simulink的风力发电系统用双馈电机控制仿真建模

特点高效节能:在广泛的风速范围内保持高效的能量转换。独立控制有功和无功功率:通过控制转子电流实现对有功和无功功率的独立调节。较低的成本:相比直接驱动或全功率变流器方案,成本较低。挑战控制复杂度较高:需要复杂的控制算法来实现有功和无功功率的解耦控制。对电网波动敏感:需要良好的稳定性控制策略以应对电网电压波动。利用Simscape Electrical中的模块构建DFIG的物理模型,配置参数如电阻、电感、极对数等。matlab深色版本% 添加DFIG电机模块。

MHD0815的博客 346

怀旧版电脑GBC模拟器

再现原版GBC掌机的界面,电脑运行连游戏界面都一样大小,很怀旧,很真实,(英文版)强烈推荐,很小的文件,很难才找到的。

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

Devexpress16.2.6破解工具

Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具

上一篇: DeFi AI Agent:解决流动性闲置的链上自治方案
下一篇: 多维聚合数据操作:超越GROUP BY的语义立方体实践
tempdowncomputer
博客等级 码龄16年 2粉丝 405原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值