AI 风向转变:GPU 不再独美,CPU 借 Agent 与强化学习迎来事业第二春!

Agent Lightning:面向生产级AI Agent的分层强化学习训练框架 AI Agent在真实场景中常面临训不动、跑不稳、改不了的工程困境,其本质是传统端到端强化学习难以建模长程依赖与动态任务流。分层强化学习(HRL)通过任务分解、动作抽象和子策略优化,将复杂决策解耦为可验证、可调试、可复用的模块化单元。Agent Lightning正是这一思想的工程落地——它不修改模型权重或推理引擎,而是构建训练-执行分离的Server-Client架构,支持Reward函数隔离、环境概率模拟与策略热替换。该框架特别适用于多工具调用、跨会话状态追溯、多平台适配等典型生产挑战,已在电商比价、医 阅读详情

AI发展风向转变:GPU不再独美,CPU迎来事业第二春!

过去几年,老黄靠着GPU几乎把全世界的热钱都赚进了兜里,大家都说,搞AI只要显卡够多就行。但最近,风向悄悄改变了。

看似与显卡毫无关联的CPU开始涨价,就连此前成绩低迷、不被看好的英特尔,股价也迎来猛涨。上周五,其股价暴涨27%,突破了26年前创下的股价历史高点。如今,搞AI仅靠GPU已不够,CPU实力的高低也成为关键因素。

实际上,CPU从未离开过AI。在显卡成为AI主角之前,AI长期依靠CPU硬算。1998年,图灵奖得主LeCun在论文中提到,训练一个CNN模型需在单个CPU上运行两三天;若要训练更大的模型,则需更多更强的CPU。然而,用CPU训练AI效率极低,当时大家也没钱购置大量CPU,导致训练出的AI效果不佳,一些论文审稿人看到文章标题带有"神经网络"就会考虑拒稿。于是,为避免论文被拒,大家不得不给神经网络起别名。

但很快,人们发现神经网络的最佳搭档是GPU。2012年ImageNet大赛上,图灵奖得主Hinton带领的小队凭借两张GTX580显卡,将图像识别准确率提升了十个百分点。从此,神经网络飞速发展,AI成为新时代的黄金,GPU成为挖掘金矿的铲子,老黄也借此将英伟达市值推向世界第一,而曾经的王者CPU则沦为配角,只能承担杂活。

然而,到了2026年,人们发现仅靠GPU已无法满足AI发展需求。过去使用AI,如ChatGPT或DeepSeek,基本是对着网页交流,GPU进行矩阵运算预测答案。但随着Claude Code、龙虾等Agent工具的流行,情况发生了变化。AI不再是简单的一问一答,而是需要自主解决问题。例如,让AI购买奶龙玩偶,它需先了解奶龙,再选择合适工具搜索价格、款式等信息,最后整理核实并给出结果。可以看出,现在的Agent工作时是GPU和CPU交替作业,若CPU性能不佳,GPU也会消极怠工。因此,为避免GPU闲置,大家都在努力为数据中心增加CPU。微软建设最新数据中心Fairwater时,专门额外建造了一栋全是CPU的大楼。

此外,要提升模型性能也离不开CPU。如今让模型更聪明,仅增加显卡数量往往不够,这一代模型的进步越来越依赖强化学习。DeepSeek靠强化学习推出R1,OpenAI、Anthropic、Google、阿里Qwen、Grok等头部AI巨头也在强化学习上投入大量精力。强化学习就像让模型在考场中实战,做对奖励、做错扣分。验证强化学习结果的过程需要CPU协助,CPU甚至成为大模型最严格的导师。

为获取更多更强的CPU,各大模型厂商各出奇招。除向Intel购买CPU外,有技术积累的谷歌开始研发CPU Axion,无技术积累的Meta则与Arm合作共同研发。同时,大厂数据中心领导发现,购买更贵的CPU反而能省钱。因为AI大模型工作时,GPU的任务由CPU分配,若CPU性能差,会导致GPU效率低下,增加电费成本;而使用高端CPU虽自身耗电量大,但能让GPU更快完成任务,节省电费。AMD实验表明,使用好的CPU虽耗电量增加0.8%,但工作效率提升8%。

在多种因素的影响下,CPU迎来了事业的第二春。未来,随着AI Agent和强化学习的持续火热,CPU在数据中心的地位将更加稳固。这对英特尔、AMD甚至英伟达来说是难得的机遇,而对于游戏玩家来说,却可能面临电脑配置成本增加的问题,现在只能祈祷家里的电脑别坏。

AI自动打游戏实战:从环境搭建到智能Agent开发全解析 AI自动打游戏技术摘要:本文介绍了AI自动玩游戏的实现原理与开发流程。核心技术基于"感知-决策-执行"闭环,主要采用强化学习(DQN算法)和计算机视觉两种方案。文章详细讲解了环境搭建(OpenAI Gym+PyTorch)、游戏状态封装、DQN模型构建、经验回放和目标网络等关键技术点,并以贪吃蛇游戏为例,展示了从环境配置到模型训练的全过程。该技术可应用于各类游戏场景,通过不断优化策略实现超越人类玩家的表现。 阅读详情

相关推荐

AI Agent核心技术解析与应用实践

人工智能代理(AI Agent)作为能自主感知环境并做出决策的智能系统,其核心技术包含感知、决策与执行三大模块。感知层通过多模态输入(如CNN视觉处理、BERT文本理解)构建环境认知,决策层运用强化学习与知识图谱实现智能推理,执行层则通过API集成与机器人控制完成动作实施。这类技术在电商客服(处理1200+ QPS)和工业质检(99.93%准确率)等场景展现巨大价值,其架构设计常采用接口层、记忆层、认知层的分层模式。开发中需注意模型量化(如INT8)和内存优化(如GPU显存管理)等工程实践,结合LangCh

333

把CPU装进TPU:AI芯片开始为Agent设计

A:混合AI ASIC架构是指在同一颗芯片上集成CPU核心与AI专用计算单元(如TPU的矩阵运算单元)的设计方案。与传统方案(CPU和GPU/TPU分离、通过总线通信)不同,混合架构通过Chiplet或片上集成技术将两者封装在一起,消除跨芯片通信的延迟开销。其设计初衷是匹配Agent等"逻辑密集+计算混合"的工作负载——CPU处理推理决策、任务规划等逻辑操作,AI单元承担矩阵运算等重计算。

MacarenaZhang的博客 183

基于ViZDoom与强化学习的游戏AI智能体实战开发指南

AI智能体(Agent)作为能够感知环境、自主决策并执行动作的程序实体,其核心原理在于通过与环境交互来学习最优策略。在强化学习框架中,智能体通过最大化累积奖励来优化决策,这一技术价值在于能够应对复杂动态环境,实现超越预设规则的适应性行为。在游戏开发、机器人控制、自动化测试等应用场景中,智能体技术正发挥着越来越重要的作用。本文以经典游戏《毁灭战士》为实验环境,结合ViZDoom平台与PyTorch框架,详细讲解如何构建一个能够进行实时决策与对抗的AI智能体,其中涉及环境搭建、状态感知、奖励函数设计以及规则与学

WGH100817的博客 814

NVIDIA 发布 Vera CPU:AI Agent 时代,CPU 终于不再只是 GPU 的“后勤部长”

如果只看名字,很多人第一反应可能是:“啊?NVIDIA 不是卖 GPU 的吗?怎么也开始认真做 CPU 了?这句话放在十年前没什么问题,但放到现在 AI 时代,就有点不够用了。因为现在的大模型系统,已经不是单纯“GPU 跑矩阵乘法”这么简单了。真正复杂的地方,正在从单次推理,变成一整套。比如一个 AI Agent 要完成一个任务,它可能需要:理解用户需求;调用工具;执行 Python 代码;查询数据库;访问文件系统;调度多个模型;管理上下文;做结果验证;再决定下一步动作。

pipoA的博客 204

Agent Harness架构:长流程AI的编排与优化实践

AI工作流编排是复杂业务自动化的核心技术,其核心挑战在于多模型协同时的性能衰减与上下文丢失。传统DAG调度器在长流程场景下会出现指数级延迟增长,而基于强化学习的动态路由策略能实现毫秒级决策。记忆增强架构通过短期/中期/长期三级存储,有效解决跨环节特征丢失问题。在金融风控、医疗诊断等场景中,这类技术可使人工干预率降低80%以上。Agent Harness作为新一代AI编排框架,结合神经符号计算与RL路由算法,已在保险理赔、电商客服等场景验证其价值。随着2026年神经拟态硬件的普及,智能体并行处理能力将迎来数量

weixin_30920513的博客 423

AI Agent Harness Engineering 的容量规划与弹性扩展

第三部分:核心概念解析(Core Concept Analysis):这一部分将首先明确Agent Framework、Agent Runtime、Agent Harness、Agent Platform的定义和区别,然后详细介绍AI Agent Harness Engineering的核心概念结构、核心要素组成、概念之间的关系(包括实体关系图、交互关系图、核心属性维度对比表格)。第四部分:问题背景与演变(Problem Background and Evolution)

架构师的AI之路,分享AI应用开发架构的学习与实践。 305

【人工智能学习笔记 一】 AI分层架构、基本概念分类与产品技术架构

总的来说AI主要由算法、算力、数据组成,算法是核心。LLM是基于Transformer架构的算法成果,属于NLP领域关键技术,赋予AI理解和生成语言的能力。如果把AI AGENT看作人工助手,LLM就是其大脑,提供智能核心。AIGC则基于LLM等技术,生成语言、图像、音频等内容,就像人基于大脑的一些语言和视觉的表达。举个例子:云雀模型是LLM,豆包的问答查询基于此,是AIGC在语言领域的应用;图片生成借助专门模型,也是AIGC。豆包APP里的智能体是AI AGENT,集成云雀能力为用户服务。

MaoLin Tian's Blog 7482

AI模型与Agent开发实战:从核心原理到成本优化全解析

AI模型作为通过算法训练得到的数学表示,能够从数据中学习规律并做出预测决策。其技术原理基于函数映射f(x)=y的优化过程,通过调整参数使映射关系接近真实数据分布。在工程实践中,Transformer架构和XGBoost等模型为复杂任务提供了强大的计算基础。AI Agent作为模型的智能载体,通过感知、决策、执行和学习模块将模型能力转化为实际应用价值。在机器学习开发过程中,模型小型化技术和LangChain框架的应用显著提升了系统效率。当前,模型部署与资源优化已成为平衡性能与成本的关键,特别是在边缘计算和实时

weixin_33842304的博客 497

[人工智能]ML、DL、RL、AI、LLM、RAG与Agent:概念与架构概览

本文从工程实践角度,对机器学习(ML)、深度学习(DL)、强化学习(RL)、人工智能(AI)、大语言模型(LLM)、检索增强生成(RAG)以及智能体(Agent)进行整体性概述。重点关注常见架构模式、典型工作流和评估指标,并通过示意图和表格进行说明,适合作为多页技术参考材料。

TechEdu2026的博客 860

AI Agent Harness Engineering 执行效率提升:基于强化学习的任务调度算法实践

别担心!本文将带你从零到一、从理论到实践、从单Agent测试到多Agent集群部署,完整地解决上述AI Agent Harness Engineering中的任务调度难题。AI Agent Harness Engineering的核心概念与问题背景。

AI 算法实战派 370

QT-使用ECharts显示地图,还有更多惊艳的图表等待你的使用

QT-使用ECharts显示地图前言一、使用步骤1.下载示例2. QT使用HTML文件配置3.使用HTML文件4. 数据交互及自适应总结注意:这个地图是百度的在线地图,需要百度API密钥和在联网的状态下使用。离线使用图表 前言 我上文QT图表chart-饼状图,使用qt自带的图表库charts来显示图表,实现数据可视化,但是QT自带的图表库显示效果并不佳,通俗说,就是不好看。 然而,有这么一个开源图表库,图表种类极多,并且效果良好,能够实现具有很好的视觉冲击的数据可视化。 它就是Apache ECharts

博咯的博客 4900

AI进入Agent时代,CPU何以站上“算力C位”?

据悉,因ARM CPU瓶颈,英伟达已计划在下一代Rubin架构中大幅提升CPU核心数,并开放NVL72机柜对x86CPU的支持。此外,国内AI全产业链自主可控仍在不断推进,硬件端与软件端的生态适配正同步跟进,生态架构的升级将会对其中的各个环节提供性能上和产量上的双重要求,并带来明显的边际变化。至于为何CPU负载高于GPU,在东吴证券看来,Agent时代AI由“纯对话”转向了“执行任务”,因此产生大量if/else判断,这种“分支类任务”倘若由GPU执行,会因控制流发散导致算力利用率急剧下降。

no2454410的博客 340

SDM量化噪声等效到PLL输出的传递函数推导

在历年文章或书本中少见SDM量化噪声等效到PLL输出的传递函数推导。需了解SDM量化噪声的本质,配合欧拉方程简化,并将Z域转化成S域。最终结合断环处等效到PLL输出的传递函数,方可完成。

u010486560的博客 1410

从AI Agent到AGI:拆解通用人工智能的实践路径与工程思考

跟一个 AI 大模型深入聊 AGI,听起来有点科幻,但实际聊完,你会发现它更像一次对现有技术边界的“压力测试”。这过程不是为了得到一个标准答案,而是帮你理清思路,把那些模糊的、宏大的概念,拆解成我们作为开发者、产品经理或技术决策者能实际去思考、去判断、甚至去动手验证的具体问题。 很多人一听到 AGI(通用人工智能)就觉得离自己很远,要么是科幻电影,要么是实验室里的遥远未来。但我的看法是, 现在正是理解 AGI 内涵的最佳时机 。不是因为技术已经成熟,恰恰相反,是因为当前的大模型、AI Agent、多模态技术

weixin_30470643的博客 380

RTDETR多模态融合实战:基于注意力机制的红外与可见光目标检测优化

本文深入探讨了基于RTDETR模型的红外与可见光多模态目标检测优化方案。针对复杂光照下的检测难题,文章提出并实战演示了如何利用注意力机制(如SimAM与交叉注意力)实现RGB与IR特征的智能动态融合,从而构建更鲁棒的“全天候”检测系统,有效提升安防、自动驾驶等场景在夜间及恶劣天气下的检测精度与可靠性。

weixin_29083373的博客 189

Homebrew 必备软件清单:我的 macOS 开发环境搭建全记录

本文详细介绍了如何使用Homebrew在macOS上搭建高效的开发环境,包括基础配置、核心开发工具链、高效编码工具集等30个必备工具。通过Homebrew这一macOS缺失的包管理器,开发者可以一键安装命令行工具和GUI应用,大幅提升工作效率。文章还提供了日常维护命令和疑难问题解决方案,适合从新手到资深开发者的所有用户。

weixin_28836507的博客 354

AI 云原生时代,开发一个 Agent 可以多便利?看完这一篇你就知道了!!

开发一个 Agent,需要切换多少个平台? 6 月 12 日之后,这个答案是:一个。 几天前,由火山引擎主办的 2025 FORCE 原动力大会·春在北京举行。两天的大会,将火山引擎诸多 AI 能力展现了出来。豆包大模型 1.6 系列、TRAE、PromptPilot、MCP Servers、扣子开发平台等工具轮番出场,veRL、DeerFlow 等开源框架一一亮相,每一项都超出了我的期待。

2401_85327249的博客 1483

金蝶云星空初级实施认证考题

Q4.[单选题] (1.5分) 总账中的多账簿账表主要是基于什么进行查看的Q47.[多选题] (2.5分) 销售订单的收款计划页签勾选预收之后,预收控制环节可以控制哪些节点?

m0_51994557的博客 3125

AI Agent性能监控与调优策略

随着人工智能技术的飞速发展,AI Agent在各个领域得到了广泛应用。然而,如何确保AI Agent的高性能运行是一个亟待解决的问题。本文的目的在于深入探讨AI Agent性能监控与调优的相关策略,为开发者和研究者提供全面的理论和实践指导。范围涵盖了AI Agent性能监控的指标体系、调优的具体方法、实际应用案例以及相关工具和资源的推荐。本文将按照以下结构进行阐述:首先介绍AI Agent的核心概念与联系,为后续的分析奠定基础;接着详细讲解核心算法原理和具体操作步骤,通过Python代码进行说明;

项目管理的博客 1037

药物代谢仿真软件:PKSim_(6).案例研究与实践应用

通过本章的案例研究和实践应用,我们展示了如何利用PKSim软件构建药物动力学模型、进行参数估计、仿真预测和结果分析。这些方法不仅有助于优化药物代谢研究过程,还可以在药物研发中提供重要的数据支持。通过模型的构建和验证,我们可以更好地理解药物在体内的动态变化过程,为临床试验和药物治疗提供科学依据。

kkchenjj的博客 656

Open Dynamics Engine(ODE)物理引擎基础教程(I)——特点介绍

下一教程 Open Dynamics Engine(ODE)物理引擎基础教程(II)——相关概念 (在这一教程中将学习刚体、关节、碰撞的概念在ODE中的特点) 本文结构引言介绍特点使用ODE总结 引言 本文翻译自ODE官方教程英文版,有些地方增加了自己的理解。这一节介绍ODE的相关概念。 基础教程英文原版链接【http://ode.org/wiki/index.php?title=Manua...

腿足机器人领域 1680

AI Agent训练新革命!SkyRL-Agent开源框架,让小团队也能训练出39.4%通过率的编程神器!

SkyRL-Agent是伯克利团队推出的高效AI Agent训练框架,通过异步流水线调度技术将训练速度提升1.55倍,成本降低一半以上。使用该框架训练的SA-SWE-32B在软件工程基准测试中达到39.4%通过率,且展现出强大的跨领域泛化能力。其模块化设计使工具集成和后端切换更加灵活,大大降低了开发高性能AI Agent的门槛。

m0_59235245的博客 816

【城市数据集】世界城市数据库和访问门户工具WUDAPT

简介世界城市数据库和访问门户工具WUDAPT

WW、forever的博客 1286

DouZero部署实战:一条从零跑通斗地主AI的完整路线图

想不想让一台电脑学会斗地主?DouZero 是快手开源的斗地主 AI 框架,它靠自我博弈的深度强化学习,从零开始训练出能战胜大多数人类玩家的智能体,论文发表于 ICML 2021。这篇文章会带你走一遍 DouZero 部署实战的完整流程:装环境、加载模型、评估对局、自己训练,最后把 AI 用起来。 ## 斗地主凭什么难倒 AI 先讲个背景故事,方便你理解这套工具的价值。斗地主看起来只是"出牌"

gitblog_00862的博客 694

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

从零部署DouZero斗地主AI:6步可上手的强化学习模型实战指南

> 斗地主可能是你手机上打开频率最高的牌类游戏之一,但你可曾想过:让AI真正学会斗地主,究竟有多难?DouZero正是一个把「斗地主AI」这件事做成开源项目的强化学习框架。本文要解决的问题很具体:如何把这个模型从仓库里的源码,一步步变成一套能训练、能评估、能对战的实际可用系统。全文按六个步骤推进,每个步骤都有可以直接照抄的命令,新手跟着做即可完成部署。 --- ## 它到底凭什么能赢?先认识这

gitblog_00043的博客 144

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

英伟达突然“变心“加码CPU,AI架构大洗牌来临,程序员不学这波就OUT了!

在AI智能体时代,CPU从GPU的配角转变为系统瓶颈,英伟达等巨头正大幅提升CPU核心数并开放对x86 CPU的支持。Agent时代下,CPU因应用调度压力、高并发工具调用和沙箱隔离开销需求激增,且更适合执行分支类任务。CPU搭配大容量内存成为承载KV Cache的主流架构选择,导致服务器CPU供不应求,价格上调10-15%。这一趋势为AI开发者带来新的架构挑战与机遇。

m0_59235945的博客 833
上一篇: 爱奇艺布局AI 12年,龚宇激进押注引众怒,长视频行业能否借AI“弯道超车”?
下一篇: 世界模型成AI底层范式总线:具身、自动驾驶、3D生成场景各有玩法,产业分工初现
IT界那些事儿
博客等级 码龄6年 2万+粉丝 22原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值