企业生成式AI最新调查:AI支出激增6倍,多模型部署盛行

AI摘要

海外风险投资机构报告显示,2024年生成式AI成为企业关键任务,AI支出激增至138亿美元。企业在AI转型投入决心增强,应用层热度攀升,部分用例实现显著回报。同时,智能体架构崭露头角,多模型策略盛行,未来智能体或引领变革,现有企业面临挑战,AI人才短缺加剧。

01d280c4e9bc7caba73d9304d85a46fb.png

企业AI格局正在迅速重塑。随着实验项目逐步落地投入生产,海外风险投资机构‍Menlo Ventures最新发布的《2024年企业生成式AI现状》报告对600名企业IT决策者展开了调研,深入分析了这场变革中正在浮现的新赢家与失利者。

(本文由OneFlow编译发布,转载请联系授权。原文:https://menlovc.com/2024-the-state-of-generative-ai-in-the-enterprise/)

来源|Menlo Ventures

OneFlow编译

译文及题图由SiliconCloud平台生成
 

1

从实验到生产

2024年是生成式AI成为企业关键任务的转折点。这些数字讲述了一个戏剧性故事:今年AI支出激增至138亿美元,是2023年AI支出(23亿美元)的6倍多——这清楚地表明企业正在从实验转向生产阶段,将AI嵌入其业务战略的核心。

AI支出激增反映了组织层面的乐观情绪;72%的决策者预计,生成式 AI 工具将在不久的将来得到更广泛的应用。这种信心并非空穴来风——生成式AI工具已深深融入从程序员到医疗保健提供者的日常工作中。

尽管前景乐观且投资不断增加,许多决策者仍在摸索哪些策略适合他们的企业,哪些则不然。超过三分之一的受访者表示,他们对于如何在企业内实施生成式AI缺乏清晰愿景,但这并不意味着他们在盲目投资,而反映了我们仍处于大变革的初期阶段。企业领导者才刚刚开始理解生成式AI对其组织的深远影响。

去年,我们的《2023年企业生成式AI现状》报告描述了AI的早期试验阶段。今年,我们更新并拓展了2024年报告,其中包含600位企业领导者的见解,重点介绍了随着组织从实验项目转向全面生产而出现的新兴趋势,这使得AI成为企业发展不可或缺的核心驱动力。

2

生成式AI投资彰显企业日益增长的投入决心

如今,60%的企业生成式AI投资来自创新预算,反映了生成式AI采纳的初期阶段。然而,40%的生成式AI支出来自更为长期的预算,其中58%的资金是从现有预算中重新调配,这表明企业在AI转型方面的投入决心与日俱增。

8ae869683ced0ca0ec23d771c197e43f.png

尽管基础模型投资仍主导着企业生成式 AI 支出,但应用层正以更快的速度增长,这得益于基础设施层面的设计模式融合。企业正利用这些工具优化跨行业的业务流程,为更广泛的创新铺平道路,从而创造巨大价值。

在接下来的章节中,我们将探讨企业采用生成式AI的两个关键维度:

  • 应用层,初创企业迎来首次突破,并开拓着新兴的蓝海市场;

  • 现代AI技术栈,LLM的军备竞赛正在重塑竞争格局,同时特定基础设施模式获得广泛采用。

3

深入探索应用层:应用层领域热度攀升

2024年,应用层迎来了大量行业动态。随着多种架构设计模式的成熟,企业广泛采用大语言模型(LLM),充分发挥其在各领域的优势,推动效率提升和功能创新。企业买家积极把握这一机遇,2024年在生成式AI应用领域的投资达到46亿美元,相较于去年报告的6亿美元,增长近8倍。

企业不仅加大了投入,而且设定了更为远大的目标。平均而言,各组织已确定了10种潜在应用场景,体现了其广泛而雄心勃勃的战略规划。近四分之一(24%)的应用场景被列为近期实施重点,显示出向实际部署迈进的强劲势头。然而,这仅是一个开端。大多数公司仍处于采用初期阶段,仅有少数应用场景投入生产,而三分之一(33%)的应用场景仍处于原型设计和评估阶段。

4

企业内部:最具价值用例排名

尽管实验仍在持续,但采用趋势表明,部分用例已通过提升生产力或运营效率实现了显著的投资回报:

  • 代码助手(Code Copilot)以51%的采用率引领潮流,成为开发者群体中AI最早且最强力的用户。GitHub Copilot迅速突破3亿美元年收入,验证了这一趋势,同时新兴工具如Codeium和Cursor也在快速发展。除了通用的编码助手,企业还开始购买针对特定任务的Copilot工具,例如Harness的AI DevOps工程师和QA助手,专用于流水线生成和测试自动化;此外,还有像All Hands这样的AI智能体,能够执行偏向端到端的软件开发任务。

  • 聊天机器人应用已获得显著普及,企业的采用率达到31%。这些应用为内部员工和外部客户提供可靠的全天候服务支持。Aisera、Decagon和Sierra的智能体直接与终端客户互动,而Observe AI则为联络中心的智能体提供实时通话指导,进一步提升客户服务效率。

  • 企业搜索、数据检索与提取及转换(分别占比28%和27%)反映了企业强烈希望解锁并利用分散在组织各处数据孤岛中的隐藏宝贵知识。解决方案如Glean和Sana能够连接电子邮件、即时通讯工具及文档存储,实现跨异构系统的统一语义搜索,并提供由AI驱动的知识管理服务。

  • 会议总结在用例中排名第五,采用率为24%,通过自动化笔记和要点提取,节省了时间并提升了生产力。像Fireflies.ai、Otter.ai和Sana这样的工具能够捕捉并总结在线会议内容,而Fathom则能从视频中提炼关键点。Eleos Health将这一创新应用于医疗领域,自动化处理数小时的文档工作,并与电子健康记录系统(EHRs)直接集成,使医疗提供者能够将更多精力专注于患者护理上。

4acb9a27d33b608217d2dad2c66b73ca.png

5

智能体与自动化:AI掌舵

当前的实施模式显示出对增强人类工作流程的明显偏好,而非追求完全自动化。然而,我们正逐步迈向更多自主解决方案的转变。在各行业中,由 AI 驱动的智能体独立管理复杂端到端流程的实例日益增多。例如,金融后台工作流程中的先锋企业Forge和Sema4,以及市场推广工具Clay,均展示了完全自主生成式AI系统如何重塑传统以人为核心的领域。这些案例预示着一个“软件即服务(SaaS)”的新时代,其中AI驱动的解决方案不仅具备传统服务提供商的能力,而且能够完全通过软件进行操作,显著提升效率和灵活性。

6

自建还是购买?具体案例具体分析

在决定是自建还是外购时,企业的选择几乎呈现均衡分布:47%的解决方案由内部开发,53%则来自供应商。这一趋势与2023年形成鲜明对比,当时,我们报告显示,80%的企业依赖第三方生成式AI软件。这表明,越来越多的企业正增强信心与能力,倾向于自主搭建内部AI工具,而非单纯依赖外部供应商。

7

长远规划:企业在生成式AI采纳中更注重价值而非短期回报

在选择生成式AI应用时,企业有着明确的优先考量:投资回报率和行业定制化功能是挑选新工具时最关键的因素。

令人意外的是,价格并非主要考量因素;在我们调查的企业领导者中,仅有1%提及价格作为选择因素。购买者更注重长远利益:他们倾向于选择能够带来可衡量价值(30%)和理解其特定行业背景(26%)的工具,而非仅提供最低价格的工具(1%)。

0986cbf73097fb55777d680c90a2d420.png

尽管企业在投资回报率(ROI)和定制化功能方面做了充分考虑,但在实施过程中仍可能忽视一些关键环节。许多组织往往在后知后觉,他们低估了技术整合、持续支持和可扩展性的重要性。这类似于仅根据燃油效率来选购汽车,结果后来才意识到,服务可用性和维护便捷性在长期运营中同样至关重要。

当AI实验项目出现卡顿或停滞时,通常是因为在选择过程中未充分考虑的挑战。尽管购买者通常不关注价格标签,但实施成本(在26%的失败实验中提及)往往让他们措手不及。数据隐私障碍(21%)和令人失望的投资回报率(18%)同样使实验项目偏离轨道。技术问题,尤其是“幻觉”现象(15%),也是导致项目失败的主要原因。

8

附加式创新 vs. 颠覆式创新:现有企业更容易受到初创公司颠覆

去年,现有企业通过“附加(Bolt-on)”策略在企业市场中占据主导地位,将生成式AI能力叠加到现有产品中。然而,今年的数据验证了我们之前的预测:尽管64%的客户仍倾向于从知名供应商购买,其主要基于信任和即插即用的功能,但现有企业的统治地位开始下降。企业客户的满意度逐渐下滑,18%的决策者对现有企业的产品表示失望,40%的决策者则质疑当前解决方案是否真正满足他们的需求。这一趋势为创新型初创公司提供了进入市场并确立自身地位的宝贵机会,通过更灵活、更定制化的解决方案和更快创新周期,吸引对现有产品不满的企业客户。

9

企业部门层面的转变

生成式AI在当今的显著之处不仅在于其规模,更在于其广泛的应用领域。今年,生成式AI的预算已渗透到企业的各个部门,覆盖了从研发到营销的多个职能。

73ece945f867bf7d1b4db6571bcd0130.png

技术部门占据最大支出份额并不意外,其中IT(22%)、产品与工程(19%)以及数据科学(8%)合计占据了企业生成式AI投资的近半份额。剩余预算则被分配到面向客户职能领域,如客户支持(9%)、销售(8%)和市场营销(7%)。此外,后台团队如人力资源和财务(各占7%),设计(6%)和法律(3%)等较小部门也获得了部分预算支持。

10

垂直AI应用的崛起

c6cd9b0b1e4ff3738c51aa8a427beab6.png

首批生成式AI应用主要集中在文本和图像生成的横向解决方案上。然而,到了2024年,越来越多的应用开始将大语言模型(LLM)的新能力应用于特定领域的垂直工作流程中,并取得了显著进展。以下几个垂直领域引领了这一趋势:

  • 医疗保健:传统上对技术采用较为缓慢的医疗保健行业,如今在生成式AI领域引领潮流,企业支出已达到5亿美元。像Abridge、Ambience、Heidi和Eleos Health这样的自动化环境抄写员正成为医生办公室的标配,同时,自动化解决方案也在整个临床周期中涌现——从分诊和登记(如Notable),到编码(如SmarterDx、Codametrix),再到收入周期管理(如Adonis、Rivet*)。

  • 法律行业:历史上对科技持抵制态度的法律行业(企业AI支出达3.5亿美元),如今正积极拥抱生成式AI,以管理海量非结构化数据并自动化复杂的基于模式的工作流程。该领域大致分为诉讼法和交易法两大类,涵盖多个细分专业。以诉讼为基础的Everlaw*专注于诉讼保全、电子证据开示和庭审准备,而Harvey和Spellbook则在交易法领域推动AI发展,提供合同审查、法律研究和并购等解决方案。特定的执业领域也迎来了AI创新:EvenUp聚焦于人身伤害法,Garden专注于专利和知识产权,Manifest专注于移民和劳动法,Eve*则通过重塑从客户接受到案件解决的完整工作流程,全面提升原告案件处理效率。

  • 金融服务:凭借其复杂的数据结构、严格的法规要求以及关键的工作流程,金融服务行业(企业AI支出达1亿美元)正准备迎接AI转型。初创公司如Numeric*和Klarity正在革新会计领域,而Arkifi和Rogo通过先进的数据提取技术加速金融研究。Arch*则利用AI颠覆注册投资顾问和投资基金的后台流程。从对账和报告开始,Orby和Sema4提供更广泛的水平解决方案,而Greenlite和Norm AI则提供实时合规监控,帮助企业跟上不断变化的法规。

  • 媒体与娱乐:从好莱坞银幕到创作者的智能手机,生成式AI正在深刻重塑媒体与娱乐行业(企业AI支出达1亿美元)。像Runway这样的工具已成为专业工作室标配,而Captions和Descript等应用则赋能独立创作者。平台如Black Forest Labs、Higgsfield、Ideogram、Midjourney和Pika正在推动专业人士在图像和视频创作领域不断拓宽创作边界。

11

深入探讨:基础设施与现代AI技术栈

经过一年的快速演进,现代AI技术栈在2024年趋于稳定,企业开始围绕构成大多数生产AI系统运行架构的核心模块进行整合。

92a0288456585d8b5e6fce95ff45edf5.png

基础模型依然占据主导地位,LLM层级掌控着65亿美元的企业投资。然而,随着不断试错和探索,企业逐渐意识到数据支持与集成在构建复杂、复合型AI架构中的关键性作用,这些架构能够在生产环境中稳定运行,而不仅仅是一次性的实验。

12

LLM趋势:多模型策略盛行,OpenAI让位于Anthropic

企业并未依赖单一供应商,而是采取务实的多模型策略。我们的研究显示,组织通常在AI技术栈中部署三个或更多基础模型,根据不同的使用场景或需求选择合适的模型。这一策略同样延伸至开源与闭源的讨论中,尽管业界争议不断,但企业偏好保持稳定。闭源解决方案占据了绝大部分市场份额,达到81%,而开源替代方案(以Meta的Llama 3为代表)则稳定在19%,较2023年仅下降了1个百分点。

在闭源模型中,OpenAI的先发优势有所减弱,其企业市场份额从50%下降至34%。主要受益者是Anthropic,其企业市场份额从12%翻倍至24%,部分企业从GPT-4转向Claude 3.5 Sonnet。在迁移至新的大语言模型(LLM)时,组织最常提及的动机包括安全性(46%)、价格(44%)、性能(42%)和扩展能力(41%)。

c3b0f9b18186578812001134ab7baa2e.png
 

13

设计模式趋势:RAG崛起,微调罕见,而智能体崭露头角

企业级AI设计模式——构建高效、可扩展AI系统的标准化架构——正在迅速演进。RAG(检索增强生成)目前以51%的采用率占据主导地位,较去年的 31%有了大幅提升。与此同时,微调——尤其在领先应用提供商中常被推崇——采用率却出人意料地少,仅有 9%的生产模型进行了微调。

今年最大的突破之一是智能体架构的首次亮相,它已成功支撑起12%的实施项目。

cadfa628a739f1df915a4c65ff8d0a6d.png

14

向量数据库、ETL与数据流水线:RAG的基础

为了驱动RAG(检索增强生成),企业需要高效地存储和访问相关查询知识。虽然传统数据库如Postgres(占15%)和MongoDB(占14%)仍然常见,但AI优先的解决方案正在逐步获得市场份额。例如,AI原生的向量数据库Pinecone已经占据了18%的市场份额。在数据ETL(提取、转换、加载)/准备领域也出现了类似的趋势。

尽管传统的ETL平台(如Azure Document Intelligence)仍占28%的部署量,但像Unstructured这样专门处理PDF和HTML等文档中非结构化数据细微差异的工具,正在开辟自己的市场,已占有16%的份额。这些变化反映了企业对专为满足现代AI需求而设计的技术的强烈需求。

15

我们的预测

2024年见证着从2023年盛行的炒作浪潮向实际应用的转变与进化。基于今天分享的数据以及作为投资者所观察到的趋势,我们对未来做出以下三大预测:

  1. 智能体架构将引领下一波变革

智能体自动化将引领下一波AI变革浪潮,解决复杂的多步骤任务,超越目前专注于内容生成和知识检索系统的能力。像Clay和Forge这样的平台预示着,先进的智能体可能颠覆4000亿美元的软件市场,并渗透至10万亿美元的美国服务经济。这一转变将催生新的基础设施需求,包括智能体认证、工具集成平台、AI 浏览器框架,以及为AI生成代码量身定制的运行时环境。

  1. 大卫战胜歌利亚: 更多现有企业将倒下

今年,ChatGPT对Chegg和Stack Overflow的冲击犹如一记警钟:Chegg市值蒸发85%,而Stack Overflow的网站流量减半。其他领域也面临颠覆风险。IT外包公司如Cognizant以及传统自动化企业如UiPath需要警惕AI原生竞争者的入侵。长远来看,即便是Salesforce和Autodesk这样的软件巨头,也将面临来自AI原生挑战者的威胁。

  1. 人才荒:AI人才短缺加剧

我们正站在一场大规模人才短缺的边缘。随着AI系统的激增和日益复杂化,科技行业将面临严峻的人才匮乏问题。这不仅仅是数据科学家的短缺,更是将先进AI能力与行业专业知识相结合的专家之间的关键缺口。人才储备已处于危险期,随着竞争的加剧,原本高薪的AI技能企业架构师薪酬溢价2-3倍将成为常态。尽管在培训项目和AI卓越中心上有所投资,人才缺口依然会超越这些努力,加剧对推动下一波AI创新所需的有限人才的激烈争夺。

16

这只是个开始

AI正引领一场由前沿AI工具、赋能劳动力和变革性商业模式所驱动的新时代,这场变革将深刻重塑我们的经济格局。我们将在我们的投资组合中亲眼见证这一变革:

  • AI助力诺贝尔奖得主、Vilya与Xaira Therapeutics联合创始人David Baker,通过计算方法生成新型潜在药物,并预测其结构与功能,从而加速为急需患者开发创新疗法的进程。

  • AI使Continental、米其林和雀巢等制造商能够捕捉并传承传统知识,保持工厂作业的高标准。通过使用Squint,他们将操作指南转化为沉浸式增强现实体验,提供实时、分步骤的指导与验证,从而提升安全性、减少操作失误,并确保生产效率的稳定。

  • AI使企业能够更快、更可靠地识别顶尖工程人才。通过CodeSignal,企业能够以更高的准确性和效率评估技术技能,借助自动化编码评估、个性化问题难度设定以及抄袭检测等功能,提升招聘流程的精确度和效率。

  • AI使Abnormal Security能够保护企业免受钓鱼攻击和商业电子邮件欺诈等复杂的电子邮件威胁。通过实时检测异常并在攻击造成损害之前加以阻止,他们每年可帮助企业预防高达400万美元的潜在损失。

  • AI赋能耐克、星巴克和LG电子等企业,借助TyTypeface大规模创作个性化且符合品牌调性的内容。通过TyTypeface,这些品牌的广告产出能够翻四倍,制作时间减半,每月节省数百小时,同时提供与客户产生共鸣的引人入胜内容。

17

数据来源与方法论

本报告总结了2020年9月24日至2024年10月8日期间对50名或以上员工的企业中的600名IT决策者进行的调研数据。基于这些数据,我们作为该领域的活跃投资者,融入了我们的视角与见解。


*由 Menlo VeVentures 支持

  • 生成式AI的支出涵盖了流向基础模型、模型训练与部署、AI专用数据基础设施,以及来自初创企业和现有企业(如微软Copilot、Salesforce Agentforce、Adobe Firefly)的新生成式AI应用的资金。请注意,此市场规模估算不包括芯片(如Nvidia)、计算资源(如AWS、GCP、Azure)或AI功能(如Intuit Assist)的收入。

(Menlo Ventures团队非常荣幸能参与这场变革,支持那些正在推动 AI可能性边界的创始人。我们的投资组合公司——包括 Abnormal Security、Anthropic、Cleanlab、Eleos、Genesis Therapeutics、Harness、Higgsfield、Neon、OpenSpace、Pinecone、Recursion、Sana、Squint、TyTypeface、Unstructured、Vilya 和 Xaira——展示了AI如何重塑行业,并创造出惠及数百万人的全新工具和业务。我们正逐步实现智能企业的巨大潜力。如果你是一位准备大展身手的创始人,请与我们联系。)

其他人都在看



让超级产品开发者实现“Token自由”

邀请好友体验SiliconCloud,狂送2000万Token/人

邀请越多,Token奖励越多
siliconflow.cn/zh-cn/siliconcloud

相关推荐

<span class=“js_title_inner“>OpenAI 前首席研究官:AGI 核心突破已实现</span>

归根结底,与人合作时要理解他们的诉求,既要让他们实现创作目标,又要协调所有人的贡献形成整体成果,并持续反复地解决这个问题。但如果他们知道你是在为他们争取最大利益,那么当你要求他们去做那件极其困难且令他们恐惧的事情时,有时你就能帮助他们跨越鸿沟,解决问题,避免他们做出愚蠢的举动,最终获得圆满的结果。,包括在实现方式上的品味,其中可能存在不明显的后果——也许是性能上的隐性影响,也许是用户界面演变过程中难以预见的连锁反应,进而需要改变系统更深层的抽象结构——这些只能依靠人类来完成,目前别无选择。

OneFlow深度学习框架 738

<span class=“js_title_inner“>OpenAI 前首席研究官:AGI 核心突破已实现</span>

归根结底,与人合作时要理解他们的诉求,既要让他们实现创作目标,又要协调所有人的贡献形成整体成果,并持续反复地解决这个问题。但如果他们知道你是在为他们争取最大利益,那么当你要求他们去做那件极其困难且令他们恐惧的事情时,有时你就能帮助他们跨越鸿沟,解决问题,避免他们做出愚蠢的举动,最终获得圆满的结果。,包括在实现方式上的品味,其中可能存在不明显的后果——也许是性能上的隐性影响,也许是用户界面演变过程中难以预见的连锁反应,进而需要改变系统更深层的抽象结构——这些只能依靠人类来完成,目前别无选择。

OneFlow深度学习框架 423

<span class=“js_title_inner“>LLM 推理经济学</span>

作者 | Piotr Mazurek & Felix GabrielOneFlow 编译翻译|张雪聃题图由 SiliconCloud 生成当前 LLM 公司的主要商业模式是通过 API 提供模型访问服务,推理成本结构是决定其盈利能力的关键。本文将从底层原理阐释大模型托管/服务的成本来源、单个 GPU 可生成的词元(Token)数量及其成因,本文以开源模型 LLaMA 3.3 为基础,搭建一个简化版的大模型推理运算世界模型,旨在建立关于 LLM 推理的精确直觉认知。大模型推理的经济学影响远超过技术范畴本身。随

OneFlow深度学习框架 643

Databricks“三级跳”:600 亿美元独角兽的战略跃迁

本文以 S 曲线理论为分析框架,深度解构 Databricks 的三次关键战略跃迁,还原了其技术商业化路径中的关键决策——如拒绝本地化部署的短期利益、与微软 Azure 的生态合作以及从开源社区到企业级服务的平衡艺术。Databricks 作为数据与 AI 领域的代表性企业,从开源项目 Spark 起步,逐步发展为估值超 600 亿美元的行业巨头,其成长历程不仅折射出大数据技术的演进史,更揭示了科技公司如何通过连续的战略跃迁实现指数级增长。当时的背景是:互联网的迅速发展催生了海量数据,尤其是非结构化数据。

OneFlow深度学习框架 1220

AI 云服务之争:CoreWeave 向上,Nebius 向下

平台中的大多数工具均为自主研发,包括支持大规模调度的托管 Kubernetes、基于 Slurm 的集群调度系统、用于实验管理的 MLflow、自研的可观测性工具,以及一个具备安全保障的云端基础设施控制平台。它跳过了这一环节,设计了自己的服务器机架,以建立一个更加垂直整合的系统,从数据中心架构到托管式 Kubernetes 服务,再到像 Nebius AI Studio 这样的应用层工具(该工具为 DeepSeek、Llama 和 Flux 这样的开源模型提供推理 API)。的策略更全面和“全栈”。

OneFlow深度学习框架 2120

<span class=“js_title_inner“>AI 云服务之争:CoreWeave 向上,Nebius 向下</span>

平台中的大多数工具均为自主研发,包括支持大规模调度的托管 Kubernetes、基于 Slurm 的集群调度系统、用于实验管理的 MLflow、自研的可观测性工具,以及一个具备安全保障的云端基础设施控制平台。它跳过了这一环节,设计了自己的服务器机架,以建立一个更加垂直整合的系统,从数据中心架构到托管式 Kubernetes 服务,再到像 Nebius AI Studio 这样的应用层工具(该工具为 DeepSeek、Llama 和 Flux 这样的开源模型提供推理 API)。的策略更全面和“全栈”。

OneFlow深度学习框架 156

关于 DeepSeek-R1 API 评测,至少有 7 个误区

xx 58.33%。以某评测者的“人类头发数量的乘积是多少?市面上基本不存在“非满血版 R1”,也基本不存在所谓模型“降智”,而 R1 蒸馏版(70B、1.5B等)与满血版的效果差距很明显,一般知名服务商都会注明,如果这些平台提供所谓“非满血版 R1”,很容易测试出来,这完全是自砸招牌,他们没有动机“以次充好”。可以确定的是,市面上知名的第三方平台部署的都是“满血版 R1(671B)”,之所以用户使用感受有差异,是因为模型输出的随机性、平台提供的配套功能及超参数设置等可能不一致,而非底层模型本身的差异。

OneFlow深度学习框架 1157

<span class=“js_title_inner“>关于 DeepSeek-R1 API 评测,至少有 7 个误区</span>

xx 58.33%。以某评测者的“人类头发数量的乘积是多少?市面上基本不存在“非满血版 R1”,也基本不存在所谓模型“降智”,而 R1 蒸馏版(70B、1.5B等)与满血版的效果差距很明显,一般知名服务商都会注明,如果这些平台提供所谓“非满血版 R1”,很容易测试出来,这完全是自砸招牌,他们没有动机“以次充好”。可以确定的是,市面上知名的第三方平台部署的都是“满血版 R1(671B)”,之所以用户使用感受有差异,是因为模型输出的随机性、平台提供的配套功能及超参数设置等可能不一致,而非底层模型本身的差异。

OneFlow深度学习框架 139

首发!硅基流动 x 华为云联合推出基于昇腾云的 DeepSeek R1 & V3 推理服务

DeepSeek-R1、DeepSeek-V3 开源后引发全球震动,它们是深度求索团队为全人类献上的一份大礼,我们由衷为他们取得的成功感到高兴。经过硅基流动和华为云团队连日攻坚,今天,我们也为国内用户献上春节礼物:大模型云服务平台 SiliconCloud 首发上线基于华为云昇腾云服务的 DeepSeek-V3、DeepSeek-R1。 需要特别强调的是,无论是在昇腾上适配 DeepSeek-R...

OneFlow深度学习框架 4249

<span class=“js_title_inner“>首发!硅基流动 x 华为云联合推出基于昇腾云的 DeepSeek R1 & V3 推理服务</span>

5. 与 DeepSeek 官方优惠期价格保持一致,SiliconCloud 上的 DeepSeek-V3 的优惠期价格(截止 2 月 8 日 24:00)为 ¥1 / M tokens(输入)& ¥2 / M tokens (输出),DeepSeek-R1 的价格为 ¥4 / M tokens(输入)& ¥16 / M tokens (输出)。华为云昇腾云服务可提供澎湃、弹性、充足的算力。双模型,还是在此前上线其他模型的过程中,我们都得到了 DeepSeek 与华为云的大力支持,向他们致以深深的谢意与。

OneFlow深度学习框架 142

站在 AI 十字路口:直面智能体与机器人狂潮

生成式 AI 正在迅速介入人类世界。随着 AI 大模型不断进步,我们正面临着巨大的社会变革。本文探讨了一个由高度智能的智能体和机器人主导的世界——AI 亚特兰蒂斯世界(指在数字领域拥有几乎无限的 AI 资源)。本文分析了当前的 AI 模型为何从根本上不同于以往的技术范式,它们如何重塑各行业,以及人类面临的关键选择。作者认为,每个人都必须理解 AI 的进步将如何重塑经济、创造力和人类潜力的规则。除...

OneFlow深度学习框架 605

<span class=“js_title_inner“>站在 AI 十字路口:直面智能体与机器人狂潮</span>

拥有 AI 的政府能够提供更好的服务,制定数据驱动的政策,增强国家安全,并为民众提供更高的透明度和问责制。这里有一个令人难以置信的想法:你现在可以雇佣智能体员工和机器人工作者,他们的薪水甚至低于你花在咖啡上的费用——然而他们却拥有与普通大学毕业生相同的技能。拥有更多的闲暇时间当然不错,但真正的关键是,AI 为你腾出了精神空间,让你能专注于更大的挑战。像 ComfyUI 这样的工具是这一转变的早期例子——人们现在可以创建复杂的 AI 工作流,其中信息和任务从一个阶段无缝流向另一个阶段。这些模型是通用翻译器。

OneFlow深度学习框架 96

迈向 AI 驱动型经济:当资本不需要打工人

AI 的迅猛发展与普及,引发了学术界与工业界对现在的社会结构与经济模型的根本性反思。此前 OneFlow 发布的《资本、AGI 与人类雄心》、《AGI 时代的智能诅咒》、《AGI 崛起之后:重构经济模式与社会结构》三篇文章,深入探讨了劳动力替代性 AI 改变人力与非人力生产要素的相对重要性后,给整个社会带来的好处与风险,以及应对挑战的解决方案。在本文中,借助一众经济学家和科幻作家的理论观点,Int...

OneFlow深度学习框架 1026

<span class=“js_title_inner“>迈向 AI 驱动型经济:当资本不需要打工人</span>

相对而言,伊恩·M·班克斯(https://en.wikipedia.org/wiki/Iain_Banks)的《文明》系列丛书则描绘了一个后匮乏的社会,在这个社会中,拥有感知能力的 “AI 智能体(AI Minds)” 管理着星舰和栖息地,根据需求分配资源,而非货币。例如,《星际迷航》中,技术(如复制器和先进的星舰 AI )消除了物质匮乏,推动了一个专注于探索和文化发展的社会。而 AI 的引入,使非人类智能体成为生产力的主要推动者,将剩余价值的核心转移到了算法、数据集和计算系统的所有权上。

OneFlow深度学习框架 107

AGI 崛起之后:重构经济模式与社会结构

AGI 日益临近,这也迫使我们重新审视现有的社会结构和经济模式。在《资本、AGI 与人类雄心》一文中,Rudolf 指出,AGI 到来之后,劳动力替代性 AI 将改变人力与非人力生产要素的相对重要性,这会降低社会对人类的关注度,同时使现有的权力更加有效和根深蒂固。基于资源诅咒现象,Luke Drago 在《AGI 时代的智能诅咒》一文中将 Rudolf 的上述核心观点描述为智能诅咒。他认为,智能诅...

OneFlow深度学习框架 1310

AGI 时代的智能诅咒

经济学研究指出,依赖出售石油等自然资源获得收入而非公民税收的国家,会受到资源诅咒的影响,结果是权贵们攫取了大量财富,却停止了对普通人的投资。当 AGI 实现后,人类是否会面临类似的“智能诅咒”?在此前发布的《资本、AGI 与人类雄心》一文中,Rudolf 指出,AGI 到来之后,劳动力替代性 AI 将改变人力与非人力生产要素的相对重要性,这会降低社会对人类的关注度,同时使现有的权力更加有效和根深蒂...

OneFlow深度学习框架 766

资本、AGI 与人类雄心

通用人工智能(AGI)正在不可阻挡地走向人类社会,有人期待它带来的巨大生产力突破,有人也在警告它可能成为洪水猛兽,也有人对它的发展只是持观望态度。不管怎样,基于你所了解的信息,你可以尝试描绘一幅 AGI 图景,并畅想它在人类政治、经济、社会发展会产生的影响。在本文中,作者 Rudolf 深入剖析了 AGI 到来之后的资本、人类劳动与社会权力结构之间的复杂关系。其核心观点是,劳动力替代性 AI 将改...

OneFlow深度学习框架 886

2025 年 AI 十大展望:软件市场扩大 10 倍、系统比模型更重要、OpenAI 先发优势消退...

尽管有 Scaling Law 放缓这样的疑虑,但整体而言,多数业内人士对AI过去一年的诸多进展感到兴奋,对新的一年 AI 的发展更是充满期待,尽管他们对未来的预测可能不尽相同。在本文中,Foundation Capital 合伙人Ashu Grag回顾了 2024 年 AI 发展的里程碑事件,并重点介绍了 2025 年的前景,主要包括:1.预训练局限将推动新的 AI 突破2.AI系...

OneFlow深度学习框架 1590

900页免费“生成式AI与大模型”电子书|OneFlow年货

难以想象,如果不是Scaling Law放缓,2024年AI领域会发生哪些惊人变化,但你可能又会感到庆幸,正是由于Scaling Law放缓,它给了这个行业的后来者们追赶的机会,也给了更多普通人搭乘这一轮技术革命的机会。AI领域的变化激荡人心。一年前,AI社区普遍认为,与OpenAI的模型相比,大部分模型与它有半年或一年的差距,但大模型预训练逐渐没有秘密,它的入局门槛数量级降低。令国内外科技界深感...

OneFlow深度学习框架 659

2024年AI盘点:投资高歌猛进、基础设施重构、技术采用加速

本文全面分析了今年AI 的发展,包含AI 技术栈的基础设施层、基础模型层、应用层、工具层,尤其是各个层面的主要收获、值得关注的趋势与值得关注的初创公司。此外,本文还概括了 AI 领域的投资和并购情况,以及其他AI 趋势。需要指出的是,可能限于作者KelvinMu的关注重心,本文除了对中国基础模型的介绍,没有更多关于中国 AI 其他技术栈的进展。不过,这并不妨碍本文仍是我们了解 2024...

OneFlow深度学习框架 2010

从零实现极速LLM推理

作者 | Andrew Chen翻译|张雪聃、刘乾裕OneFlow编译题图由SiliconCloud平台生成本文旨在从零开始,仅使用C++和CUDA构建一个大语言模型(LLM)推理引擎,且不借助其他外部库。为何要这样做?通过这种方式,我们能够全面了解LLM推理的整个技术栈——这一点正变得日益重要[1]——从CUDA kernel到模型架构,并且切实体会不同的优化方式如何影响推理速度。其中一个最为重...

OneFlow深度学习框架 1206

AI数据中心历史、技术与关键企业

过去一年,通过模型架构创新、更优质训练数据和更大算力规模来训练模型,顶尖大模型之间的性能差距急剧缩小。如果Scaling law依然有效,为了进一步扩展模型规模与性能,在模型架构创新存在极大不确定性情况下,通过获得更多的算力来建造全新的数据中心,从而更快地训练模型以取得领先地位,这是确定性更高的收益。目前,以马斯克xAI为代表的大模型公司,快速部署了10万台GPU集群,成为数据中心扩展的领头羊,可...

OneFlow深度学习框架 971

红杉资本2025年AI三大展望:大模型厂商各显神通;杀手级应用AI搜索;AI支出变稳...

2024年,随着Scaling law放缓,AI领域在大模型、基础设施上的能力稳步提升,尽管应用层出现了各种有趣的探索,但是更大的潜能有待挖掘。2025年即将来临,将出现哪些变化?近日,红杉资本投资人David Cahn对2024年AI领域的发展作了简要总结并对2025年作了三大预测。他认为,今年是AI发展的萌芽期,其构建基石已经稳固建立,只待2025年发芽结果。他在本文中阐述了三点预言:首次,基...

OneFlow深度学习框架 1675

AI半导体技术、市场与未来

过去两年,英伟达崛起是科技领域的一个经典案例。通过CUDA系统,他们创建了一个使用GPU进行机器学习的开发者生态系统;通过Mellanox,他们成为了数据中心网络的领导者。然后,他们将所有硬件集成到服务器中,提供垂直集成的算力一体机。凭借这一系列组合性技术优势,英伟达在“AI淘金热”中提供的铲子占据行业核心地位,这导致它成为有史以来最成功的公司之一。随之而来的是,不少挑战者入局以求从英伟达主导的市...

OneFlow深度学习框架 1万+

比GPU快20倍?d-Matrix推理性价比分析

AI推理算力需求正在大幅增长。一方面,像硅基流动、Fireworks这样的AI基础设施软件公司通过软件层面的优化以提供高性价比的大模型推理服务,另一方面,以Cerebras、Groq为代表的芯片公司相继推出了专用AI推理芯片,通过硬件层面的创新,以数量级的推理速度与成本优势来挑战英伟达GPU的市场地位。AI推理芯片市场的竞争者还在增加。近日,成立于2019年的硅谷推理芯片创业公司d-Matrix的...

OneFlow深度学习框架 2035

生成式AI推理技术、市场与未来

OpenAI o1、QwQ-32B-Preview、DeepSeek R1-Lite-Preview的相继发布,预示着生成式AI研究正从预训练转向推理(Inference),以提升AI逻辑推理(reasoning)能力,这一转变将极大推动上层应用的发展。红杉资本近期指出,在可预见的未来,逻辑推理和推理时计算将是一个重要主题,并开启生成式AI的下一阶段。新一轮竞赛已然开始。那么,在推理这一新兴市场,...

OneFlow深度学习框架 2091

50张图,直观理解混合专家(MoE)大模型

Mixtral 8x7B的高效训练与推理效果曾引发AI社区对混合专家(MoE)模型的广泛关注,后来居上的国产开源大模型De‍epSeek以及腾讯近期开源的Hunyuan-Large(基于Transformer的最大MoE模型)也选择了MoE框架路线。为何大语言模型总是离不开MoE的身影?借助50多个图例,数据科学家Maarten Grootendorst由浅入深多维度剖析了MoE模型,从基础概念出...

OneFlow深度学习框架 9529

LLM后训练绝招:1%预训练成本,实现最高20倍算力扩展效果

根据规模定律,扩大训练计算规模可以提高大型语言模型(LLM)性能的关键,但调研机构Epoch AI的研究,LLM再训练无需高额费用,也能让AI能力获得显著提升。在该研究中,他们引入了一个基本框架,用于量化后训练增强的收益和成本,特别是通过计算等效增益来衡量收益。他们将该框架应用于一系列具有代表性的后训练增强,并发现性能提升非常显著,但微调成本通常与预训练成本相比非常小,某些后训练增强技术可以在不到...

OneFlow深度学习框架 4620

LLM逻辑推演策略选择:推理时计算 vs 训练时计算

AGI实现的一大标志是,具备人类级别的逻辑推理(reasoning)能力。近期,随着推理(inference)模型GPT o1、DeepSeek R1-Lite的发布,模型的逻辑推理能力得到显著提升,也预示着对LLM潜力的深度挖掘正在转向推理阶段。围绕增强LLM逻辑推理能力这一目标,美国人工智能与密码学研究实验室Bagel团队结合最新研究,从算术、常识和符号这三种主要逻辑推理类型出发,对比了在推理...

OneFlow深度学习框架 4206

探索AI框架前沿|OneFlow招聘深度学习研发工程师(实习)

一、岗位名称:深度学习研发工程师-框架开发方向(实习)岗位职责1. 参与 OneFlow 框架开发、重构与性能优化;2. 参与深度学习编译、高阶自动微分等深度学习框架相关技术演进工作。岗位要求1. 计算机或电子通信相关专业,本科及以上学历;2. 具备C/C++、Python编程基础,有良好的软件开发素养,熟悉TDD、CI/CD、敏捷开发流程等;3. 了解深度学习模型,有一定机器学习基础;4. 熟悉...

OneFlow深度学习框架 571
上一篇: 强化学习之父Richard Sutton:AGI研究的下一个范式
下一篇: LLM逻辑推演策略选择:推理时计算 vs 训练时计算
OneFlow深度学习框架
OneFlow深度学习框架 企业官方账号 企业官方账号
博客等级 码龄6年 5868粉丝 385原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值