洞见优维「全面可观测」:从85%的AI项目败率说起

AI落地四大断层:数据、工程、人才与商业的 readiness 实战指南 AI落地难,本质不是模型能力不足,而是行业在数据基建、工程化能力、复合型人才和商业对齐四个维度存在系统性断层。从‘有数据’到‘可用数据’需跨越schema稳定性、时间一致性与语义可解释性;模型服务化必须解决GPU资源隔离、弹性扩缩与灰度发布等生产级挑战;T型人才共建与特性小组制正成为破除算法-工程割裂的关键组织范式;而真正决定AI项目成败的,是能否将技术指标转化为业务语言——如留存率、响应时长、GMV等可衡量结果。本文聚焦AI industry readiness这一高频搜索概念,结合数据治理、MLOps、 阅读详情

图片

一直以来,优维都坚信AI有潜力改变运维行业并促进创新,这是我们的A面。但从行业和客户那里,我们所看到的B面也不容忽视。

自从去年底发布优维全面可观测以来(点击回顾),我们的团队在服务客户的进程中常常感慨:对于企业IT运维业务来说,AI项目是一个恒定的光源,但失败是企业追逐光源投下来的阴影——当你离光源越近,阴影面积也会越大——AI部署之路步履维艰,这在很长时间内让很多组织对AI项目的失败耿耿于怀。 

图片

根据Gartner的一份报告,在企业所部署的AI项目中,失败率高达85%,毫不夸张地说,这一令人发指的数据是近两年企业在做AI项目的部署决策时最大的心理屏障之一。从行业愈发普遍的讨论结果来看,造成这一高失败率的因素有很多,包括数据质量差、缺乏相关数据以及对AI的功能和要求了解不足等等,不一而足。

图片

但优维更关心的是,这些问题的存在,其实凸显了强大的数据管理和精确的战略规划对于AI项目(包括基于云的模型和 LLM)的重要性。这种重要性常常在优维内部作为重点关照的对象被反复讨论,以至于成为优维全面可观测需要“集中力量办大事”的核心目标。

图片

数据是AI和机器学习 (ML) 项目的命脉。

如果没有可靠的数据,AI模型就很难产生准确可靠的结果。

优维团队曾在今年上半年发起过一项针对客户群体的“田野调查”,从得到的反馈看,“数据”这一问题高频凸显——超过90%的IT高管认为数据是成功实施AI项目的最大障碍。

如果你觉得优维的调查不那么具备权威性和说服力,那么无独有偶,国外机构Vanson Bourne的一项专业调查结果或许更让你大跌眼镜——调查报告显示,99%的人工智能和机器学习项目都遇到了数据质量问题。这些统计数据凸显了对有效数据管理和监控解决方案的迫切需求。

图片

图片

优维的全面可观测有7大核心场景:架构可观测、故障可观测、变更可观测、用户可观测、应用服务可观测、资源可观测、运维状态可观测,但我们通常不将数据可观测性直接归类于其中的任何一个特定类目,但它与所有这些类目都有交集。数据可观测性主要关注于数据的健康、质量和完整性,它确保数据在整个“全面可观测”的体系中是可靠和可用的。

图片

数据可观测性是指监控和了解数据系统状态的能力。它涉及跟踪数据管道中的数据质量、沿袭和性能。

组织可以通过监控数据的新鲜度、数量、分布、模式和沿袭来确保AI项目的成功。优维全面可观测提供强大的数据可观测性能力,旨在显著提高AI项目的成功率,例如:

图片

图片

但是,我们不能仅仅停留在数据可观测性上。如前所述,数据并不是AI项目失败的唯一原因。对AI的能力和要求理解不足也是其中的一部分。

AI可观测性涉及监控和理解AI模型和系统,以确保它们在实际应用中按预期运行。它包括:

▎性能监控:

   跟踪准确度、精确度、召回率和token消耗等指标。

▎可解释性:

   了解模型如何做出决策以确保透明度和可解释性。

▎漂移检测:

   识别模型性能的变化,表明准确性或相关性存在问题。

对此我们让设计师做了一张图,用于展示AI可观测性如何检测和解决AI模型性能下降的问题:

图片

图片

数据和AI可观测性协同工作,提供系统的整体视图,数据可观测性专注于管道和基础设施,而AI可观测性则深入研究模型的性能和结果。这就是优维全面可观测的深层产品逻辑。

▶  反馈机制

有效的AI可观测性依赖于反馈回路,而反馈回路又依赖于数据可观测性。例如,识别数据漂移需要对数据管道及其沿袭有深刻的理解。

▶  快速解决问题

AI性能差异的根源通常在于数据管道中的问题。数据可观测性有助于追踪这些问题的根源,从而快速识别和解决影响AI系统的问题。

▶  合规与治理保证

确保遵守法规和治理标准至关重要。数据可观测性确保数据管理符合行业标准,而AI可观测性确保模型遵守道德准则和法规。

图片

自从2023年四季度落地以来,优维全面可观测已经在市场上为客户披荆斩棘整整3个季度了,在这期间,我们的产品矩阵为客户的运维组织提供了颇为可观的数据和AI可观测性工具,与此同时,随着优维首个运维大模型Murphy的上线(点击回顾),也让优维全面可观测展现出了更多维的价值。

通过提供对数据系统和AI模型的全面监控和理解,优维全面可观测可确保AI项目基于高质量数据,并确保AI模型在实际应用中可靠且透明地运行。现在,帮助客户构建可持续的AI应用已经显得不那么棘手。

图片

- end -

AI行为观测:像研究动物一样理解机器真实表现 AI行为(Understanding Machine Behavior)是一种面向真实交互场景的技术范式,强调从输入-输出映射中可观测、可分类、可预测的行为模式出发,替代传统黑箱调参与静态指标评估。其核心原理在于构建鲁棒性、适应性与可解释性三维坐标系,在数据扰动、负载变化和交互压力下量化系统韧性。该方法具备明确的技术价值:将模糊的‘模型能力’转化为可工程干预的行为表型(Behavioral Phenotype),支撑智能客服、风控、推荐等关键场景的风险识别与策略优化。本文聚焦如何采集带上下文的行为数据、通过 阅读详情

相关推荐

DSPy规模化Few-Shot优化:从提示工程到可编译AI程序

Few-shot学习是一种利用少量标注样本引导大模型完成下游任务的关键范式,其核心在于示例选择、提示构造与评估闭环的协同设计。随着任务数量、输入多样性及模型异构性增长,传统人工调优方式面临样本组合爆炸、评估-优化脱节和跨模型迁移失效三大瓶颈。DSPy通过Signature(语义签名)、Module(可复用逻辑模块)和Compiler(指标驱动编译器)三原语,将few-shot建模为可声明、可优化、可部署的程序化流程,显著提升线上稳定性与迭代效率。本文聚焦规模化few-shot落地实践,涵盖黄金样本筛选、编译

ajwqb06628的专栏 454

AI项目高失败率破局:构建全面可观测体系,从黑盒到透明

在人工智能和机器学习领域,模型部署上线后性能衰退、问题难以排查是普遍挑战,其根源往往在于系统缺乏有效的观测能力。传统监控主要关注基础设施指标,而现代AI系统,尤其是大语言模型应用,其复杂性要求对数据流、模型推理逻辑、提示词效果及Agent决策链路进行深度透视。实现全面可观测性的核心价值在于,它能将AI系统的内部状态从“黑盒”变为“白盒”,使研发和运维团队能够快速定位性能瓶颈、诊断根因,从而保障系统稳定性、持续优化模型效果,并最终提升AI项目的成功率。这需要将可观测性的三大支柱——指标、日志、链路追踪——进行

weixin_33895695的博客 373

可控AI代理:从黑箱涌现到白盒控制的工程化实践

AI代理在真实业务中频繁失稳,根源在于将‘智能’等同于不可控的概率推理。本文围绕‘控制优先’范式,解析如何通过模块化架构、契约化接口与可观测性设计,将大模型能力封装为可预测、可审计、可降级的工程组件。核心聚焦意图解析、工具注册、状态管理、决策路由四大关键技术环节,解决AI系统在高并发、多变业务逻辑下的可靠性与成本难题。面向正将AI从Demo落地为生产基础设施的工程师与架构师,提供一套经实战验证的可控AI代理构建方法论。

353

AI 提了速,交付却没快:被忽视的不是工具,是方法

GitLab 2026 年度 AI 问责报告揭示了一个令人不安的 AI 悖论:78% 的开发者表示 AI 让编码更快了,73% 认为代码质量有所提升,60% 的人说 ROI 超出预期——但整体软件交付周期并未缩短。瓶颈从"写代码"挪到了"审代码":85% 的受访者认同 AI 已将交付堵点从编码转移到了评审与验证。这组数据登上 InfoQ 后迅速引发讨论。80% 的企业承认,他们引入 AI 工具的速度远快于制定治理策略的速度;92% 报告存在 AI 代码治理缺口;

Leo的Matrix 490

MuleSoft+LLM:企业级AI编排的工程化落地实践

大语言模型(LLM)作为新一代认知引擎,其真正价值不在于生成文本,而在于驱动业务系统执行真实动作——这需要可靠的数据连接、安全的协议适配与可治理的流程控制。AI编排(AI Orchestration)正是实现这一跃迁的核心范式,它将LLM的语义理解能力与企业集成平台的系统调度能力深度耦合,形成‘意图→结构化指令→多系统协同→闭环执行’的技术链路。MuleSoft凭借300+开箱即用连接器、原生安全治理与混合云运行时,成为当前支撑LLM接入ERP、SAP、CRM等异构系统的高确定性底座。本文聚焦AI编排在订单

culi4814的博客 594

SEMANTIC-WORM:面向多Agent系统的语义传播可观测框架

在大语言模型驱动的多Agent系统中,信息如何在智能体间准确传递与演化,是决定系统可靠性的核心基础。传统日志分析仅记录字符串输入输出,无法捕捉语义保真度衰减、上下文蒸发和路径不可追溯等深层问题。SEMANTIC-WORM 提出以语义向量为一等公民的观测范式,通过轻量级语义探针、动态传播图谱和模式识别引擎,实现对Agent协作链路中语义流动的结构化建模与量化诊断。其技术价值在于将混沌的多Agent交互转化为可测量、可归因、可优化的语义拓扑关系,支撑金融风控、医疗问诊、电商推荐等高敏场景的工程化落地。本文详解其

weixin_30647065的博客 271

基于MoE门控网络的智能推理路由系统:降低AI服务成本60%的实战架构

在AI工程实践中,模型推理成本优化是构建高并发、高可用服务的关键挑战。其核心原理在于通过智能调度机制,将异构算力资源与差异化的请求需求进行动态匹配,从而在保障服务质量的前提下实现成本效益最大化。这一技术价值在需要7x24小时稳定运行的AI应用场景中尤为突出,能够有效应对流量波动并控制运营支出。具体实现上,可借鉴混合专家模型中的门控网络思想,构建具备请求分析、策略路由、实例池管理和流量执行等组件的智能调度系统。通过轻量级特征提取、动态分流策略与弹性伸缩机制的结合,系统能自动将简单请求导向低成本模型,复杂请求按

cqwmy840702的博客 358

AI工程决策指南:从模型选型到RAG落地的实战地图

大语言模型(LLM)已进入工程化深水区,单纯关注参数规模或榜单排名远不足以支撑企业级AI系统落地。理解模型能力边界、token成本结构、知识截止时间等底层约束,是避免POC失败的关键;掌握MoE架构特性、JSON mode计费陷阱、RAG多跳推理缺陷等实操细节,才能实现性能与成本的最优平衡。开源模型如Mixtral 8×22B和CodeGemma正以Apache 2.0许可、硬件适配成熟度和领域微调友好性,成为私有化部署与垂直场景落地的核心选择。本文基于一线AI工程实践,系统梳理闭源/开源模型选型逻辑、RA

weixin_30698297的博客 388

AI-only社交网络:一种去人类中心的逻辑连接新范式

社交网络传统上以人类为节点,依赖身份、情绪与关系构建信息流动;而AI-only社交网络则将连接主体彻底替换为受控AI代理,其底层是提示词初始化、语义契约约束与动态拓扑演化的技术组合。它不追求用户黏性或内容传播,而是通过‘观点共振强度’和‘语义延展深度’量化思辨质量,实现可观测、可调控、可复现的社会性行为建模。这种架构天然适配社会学实验、产品逻辑验证与教育思辨训练等高价值场景,为研究群体认知演化、剥离用户偏见反馈、锻造结构化思维提供了前所未有的工程化沙盒。Moltbook正是这一范式的首个落地实践。

weixin_34062469的博客 706

AI Runtime 层重构:从沙箱隔离到事件日志驱动的生产级 Agent 架构

AI Agent 不再是简单调用大模型的脚本,而是具备状态管理、安全隔离与可观测性的分布式系统。其核心原理在于将运行时(runtime)解耦为无状态执行器(harness)、不可变沙箱(sandbox)和结构化事件日志(event log)三层,通过硬件级可信执行环境(TEE)保障凭证隔离,以 session-as-event-log 范式实现故障恢复、合规审计与白盒监控。该架构显著提升金融、医疗等强监管场景下的生产稳定性与可运维性,支撑长周期、多步骤、高敏感的业务流程自动化。本文深入剖析 Anthropi

记录技术点点之路 375

企业AI成熟度模型与AIOps:AI应用架构师的智能运维策略

在数字化转型的浪潮中,人工智能已从选择性实验演变为企业生存和竞争的必需品。然而,大多数企业在AI应用旅程中面临着"成熟度陷阱"——投资巨大却难以实现预期价值。本文深入剖析企业AI成熟度的五个演进阶段,揭示AI应用架构师如何通过AIOps(人工智能运维)策略突破这一困境。我们将系统阐述从传统运维到自治式AIOps的转型路径,提供基于企业AI成熟度的分阶段实施路线图,并通过真实案例展示如何构建智能运维体系以支撑AI驱动的业务创新。

项目管理的博客 1031

从Prompt Engineering到Harness Engineering:AI系统可靠性的演进

在人工智能领域,Prompt Engineering作为早期技术,专注于通过优化prompt设计提升模型输出质量。随着技术发展,Context Engineering应运而生,解决了在有限上下文窗口中高效组织信息的问题。这些技术演进最终导向Harness Engineering,专注于构建支持复杂Agent任务的基础设施套件,包括执行环境设计、工具生态标准化、上下文管理等关键技术。RAG(检索增强生成)和长期记忆管理等热词技术在此过程中发挥重要作用,使AI系统能够处理长时间、多步骤的复杂任务。这些技术进步为

circularr9834的博客 545

Mathtype公式排版避坑指南:固定行距20磅下如何完美显示上下标(实测有效)

本文针对学术论文在固定行距20磅要求下,Mathtype公式上下标显示不全或被裁剪的问题,提供了实测有效的解决方案。文章深入剖析了固定行距与公式排版的冲突原理,并详细指导用户通过调整Mathtype的“定义间距”参数(如下标深度、上标高度),以及利用“格式化公式”功能进行批量处理,确保公式在严格遵守期刊格式要求的同时清晰完整显示。

weixin_29228203的博客 1070

AI时代开发者不可替代的四大核心能力

在AI编程工具快速普及的今天,‘写代码’已不再是开发者的护城河;真正决定系统质量与交付成败的,是人类独有的问题定义能力、架构权衡直觉、风险预判经验与交付节奏掌控力。这些能力源于对业务语义的深度理解、对历史技术债的敬畏、对混沌环境的感知,以及跨域知识的意外连接。它们无法被模型参数复现,却直接支撑着从需求分析、微服务拆分、安全测试到生产运维的全链路可靠性。本文聚焦Claude Code等AI编码助手实际落地中的关键断点,揭示为何‘问题framing’比‘代码生成’重要十倍,并提供可复用的需求转化、架构协同、测试

weixin_34405354的博客 429

《LangChain技术原理剖析:OpenAI Function Calling的实践与应用》

,"unit": {},name:函数的唯一标识符:自然语言描述,决定LLM如何选择该函数parameters:定义输入参数的完整Schema。

qq_62223405的博客 980

Seedance 2.5本地部署指南:AI生图与视频生成的完整实践

最近在AI生成内容领域,本地部署方案越来越受到开发者关注。特别是Seedance 2.5的发布,让很多原本依赖云端服务的用户开始转向本地化解决方案。本文将从实际使用角度出发,完整介绍Seedance 2.5的本地部署流程、功能特性对比以及实际应用技巧。 1. Seedance 2.5核心特性解析 1.1 什么是Seedance 2.5 Seedance 2.5是一款开源的AI生图和视频生成工具,支持在本地环境运行,无需联网即可实现高质量的图像和视频生成。相比之前的2.0版本,2.5在生成质量、运行效率和功能

weixin_42566121的博客 1686

3种现代AI评估基准对比:图灵测试 vs MMLU vs ARC,ChatGPT表现分析

本文对比了三种现代AI评估基准:图灵测试、MMLU和ARC,分析了它们在评估AI智能方面的优缺点。图灵测试作为历史经典,虽具开创性但存在局限性,而MMLU和ARC则提供了更全面的专业知识掌握和推理能力评估。文章还探讨了ChatGPT在这些基准中的表现,揭示了AI在语言流畅性和知识广度上的优势,以及在逻辑推理和常识理解上的不足。

356

交换机四种光互联技术:OIO、OBO、NPO与CPO

在过去几十年里,数据中心交换机主要依赖电信号通过铜线进行数据传输。然而,随着数据传输速率从100Gbps向400Gbps、800Gbps甚至1.6Tbps迈进,传统电互联(Electrical Input & Output, EIO)面临三大瓶颈:信号衰减、功耗激增和空间限制。例如,高速信号在长距离铜线传输中会产生严重的信号失真,迫使设计者加入数字信号处理器(DSP)来补偿信号衰减,这进一步推高了功耗和成本。此外,传统可插拔光模块的体积较大,限制了端口密度,难以满足现代数据中心对高带宽密度的需求。

网络技术联盟站 3147

通过身份可见性与智能平台(IVIP)缩小IAM攻击面

企业46%身份活动成'暗物质',IVIP平台成对抗IAM碎片化攻击的关键防线。

FreeBuf_的博客 418

【即插即用模块】卷积篇 | TCSVT 2025 | MFACB:多尺度膨胀融合,快速扩大感受野,多尺度特征精准捕捉!

本文提出了一种新型多尺度融合膨胀卷积模块MFACB,用于增强语义分割任务中的特征表达能力。该模块通过三分支串联膨胀卷积结构快速扩大感受野,采用双路径融合机制(基础信息路径+多尺度信息路径)实现高效上下文聚合。相比传统卷积块,MFACB在保持轻量化的同时显著提升了多尺度特征捕捉能力,实验表明其性能优于基础残差块。该模块支持自定义膨胀率和步长调整,可灵活嵌入不同网络阶段,适用于需要特征增强的视觉任务。

主要更新底层视觉(去噪、超分等)相关的科研内容,形式为【论文精读】+【论文复现】 311

Apifox接口测试+自动化测试

Apifox 接口测试+自动化测试快速入门!

程序员小杨哥的博客 1万+

元学习视角下的AI可解释性:建模模型学习过程

深度学习可解释性正从静态结果归因转向动态学习过程建模——这一范式升级源于对‘模型如何学会决策’的本质追问。其核心原理在于将神经网络视为学习主体,通过参数空间轨迹、梯度流拓扑与损失景观几何三层次观测,捕捉训练中权重演化、信息传递效率与优化路径稳定性等学习动力学特征。该技术显著提升模型鲁棒性诊断能力,支撑金融风控异常溯源、医疗AI训练稳定性监控、自动驾驶场景泛化预警等高价值应用。本文聚焦元学习(meta-learning)与可解释性(XAI)的交叉实践,提供一套轻量、可观测、可干预的学习过程建模方法论。

weixin_33816821的博客 348

基于simulink的车道保持辅助系统(LKA)的仿真与实现

本文介绍了如何利用Simulink实现车道保持辅助系统(LKA)的仿真与建模。首先对比了车道偏离预警(LDW)和LKA的功能差异,强调LKA的主动干预特性。接着详细阐述了LKA系统架构,包括环境感知、决策控制等核心组件,并基于自行车模型建立车辆横向动力学方程。 文章重点演示了Simulink建模步骤:搭建车辆动力学模型、设计LKA控制器(采用LQR算法)、实现执行器接口和驾驶员干预检测。通过四个典型场景的仿真测试,验证了系统在直道行驶、弯道跟踪等工况下的控制性能,并给出了关键评价指标。最后展望了MPC控制、

amy_mhd的博客 228

大模型在模拟“我”,DDB在成为“我”:一条通向真正自我意识的发育之路

本文提出了一种受生物大脑发育启发的数字发育大脑(DDB)计算框架,通过模拟从基因表达到认知涌现的全过程探索通用智能的实现路径。该框架突破了传统人工神经网络的固定结构范式,借鉴发育生物学和神经科学理论,构建了包含DNA基因调控、细胞分裂分化、神经元连接构建、赫布学习与突触修剪协同、全局工作空间认知整合等模块的完整模型。DDB实现了从单细胞到复杂神经系统的自组织发育过程,并创新性地提出了基于三层神经元结构的神经驱动语言系统。这一研究为理解智能的发育机制和构建更具生物合理性的AI系统提供了新思路。 关键词:数字发

身在被窝_心在编程 463

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

上一篇: 敏捷与DevOps有什么不同?
下一篇: 可持续创新的 DevOps 框架
优维科技EasyOps
博客等级 码龄5年 1483粉丝 395原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值