a958014226的博客

原创 State内部透明化？双重工具揭秘

相比于可视化的方式，自定义模式更适合具有特殊需求的数据开发者，使用者可以使用链接 FlinkState - Connector，实现更多自定义功能。

原创 大模型赋能，指标平台更懂你的数据

传统的指标管理平台往往面临指标数据查询复杂、分析决策门槛高等挑战，难以满足企业快速、精准决策的需求。为了让数据分析管理更智能，袋鼠云数栈指标管理平台结合大模型完成了智能化的升级，可以给数据分析的场景提供更强大、更高效的助力。大模型凭借其强大的自然语言理解能力和泛化能力，能够精准识别用户的查询意图、分析复杂数据、并能提供分析建议，与指标平台相结合大幅降低了数据分析的技术门槛。接下来将带领大家展示指标平台的解析其中的功能及关键技术。

原创 指标树拥抱DeepSeek，让数据分析效率提升10倍

在数据驱动的商业环境下，企业需要快速、准确地获取和分析数据，以便做出明智的决策。然而，随着数据量的不断增加和数据维度的复杂化，如何高效地管理和分析数据成为了企业面临的一大挑战。传统的报表和数据分析工具往往只能提供静态的、单一维度的数据展示，难以满足企业对数据深度挖掘和实时分析的需求。而数栈的指标树功能，正是为了解决这一痛点而生。作为一个指标体系的结构化展示的功能，它不仅能够帮助业务方实现数据的全景查看与深度分析，还能通过AI技术的加持，让数据分析效率提升10倍！

原创 你好，我是灵瞳

在 ChatGPT 掀起全球 AI 革命的 18 个月后，全球知名咨询机构 Gartner 最新报告显示，到 2025 年，融合 AI 能力的数据中台将取代 70% 传统数据平台，成为企业数字化转型的新基建。当数据中台这个 "企业中枢神经系统" 开始注入 AI 的 "智慧基因"，一场从数据治理到智能决策的范式革命正在重新定义商业世界的游戏规则。目前，数栈 AI - Agent 已完成 DeepSeek 的接入，能够通过智能助手 ------["灵瞳"]((

原创 开箱即用，袋鼠云上线DeepSeek AI大模型一体机！

在数字化快速发展的当下，人工智能与数据技术不断迭代。近期，DeepSeek凭借自身技术实力在市场中迅速崛起，为剖析数据开发应用市场提供了视角。在此背景下，袋鼠云基于DeepSeek系列模型，推出大模型私有化部署与一站式运维服务，为企业提供从模型选型到持续运维服务的完整解决方案，助力客户轻松驾驭AI，尽享技术红利。大模型私有化部署与一站式运维服务。

原创 袋鼠云+DeepSeek，提供大模型私有化部署与一站式大模型运维服务

在数字化快速发展的当下，人工智能与数据技术不断迭代。近期，DeepSeek凭借自身技术实力在市场中迅速崛起，为剖析数据开发应用市场提供了视角。在此背景下，袋鼠云基于DeepSeek系列模型，推出大模型私有化部署与一站式运维服务，为企业提供从模型选型到持续运维服务的完整解决方案，助力客户轻松驾驭AI，尽享技术红利。

原创 企业级AI应用开发平台AIWorks正式上线！为企业提供安全可控、灵活扩展的AI能力

原创 数栈基于Flink CEP与规则热更新扩展的深度解析

FlinkCEP 是在 Flink 上层实现的复杂事件处理库。它可以让你在无限事件流中检测出特定的事件模型，并允许用户做出针对性的处理。它更多被应用在实时营销、实时风控和物联网等场景。在传统的数据处理中，用户更多关注于单一数据的特征，而忽略了数据间的特征。随着业务的不断扩展和数据量的快速增长，用户在某些业务场景中不再满足于单一数据特征的处理，而是需要基于多个数据特征之间的关联进行更复杂的响应处理。Flink CEP 则基于此需求而诞生。

原创 DeepSeek 爆发：技术与市场的双重驱动

无独有偶，袋鼠云公司也长期秉持开源理念，在开源社区持续投入，通过开放代码、分享技术成果，吸引志同道合的开发者共同参与，促进技术创新与知识共享，为自身发展和行业进步注入活力。例如在企业销售数据分析时，业务人员用自然语言描述需求，DeepSeek 就能快速生成 SQL 语句，提升查询效率，降低数据使用门槛，推动数据开发向便捷、高效发展，也促使其他团队加大研发。数栈通过这一系列的深度融合与探索，志在打造行业内最先进的智能数据开发平台，引领数据开发智能化的新潮流，为企业数字化转型提供坚实有力的技术支撑。

原创 AI 赋能指标管理分析，开启企业数智领航时代

借助AI技术，智能指标AIMetrics平台对传统的数据查询和分析功能进行了升级，用户只需输入简单的文案，与AI进行自然对话，AI便会基于输入内容判断用户意图，快速匹配向量库中的目标指标，并将结果反馈予以确认，显著提升了检索效率，让数据查询更加智能化和便捷。同时，欢迎对大数据开源项目有兴趣的同学加入「袋鼠云开源框架钉钉技术群」，交流最新开源技术信息，群号码：30537511，项目地址：[https://github.com/DTStack](https://github.com/DTStack)

原创 袋鼠云：拥抱DeepSeek大模型，做Data+AI的长期主义者

《数据资产管理白皮书》下载地址：https://www.dtstack.com/resources/1073/?src=szsm《行业指标体系白皮书》下载地址：https://www.dtstack.com/resources/1057/?src=szsm《数据治理行业实践白皮书》下载地址：https://www.dtstack.com/resources/1001/?src=szsm《数栈V6.0产品白皮书》下载地址：https://www.dtstack.com/resources/1004/?src=

原创 解锁企业数据管理统一身份认证难题，EasyMR助力企业敏捷提效

在数字经济迅猛发展的当下，企业数据量正以令人惊叹的速度持续增长。据IDC研究显示，至2025年，全球数据总量预计将超175 ZB。数据的爆发式增长对企业而言，既是机遇，更是巨大挑战。如今，大数据已然成为企业决策的关键依据，在金融、零售、医疗、互联网等行业更是如此，企业在这些行业中的竞争力取决于海量数据的实时分析与处理能力。但传统的数据管理和分析模式已无法适应如此庞大的数据规模，企业在数据存储、计算、处理以及运维等方面都面临着严峻的考验。因此，企业迫切需要一个能够有效管理和处理大规模数据的。

原创 解锁企业数据管理统一身份认证难题，EasyMR助力企业敏捷提效

在数字经济迅猛发展的当下，企业数据量正以令人惊叹的速度持续增长。据IDC研究显示，至2025年，全球数据总量预计将超175 ZB。数据的爆发式增长对企业而言，既是机遇，更是巨大挑战。如今，大数据已然成为企业决策的关键依据，在金融、零售、医疗、互联网等行业更是如此，企业在这些行业中的竞争力取决于海量数据的实时分析与处理能力。但传统的数据管理和分析模式已无法适应如此庞大的数据规模，企业在数据存储、计算、处理以及运维等方面都面临着严峻的考验。因此，企业迫切需要一个能够有效管理和处理大规模数据的。

原创 1月15日直播预告丨AI赋能指标管理分析 开启企业数智领航时代

为了帮助企业更有效地推进数字化转型升级，袋鼠云精心策划了一系列以“数字基建+数智应用”为核心的赋能分享活动，本系列直播共有四期，每期聚焦于不同的关键议题，深入探讨企业数字化转型中面临的挑战以及可行的应对策略。我们期待通过这些直播活动，与业界同仁深化交流，共同探讨数字化转型中的难点与痛点，并寻找切实可行的破局之道。我们坚信，凭借我们共同的努力与智慧，将为企业带来更多创新机遇和发展动力，推动行业的进步与繁荣。大家可以扫描下方二维码加入社群获取直播课件，在直播过程中更有精美礼品掉落，立即来参与我们的直播吧！

原创 揭秘如何用Monaco Editor打造功能强大的日志查看器

在 Web IDE 中，控制台中展示日志是至关重要的功能。Monaco Editor 作为一个强大的代码编辑器，提供了丰富的功能和灵活的 API ，支持为内容进行“装饰”，非常适合用来构建日志展示器。如下图:除了实时日志外，还有一些需要查看历史日志的场景。如下图：Monarch 是 Monaco Editor 自带的一个语法高亮库，通过它，我们可以用类似 JSON 的语法来实现自定义语言的语法高亮功能。这里不做过多的介绍，只介绍在本文中使用到的那部分内容。tokenizer。

原创 深入浅出Flink CEP丨如何通过Flink SQL作业动态更新Flink CEP作业

如果以 JSON 表示规则，则填写 JSON。当上游算子的数据发送到DynamicCepOperator时，同一条数据会被多个 NFA 处理，当某一个NFA match到数据之后，会将数据发送给对应的PatternProcessFunction处理，被PatternProcessFunction处理完的数据则会被发送给下游算子。Flink CEP 是 CEP 在 Apache Flink 中的具体实现，是 Apache Flink 的一个库，使用户可以在 Flink 的流处理引擎上进行复杂事件的处理。

原创 Lakehouse 架构下的元数据“大一统”管理深度解析

Lakehouse本质上是一个带有附加事物层和高性能计算引擎的数据湖，从结构上来说可以拆成两个层面：1、带有附加事物特性的存储层这一层主要由三个组件组成：开放的表格式、开发的文件格式和云存储。开放的表格式可以理解为是提供类似数据仓库ACID数据和其他特性的元数据层（Metadata APIs），为了保持一致性，它提供了与事务相关的元数据。目前开源社区比较流行的湖表格式有Apache Paimon、Apache Iceberg、Apache Hudi以及DeltaLake。

原创 袋鼠云港口数智化解决方案发布，数智引领，加速“智变”丨2024袋鼠云秋季发布会回顾

数字孪生港口以现实港口的各个方面为基础，如船舶、码头、集装箱、设备、货物、供应链等，并借助传感器和物联网设备实时采集与传输的数据，将其映射到虚拟环境中，通过构建港区专用孪生平台，构建虚拟化的港区孪生系统，实现船、人、机、货、场的高效、智能管理，打破信息孤岛，构建动态化、协同化和可视化的数字空间，最终为用户提供可观、可管、可动、可用、可判的管理能力。袋鼠云通过整合码头堆场、货物、船舶航行、车路协同和物流等多种源系统数据资产，构建了全面的数据模型资产，包括船舶、集装箱、散杂货、车辆、财务和人力域。

原创 TableFill：一天搞定1000人的数据填报工作丨2024袋鼠云秋季发布会回顾

纵观数据填报的发展历史，从最初的线下文档打印和填报，到在线文档的转发填报，再到问卷类表单工具的应用，尽管填报方式和效率得到了提升，但在面对复杂场景如多层级填报下发和数据汇总时，常规的数据填报工具仍显不足，特别对于政府、国企、学校、金融和医院等常遇复杂填报需求的组织来说，如何寻找到满足特定需求的数据填报工具，如何高效快速地完成数据填报工作，仍是他们面临的挑战。作为一款专为解决这些痛点而生的智能化数据填报工具，帮助组织简化数据填报流程，提升数据管理效率，让数据填报变得轻松，让决策更加精准。

原创 指标+AI+BI：构建数据分析新范式丨2024袋鼠云秋季发布会回顾

数栈有自己的AI平台，负责所有产品模块中AI能力的搭建，AI 平台支持多种主流大模型部署，并对接行业和企业知识库，结合指标平台业务库的指标属性、指标血源等元数据构成了大模型的数据基础，然后我们就可以在AI平台上搭建应用工作流，来定制指标AI应用。指标缺口确定后，开发人员开始工作。接下来是指标层次与分类管理，根据企业战略目标、组织及业务进行自上而下的指标分级，可以分为三个等级，指标类型可以按加工方式和程度分为原子指标、派生指标、衍生指标、复合指标和自定义指标，通过多种类型指标的定义，构建起有序的指标体系。

原创 袋鼠云秋季发布会圆满落幕，AI驱动让生产力数智化

在当今时代，AI 的发展如汹涌浪潮，其速度之快超越了任何历史时期。它以前所未有的迅猛之势，渗入到各个领域的不同场景之中，悄然重塑着商业模式与人们的生活方式。在 AI 逐渐成为企业基础属性的背景下，袋鼠云举办秋季发布会，以“AI驱动，数智未来”为主题，旨在深度探讨如何凭借 AI 实现新的飞跃，重塑企业的经营管理方式，加速数智化进程。一、AI 驱动，构建数智基建与应用的产品服务生态圈 袋鼠云&易知微CEO宁海元在开场中提到，AI本质是基于数据的智能，如何收集、存储、计算和应用数据，则需要数智基建层

原创 袋鼠云产品功能更新报告12期｜让数据资产管理更高效

此前，在配置质量规则时，无法关联自定义调度周期进行质量任务的运行，导致无法满足用户个性化配置运行周期的需求；并且在质量任务运行过程中，存在一个质量任务运行时间过长的情况，中途无法停止导致无法释放资源。为了改善这些问题，本期进行了以下优化：（1）在质量规则创建，配置调度信息时支持关联自定义调度周期，修改模块包含新建/编辑单表校验规则、多表校验规则、规则集，查看规则详情。（2）支持中途停止质量任务：质量规则创建后，支持在质量任务运行过程中进行中途停止操作。

原创 大数据存储计算平台EasyMR：大数据集群动态扩缩容，快速提升集群服务能力

同时，提高集群的整体性能和稳定性，快速实现集群服务能力提升，提高资源利用率和系统性能，助力企业在数据储存和管理方面实现质的飞跃。在 EsayMR 实例管理页面，选中要退服的节点，在更多下拉菜单中，选中退服按钮，并进行退服的操作。在 EsayMR 实例管理页面，选中当前是已经退服状态的节点，在更多下拉菜单中，选中入服按钮，并进行入服的操作。动态扩缩容功能是集群管理中非常关键的一部分，能够根据工作负载的变化自动调整应用程序的副本数，以确保资源的高效利用和服务的稳定性。

原创 大数据存储计算平台EasyMR：多集群统一管理助力企业高效运维

其中，袋鼠云自主研发的核心组件大数据运维管理平台EasyManager，更是将多集群统一管理能力提升到了新的高度，为企业提供了一站式的多集群管理、集群部署、集群运维与集群监控解决方案。这样，企业可以根据实际业务需求，动态调整集群的规模，避免了资源的浪费，也确保了业务高峰期系统的高可用性。此外，EasyMR还提供了统一的安全策略管理功能，结合Ranger等访问控制工具，企业可以在多个集群中设定细粒度的访问控制策略，并通过集中化的安全审计功能，追踪和记录用户的操作行为。兴趣的朋友，可以点击文末的。

原创 袋鼠云数据资产平台：数据模型标准化建表重构升级

由于我们是列表型表单，如果是使用被动模式，当出现 A 列变更后，所有行的 B 列同步修改这种1对N依赖情况，需要对所有行的 B 列添加 A 依赖，那么当 A 变化时，所有行的 B 列添加的监听回调会执行N次，如果采用主动模式，则只需要在一次监听回调中修改所有行即可。因此，我们采用主动模式。依赖具有传递性，如依赖为A ⇒ B ⇒ C，如果使用以前的方法，我们通常会在A表单项 onChange时手动改变 B 和 C ，但其实 C 是与 B 才是直接关联的，我们可能会考虑不到还要同步设置 C 的值。

原创 数据资产入表全流程解析，助力企业数据要素价值释放

今年被业内称为“数据资产入表元年”，根据2024年第一季度《中国企业数据资产入表情况跟踪报告》显示，一季度已经有18家A股上市公司在财报中披露了数据资源，共涉及金额1.03亿元，另有22家城投公司和28家类城投国企披露了数据资产入表情况，更有部分企业已经通过入表资产开展融资活动，通过数据资产获取银行授信。数据资产入表以后后续企业的资产披露、财报里面就可以看到数据资产相关的内容。即数据资产会计核算，指的是把有价值的数据编制进资产负债表，作为企业沉淀的无形资产，让数据要素的交易流通变得合规，数据价值可计算。

原创 《袋鼠云大数据实操指南》No.6：建设指标管理平台 解锁企业数据价值

该系列兼顾理论讲解与实战演练，内容覆盖从数据采集、开发治理、资产梳理、服务应用到深度分析与洞察等大数据技术领域的全链条环节。近年来，新质生产力、数据要素及数据资产入表等新兴概念犹如一股强劲的浪潮，持续冲击并革新着企业数字化转型的观念视野，昭示着一个以数据为核心驱动力的新时代正稳步启幕。面对这些引领经济转型的新兴概念，为了更好地服务于客户并提供切实可行的实践指导，自3月20日起，袋鼠云将推出全新《袋鼠云大数据实操指南》系列直播。所有对于数据的问题和疑惑，你都将在《袋鼠云大数据实操指南》中找到答案！

原创 数据资产入表元年，企业如何抓住数据资产增值的机遇？

数据资产是指企业拥有或控制的、预期会给企业带来可持续经济利益、以数据为主要内容和服务的可辨认形态。“企业拥有或控制的”，就是企业必须拥有数据资产的完整权利，即所谓的"三权"：数据资源持有权、数据加工使用权、数据产品经营权。“预期会给企业带来可持续经济利益”，这些利益可以进一步细分为内部价值和外部收益，内部价值指的是企业自身生产、销售并使用数据资产所产生的价值；而外部价值则是指企业生产、销售数据资产给其他使用者所产生的收益。

原创 深度解析：基于离线开发的数据仓库转型落地案例

在当今这个数据驱动的时代，各行各业都正经历着前所未有的变革。伴随技术的飞速发展，作为企业数据管理与分析的核心，如何更好地发挥作用，助力企业保持业务的敏捷性与成本效益，成为大家关心的焦点问题。本文将通过具体案例分析，展现基于的数据仓库转型落地中的关键步骤与实施策略。

原创 直播预约丨《袋鼠云大数据实操指南》No.5：数字营销新策略 构建高效客户洞察平台

近年来，新质生产力、数据要素及数据资产入表等新兴概念犹如一股强劲的浪潮，持续冲击并革新着企业数字化转型的观念视野，昭示着一个以数据为核心驱动力的新时代正稳步启幕。面对这些引领经济转型的新兴概念，为了更好地服务于客户并提供切实可行的实践指导，自3月20日起，袋鼠云将推出全新《袋鼠云大数据实操指南》系列直播。《袋鼠云大数据实操指南》第五讲——《数字营销新策略 构建高效客户洞察平台》将于9月4日 15:00-16:00开播层层解析。所有对于数据的问题和疑惑，你都将在《袋鼠云大数据实操指南》中找到答案！

原创 袋鼠云《数据资产管理白皮书》重磅发布，提供数据资产管理新思路，激发数据资产新动能（附下载）

近年来，政府将数据要素纳入了经济发展的重要指示性文件当中，数据作为一种新型生产要素，已经成为第五大生产要素。要实现数据要素的市场效能，真正发挥数据生产要素的作用，离不开数据资产化，而数据资产化自然也离不开数据资产管理这一基础工作。数据资产管理是释放数据要素价值、推动数据要素市场发展的重要前提。全面有效的数据资产管理体系，为规范数据资产的采集、加工、使用过程，建立数据资产生态，持续运营数据资产，以及政府机构与企事业单位在资产计量确认方面提供良好的数据条件和能力基础。

原创 袋鼠云产品功能更新报告11期｜能力AI+，实力拿捏！

在之前的版本中，当任务选择了自定义调度周期时，只能设置按天调度的执行时间，而无法进一步根据自定义的日历设置小时和分钟级别的调度，限制了灵活性并难以满足多样化的客户需求。数栈V6.2解决了这一问题，现在支持在任务中灵活设置天、时、分钟三种调度模式。当选择的自定义调度周期为天日历时，可以进行实例批次的选择。选择“单批次”代表计划日期内仅可指定一个计划时间运行实例，选择“多批次”则代表计划日期内可以指定多个计划时间运行实例。

原创 周期补数据、定时补数据，深入了解两种补数据的特殊方式

通过对周期补数据和定时补数据的介绍，我们深入了解了这两种特殊的数据补充方式。周期补数据适用于应对诸如数据采集故障、系统升级或迁移、业务规则变更等导致的数据缺失或错误，能按照一定规律自动补充，减轻手动操作的繁琐。定时补数据则能充分利用特定时间段的资源，满足如资源有限场景下的补数据需求，避免人工熬夜操作。

原创 直播预约丨《指标体系建设实战》第五期：指标体系构建方法与案例分享

为了帮助各大企业解决这些指标问题和困境，在杭州师范大学大数据科学研究院及温州数据治理产教融合共同体的专业指导下，袋鼠云凭借其在行业指标体系建设领域的深厚底蕴与丰富的实战经验，汇聚了多位袋鼠云的一线大数据专家，精心编撰了。指标是反映企业的各项核心业务活动、管理成效的数据体系，指标体系作为联结业务逻辑与数据实体的关键桥梁，是构建高质量数据统计的基础单元，并在量化业务绩效和效果评估中扮演着核心角色。不仅构筑了扎实的理论框架，还详尽剖析了三大典型行业在指标体系建设上的实践案例，深度解读了。指标管理体系构建方法。

原创 从困境到突破，EasyMR 集群迁移助力大数据底座信创国产化

在大数据时代，企业对数据的依赖程度越来越高。然而，随着业务的不断发展和技术的快速迭代，大数据平台的已成为企业数据中台发展途中无法回避的需求。在大数据平台发展初期，国内数据中台市场主要以国外开源 CDH、商业化 CDP、HDP 为主。然而，由于国际形势的转变，以海外大数据基础平台作为基石构建的数据中台面临着极为严峻的安全挑战。● Cloudera 和 Hortonworks 产品开启付费订阅模式。

原创 企业如何构建全面的指标管理体系？

在当今数字化的时代，企业对于数据的管理和利用愈发重视，而构建全面的成为了企业提升数据价值、优化决策流程的关键环节。

原创 优化数据处理效率，解读 EasyMR 大数据组件升级

在 AI 蓬勃发展的时代，数据已然成为 AI 应用中至关重要的一个环节。EasyMR 作为国产的大数据引擎，将会在大数据领域展开更为深入的探索，致力于简化大数据工具的操作难度，提高运维人员的工作效率。

原创 React 的 KeepAlive 实战指南：深度解析组件缓存机制

Vue 的是用于的高阶组件，可以有效地提高应用性能。它能够使组件在切换时仍能保留原有的状态信息，并且有专门的生命周期方便去做额外的处理。该组件在很多场景非常有用，比如：· tabs 缓存页面· 分步表单· 路由缓存在 Vue 中，通过包裹内的组件会自动缓存下来, 其中只能有一个直接子组件。可惜的是 React 官方目前并没有对外正式提供的 KeepAlive 组件，但是我们可以参考 Vue 的使用方式与 API 设计，实现一套 React 版本的 KeepAlive。

原创 直播预约丨《袋鼠云大数据实操指南》No.4：数据服务API实战解读，助力企业数字化跃迁

近年来，新质生产力、数据要素及数据资产入表等新兴概念犹如一股强劲的浪潮，持续冲击并革新着企业数字化转型的观念视野，昭示着一个以数据为核心驱动力的新时代正稳步启幕。面对这些引领经济转型的新兴概念，为了更好地服务于客户并提供切实可行的实践指导，自3月20日起，袋鼠云将推出全新《袋鼠云大数据实操指南》系列直播。该系列兼顾理论讲解与实战演练，内容覆盖从数据采集、开发治理、资产梳理、服务应用到深度分析与洞察等大数据技术领域的全链条环节。旨在帮助每一位关注大数据产品和技术的朋友们更深入地理解和掌握其应用与实践。

原创 如何打造高效、安全、协同的指标管理体系？袋鼠云是这样做的

指标定义是衡量业务或技术性能的关键参数，它全面涵盖了评估标准的核心要素。袋鼠云提供的指标定义主要包括基本信息定义、技术信息定义、指标分类定义三类内容。通过这些必要要素的整合，指标管理平台构建了一个从理论到实践，横跨业务和技术领域的综合性指标定义与评估框架。● 基本信息定义基本信息定义主要包括如下内容：· 明确的指标名称和唯一标识：用以对指标做区分和追踪查询· 指定业务负责人：确保指标在业务场景中的有效性和实用性得到保障· 确立技术负责人：负责监督技术实施过程，保证指标计算的精确度及数据获取的时效性。