- 博客(53)
- 收藏
- 关注
原创 龙石数据中台V3.5.3升级 | 监控中心大改造
当任务指标超出预设阈值时,系统会自动预警并通知相关责任人,支持微信、短信、邮件等多种预警方式,确保问题在萌芽状态就被及时解决。各任务监控:对数据归集任务、数据清洗任务、数据开发任务、数据共享任务等进行统一管理,支持设定监控指标以及监控预警方式。龙石数据中台的监控中心通过智能化预警机制,实现了从监控–>预警–>处理的全流程闭环。主机监控:实时监控主机的CPU使用率、剩余内存、剩余磁盘、TCP连接数等关键指标。无论是资源组、主机、数据库,还是各类任务的执行情况,都能通过中心总览一目了然。如何快速响应问题概况?
2025-06-06 15:24:48
162
原创 龙石数据中台V3.5.2升级 | 新增码表转换功能
摘要:本次更新主要优化了API模块和数据标准模块功能。API模块将接口分类为平台API、穿透API、自助API和编排API,优化了自助API的数据集标识符必填要求,并新增SQL全屏编辑功能。数据标准模块新增转码功能,支持业务原码与标准数据的映射绑定及批量转换,修复了实时分发中非字符类型数据的同步问题。这些改进提升了API开发的灵活性和数据治理的标准化程度。(149字)
2025-06-06 14:36:29
277
原创 龙石数据中台V3.5.1升级 | 数据实时收集来了!
1)API模块新增数据写入功能,支持业务方通过API编排实时提交数据,并增强复杂查询能力,实现多条件组合查询;2)数据归集模块支持本地文件读取,通过组件化操作快速处理Excel/CSV等文件,可设置自动化读取模板;3)架构部署方面,全线产品现已适配ARM服务器架构,满足多样化场景的低功耗高性能需求。更新提升了数据采集灵活性和系统兼容性。
2025-06-06 14:28:08
186
原创 数据质量管理平台的源头治理工作流程
本文提出了一套系统化的数据质量管理体系,涵盖范围确定、规则制定、质量评测、问题管理、修复推进等全流程。通过建立多维度的数据质量评价标准,运用大数据技术实现异常检测和智能修复,构建"可感知、可追溯、可落实"的质量管理体系。该体系强调部门协作,采用"旁路监测"模式评估数据质量,通过工单系统落实责任,定期发布质量报告并推进问题修复,最终形成数据质量管理闭环。文章还附图展示了数据质量管理的具体流程。
2025-06-02 08:15:00
245
原创 数据中台(大数据平台)之数据安全管理
数据安全管理是保障数据安全可用的关键,结合大数据技术和行业特性,数据中台产品应具备四大核心功能:1)数据分类分级,支持自定义分类树形管理;2)智能识别敏感数据,通过规则匹配自动扫描;3)敏感数据管理,支持识别规则配置和多维度查询;4)细粒度安全控制,实现字段级权限管理。这些功能通过脱敏、加密等措施,确保敏感数据得到有效保护,防止泄露和滥用。
2025-06-01 18:00:00
361
原创 数据共享交换平台之数据资源目录
信息资源目录体系的构建功能,主要包括:1)多维度分类展示(技术/管理维度、数据层级);2)按主题、行业、应用领域和提供部门展示资源;3)支持组合检索;4)提供三种数据共享方式(库表、文件、API);5)详细查看资源信息(基本信息、示例数据、关联资源等)。该体系实现了资源的系统化管理与灵活共享交换。
2025-06-01 14:00:00
184
原创 API平台(API网关)之API编排
本文介绍了一款支持WEB可视化的API编排工具,通过拖拽式操作实现API流程重组,具备多协议转换(Restful/WebService/JAVA)和混合编排能力。系统支持流程控制组件、自动数据格式转换(JSON/XML),可满足复杂业务场景需求,实现高效的API服务聚合与自动化流程处理。内置可视化界面简化了API编排过程,提升开发效率。
2025-06-01 05:45:00
137
原创 数据中台(大数据平台)之元数据管理
元数据管理是数据中台的核心功能,主要包括五大关键能力:1)数据资产地图可视化展示数据分布结构和血缘流向;2)多维度的元数据检索功能;3)完整的元数据维护管理;4)自动化元数据采集能力,支持多种数据源适配和灵活的执行策略配置;5)元数据变更日志追踪。通过建立统一的元数据管理体系,为数据资源目录、安全管控、报表开发等场景提供标准化支撑,同时自动分析数据血缘和影响关系,实现对数据资产的全面管控。
2025-05-31 10:00:00
137
原创 数据中台(大数据平台)之主数据管理
文章摘要:主数据管理系统包含四大核心功能模块:1)编码管理,通过唯一标识符规则确保数据分类标准化;2)数据维护,提供全生命周期管理功能保障数据质量;3)数据应用,支持灵活查询和导出提升工作效率;4)版本管理,记录历史变更并支持版本比对分析。系统通过规范化管理和全流程管控,确保组织内主数据的准确性、一致性和可用性,为业务决策提供可靠数据支撑。
2025-05-31 08:30:00
152
原创 数据资产入表的数据质量评估
数据资产入表需进行全面质量评估,重点关注八个方面:完整性(检查缺失值)、准确性(验证数据真实度)、一致性(确保跨系统统一)、时效性(分析数据更新情况)、可信度(综合评价质量)、规范性(审核标准符合度)、安全性(检测保护措施)、可用性(考察业务支持能力)。通过系统化的评估流程,可有效提升数据质量,为决策分析提供可靠支持。
2025-05-31 07:00:00
363
原创 API平台(API网关)的API安全保障机制
API安全保障机制采用多维防护策略,包括黑名单/白名单访问控制、调用审计追踪、国密算法加密和多租户数据隔离。黑名单阻断非法访问,白名单授权可信终端;调用审计记录全链路日志;支持国密算法保障数据安全;通过多租户空间实现用户级数据隔离。这些措施共同构建了包含访问控制、行为监控、加密保护和权限管理的立体化API防护体系。
2025-05-30 15:09:05
455
原创 数据交易场景的数据质量评估
:数据质量评估是数据要素流通的关键环节,需从完整性、准确性等多维度进行检测分析。通过优化数据源、处理流程和应用方式提升质量,并建立交易后追踪机制持续改进。科学的评估体系有助于提升数据资产价值,满足多元化需求,推动数据经济健康发展。
2025-05-30 15:06:09
173
原创 数据共享交换平台之文件交换
文件交换管理系统提供跨部门文件传输通道,支持按业务场景分类管理。主要功能包括: 1.文件交换统计,记录交换次数、数据量等; 2.发送/接收通道管理,支持手工上传、自动交换、API集成、短信通知及日志查询; 3.任务管理,提供定时交换和手工上传两种方式; 4.文件续传功能,确保大文件传输可靠性。 系统满足多样化文件交换需求,提升部门间协作效率。
2025-05-30 15:04:44
234
原创 数据中台(大数据平台)之数据仓库建设
数据中台是企业数据管理的核心枢纽,支持企业级数据仓库建设。数据仓库建设需遵循分层原则,包括贴源层(数据接入)、治理层(数据清洗整合)、应用层(数据分析)和共享层(数据分发)。每个层次需构建概念、逻辑和物理模型,并通过审核、同步和版本管理确保模型质量。数据中台通过规范化管理和技术支撑,打破数据孤岛,提高数据价值,赋能企业业务决策。
2025-05-27 14:11:39
992
原创 API平台(API网关)的两种应用模式
API平台的两种授权鉴权模式:申请审核模式和中心授权模式。申请审核模式适合用户主动申请API权限的场景,由管理员审核后分配密钥;中心授权模式则适用于管理员集中管控的场景,可批量授权并关联业务主题。摘要指出,平台应根据业务需求、用户场景选择适当模式,并保持灵活性以适应技术发展和市场变化,确保API管理的有效性和安全性。
2025-05-27 13:57:32
221
原创 API平台(API网关)的API监控预警机制
API管理平台提供自动化监控功能,支持创建多API测试集并设置预警指标,实时监测API运行状况。平台自动生成健康分析报告,展示可用性、响应时间等关键指标,并提供邮件/微信/短信预警通知。同时支持预警记录查询、联系人管理及消息服务器配置,帮助开发者全面掌握API性能状态,提高系统可用性。
2025-05-27 13:46:24
203
原创 数据共享中的库表交换怎么做?
库表交换管理功能是数据共享交换平台的核心组件,旨在实现跨部门库表数据的高效交换。该功能支持多种数据库类型(如MySQL、Oracle等),并按照业务场景对交换通道进行分类管理。
2025-05-24 00:15:00
222
原创 数据共享交换平台之API服务开发、挂载、申请审核
API管理平台是确保API服务高效、安全运行的关键工具,它支持API从开发到下线的全生命周期管理,包括安全审计、监控分析和健康报告等功能。平台通过集群架构部署和弹性扩展能力,保证稳定性和可扩展性。
2025-05-23 18:23:59
289
原创 数据中台(大数据平台)之数据资源目录
资源编目是对数据资源各种数据和特征数据的基本集合管理,包括数据资源的内容信息(例如摘要、分类属性、信息项等)、管理信息(例如数据提供方信息、共享类型、开放类型等),通过对信息资源的具体信息编目,数据资源目录对应的使用部门能够准确地了解和掌握资源的基本概况,发现和定位所需要的资源。也便于数据资源中心对数据资源的统一管理。数据资源目录是数据管理的账本,是数据应用的基础,更是是数据治理成果的体现,因此数据中台产品应提供数据资源目录编制、发布、资源挂载、下架的管理能力。1.数据资源目录分类。
2025-05-23 11:26:18
329
原创 数据中台(大数据平台)之数据质量管理
本文介绍了一个基于国家标准、行业标准和地方标准的数据质量评价体系,该体系利用大数据技术和机器学习理论,实现了海量信息的异常探查和智能修复,并实时监控数据质量波动。
2025-05-22 17:26:49
367
原创 中小企业要慎重启动数字化转型,切忌盲目跟风
大多数企业不适合全面推进数字化转型,不能动不动就要智能化升级,建议从主业务流程贯通、跨部门数据共享、核心业务指标监测、数字化人才培养等方面缓慢推进数字化转型。
2025-04-09 11:05:35
158
原创 数据治理为什么成本高但成效不好
缺人才就会导致自己人不懂数据治理,没法选择一条适合自己的方案和路径,也就导致数据治理的不持续,没法发挥数据治理的应有效果。,我们会根据我们的经验,系统化地教会学员怎么一步步地做好数据治理,包括怎么做调研,怎么建立数据制度,甚至怎么提升组织的数据意识,以及在遇到各种阻力时该怎么办;所以,这个学习会比较严格,也会有些压力,需要大家认认真真地去学,才能学得扎实。,我们的咨询专家会给学员讲讲数据治理的理论知识,包括元数据、数据标准、数据质量、数据安全、数据标签、数据指标等概念,让学员熟悉数据治理的理论;
2025-03-28 10:10:09
252
原创 4个关键点:让数据治理变得简单、高效
数据治理变简单有4个要点:确定一个清晰的目标、制定一个可行的机制、找到一个简单的方法(理采存管用)、选择一个好用的工具(数据治理流水线)。
2025-03-27 17:49:00
310
原创 数据治理可类比为粮食加工
数据治理如同粮食加工,涵盖收集、清洗、存储、加工和防护等环节。从数据汇聚(收割)到安全管理(防损),再到开发应用(烹饪),每一步都影响数据价值。
2025-03-26 18:54:17
240
原创 AI与数据的双向奔“赋”
DeepSeek作为AI工具,不会颠覆数据治理行业,而是与其双向赋能。它提升数据治理效率、自动化生成规则与脚本,同时依赖治理后的高质量数据训练。数据治理也为AI知识库构建提供基础,双方协同创新。
2025-03-25 19:40:06
166
原创 龙石数据集成平台有哪些要点?
龙石数据集成平台涵盖数据接入、清洗与共享三大环节,支持多源接入、高效处理与灵活共享。其特点包括简便操作、高性能、内置丰富清洗组件与质量规则、保障数据安全及自动化API开发等。平台全程监控预警,确保稳定可靠。作为龙石数据中台的一部分,该平台已广泛应用并获好评,龙石数据专注数据管理,期待与您共创数据价值。
2024-08-29 16:48:12
312
原创 数据中台选型应注意哪些事项?
在选择数据中台时,需关注需求匹配、技术架构可扩展性、数据治理与安全性、集成兼容性、处理分析能力、用户体验、供应商实力与成本效益。龙石数据中台3.5凭借其丰富的实践经验、高度安全性、扩展灵活、易用高效、卓越性能及完善服务体系,赢得了市场认可。作为数据管理领域的佼佼者,龙石数据期待与各界携手共创数据价值。
2024-08-27 17:27:56
365
原创 龙石数据中台有哪些功能和特点?
龙石数据中台v3.5历经7年精心打造,跨越4大研发阶段,现已在全国多地广泛应用并广受好评,荣获多项国家级荣誉。该平台集数据模型、集成、清洗、元数据、主数据管理等多模块于一体,全面支持数据治理、标准制定、质量管理及安全管控。其特点包括符合国际标准、实践丰富、高度安全、灵活扩展、易用高效及高性能,且提供全面培训体系,完全符合信创要求。龙石数据专注于数据管理领域,致力于数据共享、中台建设及质量服务,诚邀各界交流合作,共谋数据价值最大化。
2024-08-27 10:13:50
624
原创 数据中台(大数据平台)之大数据开发
各行业积累了大量的结构化和非结构化数据,如何高效地处理和分析这些数据,进而从中挖掘有价值的信息,是当前面临的重大挑战。建立一个高效、可靠的大数据开发平台,能够为数据分析和应用提供强有力的支撑,是大数据时代的必然选择。面向具体的数据标签、数据指标、可视化报表等应用场景,提供简单易用的数据开发、处理和分析功能,有助于更好的释放数据价值。
2024-08-05 10:42:24
560
原创 数据质量管理平台的质量规则体系
数据质量规则是一组定义和规范,用于指导数据的收集、处理和存储的过程。它要求参与者遵守一定的标准来确保数据的有效性、准确性、完整性和一致性。
2024-08-05 10:41:32
557
原创 数据共享交换平台的管理体系介绍
数据共享交换平台已逐渐成为推动跨部门、跨组织、跨系统间数据互通与整合的重要工具。一个完善的数据共享交换平台管理体系对于确保平台的高效运行、数据的安全可靠以及资源的充分利用具有重要意义。数据共享交换平台的管理体系包括平台架构、数据安全、资源共享、目录管理、权限控制、监控日志、运维支持以及法规遵从等方面。
2024-08-05 10:39:28
459
原创 API平台(API网关)之API接口管理
API接口管理能力包括API开发、测试、发布、维护、运行到下线的完整周期,以及API安全管理、监控预警、统计分析等综合管理能力。
2024-08-05 10:38:22
535
原创 API平台(API网关)的应用场景
API平台是以对API进行全生命周期管理为核心,提供全面、精简的API统一管理服务,涵盖无代码API开发、API测试、API编排、外部API接入、内部API共享、版本管理、协议转换、鉴权授权、流量控制、数据加密、黑白名单、集群部署和监控预警等。广泛适用于系统集成、能力整合、连接伙伴和能力变成的应用场景。
2024-08-05 10:36:34
402
原创 数据中台(大数据平台)之数据集成平台建设
数据集成是以各业务数据为起点,经过数据对接、数据抽取,最终将业务数据归集到数据资源中心贴源层数据库的过程。提供批量数据归集和实时数据归集,支撑数据资源中心建设,提供可视化设计和配置功能,快速实现归集流程的设计开发,以及任务管理功能。
2024-08-02 16:01:35
458
原创 第三方数据质量管理服务方案
依据国家标准、行业标准、地方标准、团体标准,建立事前、事中、事后的数据质量监测和全面评价指标,建立数据质量考核评价体系,充分运用大数据相关技术和机器学习相关算法,实现海量信息的异常探查和智能修复,实时监控数据质量波动,以数据质量通报和考核为抓手,建立数据状态可感知、数据问题可追溯、质量责任可落实的数据质量管理体系和运营体系,而第三方数据质量管理服务则侧重于监测源头的数据质量,发现源头问题,并推动源头解决问题。
2024-07-15 15:35:26
315
原创 专题 | 万字分享数据共享交换平台的实践要点
本文主要是介绍如何通过数据共享交换平台解决横纵各部门、各系统之间的“信息孤岛”、数据烟囱、重复建设等问题,打破各部门间的信息壁垒,降低各部门数据共享门槛,建设部门间的数据高速公路,实现各部门的数据融合、业务协同、数据资产化,进而推动整个信息化建设进程飞速发展。
2022-12-08 16:08:14
1327
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人