大数据管理平台-数据处理与数据集市

本文介绍了大数据管理平台在财务金融信用行业的应用,涵盖了数据处理的全过程,包括数据仓库和数据集市的构建,强调了数据质量、时效性和分析可靠性的重要性。平台服务于多个行业,涉及文本、图像等多种数据类型,并提到了数据管控、权限控制、元数据管理等多个技术环节。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

 对于数据的理解,不同行业不同人都有不同的见解。从计算机角度来说,全部数据包括食品、文字、数据....都是1和0,或者说是高低电平。对于化学家来说所有的数据也是各种元素的不同状态的组成,哪怕是高低电平存储到硬件上也是si材料或记忆材料的行变。但对于广大群众、对于人本身,还是靠近生活的数据,普惠大众的资料是更有价值的更有意义的。他更容易、更直接的让生活变的美好,对于一个团队也更能体现他们的价值更有发挥的意义。

在这个平台上,主要服务的行业是”财务金融信用“相关,数据类目涵盖文本文字数据、图像影像音频数据、及各种第三方处理的r文件等其他格式的文件。这些数据从采集到入库再到使用输出,我们和大多数数据公司一样,经过数据库表设计、数据纬度指定、业务数据质量评定标准建立、数据建模、数据清洗....数据技术支持方案,包括数据持久化、数据可视化,数据加密等等。这和我们第一次的数据平台架构说明是一致的。

主营业务知识上不多描述了,应为这一数据处理同样适用于体育、五金、软件外包各个行业。

*系统元数据

**业务元数据和基础业务标准数据(技术元/业务元)

***经典数据分层架构:集市--->仓库(源数据/数据源/实体数据/纬度/应用型数据处理流)---->输出(文本/可视化)

****数据管控权限(CRUD及可视化权限等操作权限控制或角色设计)

1.数据仓库(按公司部门分(营销部/技术部/财务部/业务部/综合部),按业务分类分(企业基本数据/企业财务数据/企业行为数据/企业舆情信息)

2.数据集市(为数据仓库子分类库建设关系库/非关系库库表结构/ETL粒度处理流程/(子业务/部门业务流程说明:主体域)/特殊主题数据处理模型支持/星形模式/3NF模式)

--

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值