数据交换与数据空间构建全解析
在当今数字化时代,数据的交换和利用对于企业和社会的发展至关重要。数据交换涉及多个方面,包括信任的建立、平台的搭建、法规的遵循以及数据的可追溯性等。同时,数据空间的构建也成为了推动数据经济发展的关键。
1. 数据交换中的信任要素
数据交换中的信任是多维度的,主要包括以下几个方面:
-
对数据来源的信任
:数据获取者希望确保能够信任数据提供者,他们希望数据提供者是诚信行事的。信任取决于诸多因素,如提供数据的组织的声誉、其长期交付数据的能力以及所交换数据来源的可见性等。
-
对数据获取者和/或使用者的信任
:数据提供者期望数据获取者按照商定的条款和条件使用所交换的数据。如果数据提供者已经了解数据获取者,或者在进行数据交易之前能够获取有关获取组织的足够详细信息和身份,信任通常会增加。
-
对数据使用的信任
:使用清晰、详细且具有法律约束力的合同协议(可以基于开放数据许可证或商业许可证),以及保证数据交易符合现行法规,对增加数据使用的信任有很大帮助。
-
对数据交换服务提供商的信任
:数据提供者和数据获取者越来越多地通过结构化的数据交换、数据市场或数据中心等作为可信第三方的平台进行数据交易。这些实体在欧盟数据治理法案中也被称为数据中介服务提供商,它们在建立信任方面发挥着重要作用。
2. 数据交换平台的作用
数据交换平台是数据价值链的核心,它为数据获取者、数据提供者和数据交换服务提供商提供了部署数据交换策略所需的工具和自动化功能。
-
企业和公共实体使用数据交换平台的目的
:
- 变得更加以数据为驱动,利用数据构建更好的产品和服务,并改进业务流程。
- 通过以受控方式将数据分发给其他组织(实现货币化或免费分发),释放数据的全部价值。
- 通过为其他组织提供数据交换服务,在新兴的数据生态系统中战略性地定位自己的组织。
-
数据交换平台的功能
:
-
数据发现
:简化数据发现过程,使组织减少搜索数据的时间,更多地用于合成有价值的见解。
-
数据产品包装
:便于将数据产品进行包装,并清晰说明数据的使用条件和许可条款。
-
数据技术交换
:通过各种基于文件或基于API的机制处理数据的技术交换。
-
数据交换平台对服务提供商的支持
:
-
平台管理
:管理数据交换平台及其所有参与者,包括注册、审查、访问权限等。
-
活动监控
:监控平台上的活动,自动审查数据提供者用于描述数据产品的元信息。
-
数据交换刺激
:使用专用工具通过算法自动匹配数据供需,并结合通知系统,刺激参与者进行数据交换。
-
商业模式管理
:管理参与者使用数据交换平台的商业模式,可以结合免费、交易和/或基于订阅的方法。
-
报告和指标生成
:生成各种报告和指标,用于分析活动、行为和趋势,同时使协调者能够履行有关互操作性和行使个人权利的义务。
以下是数据交换平台的主要功能表格:
|功能分类|具体功能|
| ---- | ---- |
|对企业和实体的作用|变得数据驱动、释放数据价值、战略定位组织|
|数据交换功能|数据发现、数据产品包装、数据技术交换|
|对服务提供商的支持|平台管理、活动监控、数据交换刺激、商业模式管理、报告和指标生成|
3. 数据交换的法规环境
全球的机构、政府和监管机构在推动可持续数据经济方面发挥着至关重要的作用。通过规范数据的访问和使用,它们有助于提高参与数据共享和数据交换活动的各类组织之间的信任度。
-
欧洲的数据法规领先地位
:自2018年《通用数据保护条例》(GDPR)出台以来,欧洲在制定数据法规方面处于领先地位。该条例启发了世界上许多类似的法规,如美国加利福尼亚州的《消费者隐私法》(CCPA)、巴西的《通用数据保护法》(LGPD)和日本的《个人信息保护法》(APPI)。
-
欧洲新的数据法规
:欧洲委员会提出了新的数据法规,将其范围从个人数据扩展到涵盖所有类型的数据。特别是,工业数据被确定为创建单一数据市场的下一个挑战,该市场将允许数据在欧盟内部和各部门之间自由流动,造福企业、研究人员和公共管理部门。
-
数据治理法案
:作为欧洲数据战略的一部分,最近通过的《数据治理法案》旨在促进个人和企业自愿共享数据,统一某些公共部门数据的使用条件,并定义适用于数据中介服务的要求。
-
数据法案
:《数据法案》旨在确保数据经济中价值分配的公平性。未来的法规将促进企业对数据的访问和使用,增加数据共享或交换的法律确定性,特别是物联网数据;规定公共机构在某些公共紧急情况下使用企业持有的数据;促进云服务和边缘服务之间的切换;提供保障措施,防止非欧盟/欧洲经济区政府非法访问数据;促进数据跨部门再利用的互操作性标准的发展。
4. 数据可追溯性的重要性
可追溯性是指关于过程链中每个步骤的信息的完整性。它是应用程序跟踪和追溯对象状态、发现其过去状态信息并可能估计未来状态的能力。
-
数据可追溯性的必要性
:在特定项目或计划中使用数据时,了解数据获取者和数据提供者打算如何使用数据非常重要。如果数据生态系统中的参与者希望利用数据流通实现共同利益,或者参与数据经济,数据交换环境必须为他们提供可追溯性能力,以确保所有参与者相信数据的使用符合初始协议。
-
数据可追溯性的好处
:数据可追溯性不仅是信任的基石,也是保证所有协作数据项目商业可行性的关键要素。它使参与者能够向监管机构提供有关数据生态系统中所有交换的来源、性质和发展的信息,随着生态系统规模和活动的增加,这一过程变得越来越耗时和复杂。同时,可追溯性还为参与众多数据交换的参与者提供了巨大的数据管理优势,使数据提供者和数据获取者能够优化其数据共享和交换的协调。
-
数据交换平台实现可追溯性的能力
:数据交换平台环境可以提供多种实现可追溯性的能力,如谈判工具,用于查找数据提供者和数据获取者之间的所有交互、谈判状态、交换的消息或所有联系的日期;跟踪与数据交易相关的所有法律文件以及所有数据交换状态的功能,也有助于提高可见性。
以下是数据可追溯性的好处列表:
- 是信任的基石
- 保证协作数据项目商业可行性
- 便于向监管机构提供信息
- 提供数据管理优势
- 优化数据共享和交换协调
下面是数据可追溯性在数据交换中的作用的mermaid流程图:
graph LR
A[数据使用] --> B[数据可追溯性]
B --> C[增加信任]
B --> D[保证项目可行性]
B --> E[向监管机构提供信息]
B --> F[提供数据管理优势]
B --> G[优化数据交换协调]
数据交换与数据空间构建全解析
5. 数据交换治理与混合数据交换平台
数据交换平台是数据供需安全、自信交汇的场所,要构建值得信赖的数字数据交换或访问环境,需要满足以下特定条件:
|条件类型|具体内容|
| ---- | ---- |
|访问条件|仅允许合法参与者共享或获取数据|
|使用规则|通过许可证让数据提供者控制数据,明确数据使用标准甚至再许可权,提供法律保障以限制数据滥用|
|数据流通可追溯性|追踪数据来源及所有流通情况|
|数据交换治理|具备数据流通机制、数据交换可追溯性和数据使用机制,便于监管机构或当局进行审计|
|经济模式|通过平台服务活动赚取佣金或收取平台订阅费等方式实现商业盈利|
|数据主权|平台有机制让数据提供者控制谁能访问其数据集,管理权限、使用限制和相关许可证|
|安全数据交换|以最安全的方式进行数据交换,因为交换的数据具有高商业和战略价值,数据泄露会导致商业损失、竞争变动以及声誉和监管影响|
|合规与隐私|建立信任和安全框架,为利益相关者共享数据提供技术保障,促进数据驱动的创新|
根据不同的用例,数据交换平台可以提供以下不同模式:
-
托管模式
:协调者作为数据交换的可信第三方,数据通过数据交换平台流动。
-
分布式模式
:交易完成后,数据提供者向数据获取者提供数据访问权限,数据进行点对点流动。
-
去中心化模式
:部分业务逻辑通过代理或智能合约等方式委托到节点上。
这三种模式相互补充,对应不同用例,需要特定的技术响应。实现这些功能的数据交换平台被称为混合数据交换平台。
分布式账本技术(DLTs),如区块链,是实现去中心化需求的强大工具。它为这些平台在点对点数据交换方法中提供了颠覆性的替代方案。信息的可审计性便于监控并识别异常,区块链还通过提供可靠的通信层帮助设备实现互操作性。在智慧城市等大规模应用场景中,区块链和物联网将协同工作。要满足分布、去中心化、参与者异质性、互操作性、个人数据保护、端到端加密和数据治理等要求,需要在集成分布式和托管技术之间找到平衡。
下面是混合数据交换平台不同模式的mermaid流程图:
graph LR
A[数据交换平台] --> B[托管模式]
A --> C[分布式模式]
A --> D[去中心化模式]
B --> E[协调者为第三方,数据经平台流动]
C --> F[交易完成,数据点对点流动]
D --> G[部分业务逻辑委托到节点]
6. 基于FIWARE的数据空间构建
基于FIWARE软件构建块,来自多个领域的智能应用程序可以参与创建数据空间。参与此类数据空间的智能应用程序使用通用标准API(如NGSI - LD)并依靠标准数据模型实时共享数字孪生数据。每个智能解决方案通过共享数据为构建现实世界的完整数字孪生数据表示做出贡献,同时也可以利用其他应用程序共享的数据。
借助FIWARE数据市场组件,智能应用程序可以根据具体的条款和条件发布数据,这些条款和条件包括定价或数据使用/访问策略。
创建数据空间需要联邦云基础设施和支持数据主权的机制。此外,还需要添加其他元素来促进数据价值链的创建和数据经济的实现。标准API与标准数据模型相结合,对于支持有效的数据交换至关重要,它能够实现各方之间的松散耦合,以及数据资源和应用程序的可重用性和可替换性。同样,数据空间需要纳入数据资源的发布、发现和交易机制。这些都是FIWARE所实现的元素,它们可以与IDSA架构元素(如IDS连接器)相结合,创建支持可信和有效数据共享的数据空间。
GAIA - X项目于2020年启动,旨在创建欧洲的联邦式数据基础设施,增强安全、自信地访问和共享数据的能力。FIWARE带来了与IDS和CEF构建块兼容的成熟技术,将加速GAIA - X推向市场。
以下是FIWARE构建数据空间的优势列表:
- 支持多领域智能应用参与数据空间创建
- 实现数字孪生数据实时共享
- 提供数据市场组件,便于数据发布
- 结合标准API和数据模型,促进数据交换
- 可与IDSA架构元素结合,保障数据共享可信有效
- 加速GAIA - X项目落地
下面是FIWARE在数据空间构建中的作用的mermaid流程图:
graph LR
A[FIWARE软件构建块] --> B[多领域智能应用参与]
A --> C[实时共享数字孪生数据]
A --> D[数据市场组件]
B --> E[构建完整数字孪生数据表示]
D --> F[按条件发布数据]
C & E & F --> G[创建数据空间]
G --> H[结合IDSA元素,支持可信数据共享]
G --> I[助力GAIA - X推向市场]
757



被折叠的 条评论
为什么被折叠?



