2019“数据开放”指数发布,新增36个地方平台,开放数据集容量一年增长20倍

HDF5: infinite loop closing library 【DigestPath2019记录】 用keras跑分类网络时遇到以下问题 OSError: Unable to open file (unable to open file: name = '/media/s2/cyq/DigestPath2019/Colonoscopy_tissue_segment_dataset/train_y.h5', errno = 2, error message =... 阅读详情

大数据文摘出品

记者:周素云


2019 年第五届中国国际大数据产业博览会于5月26日~5月29日在贵州贵阳举行。在27日的“政府数据开放利用与生态体系建设” 论坛中,复旦大学联合国家信息中心数字中国研究院发布了 《2019中国地方政府数据开放报告》 (以下简称《报告》)。


《报告》 由复旦大学数字与移动治理实验室出品,是国内第一个针对地方政府数据开放水平的专业报告,自2017 年5 月起首次在贵阳数博会发布以来,每年定期制作“ 中国开放数林指数 ”,对我国地方政府数据开放进行综合评价,以助推我国政府数据开放生态体系的建设与发展。



报告出品方邀请国内外学、政、产各界共七十余位专家共同参与,成立了 “中国开放数林指数”评估专家委员会,基于数据开放的基本原则,借鉴国际数据开放评估报告指标体系的经验,立足我国政府数据开放的政策要求与实践现状,构建起一个系统、科学、可操作的评估指标体系,并根据该体系采集分析数据、制作指数报告、提出对策建议。


评估指标体系


专家委员会基于数据开放的基本原则,借鉴国际数据开放评估报告指标体系的经验,立足我国政府数据开放的政策要求与实践现状,构建起一个系统、科学、可操作的中国地方政府数据开放评估指标体系 ,并为每项指标分配了权重。



评估指标体系共包括准备度、平台层、数据层、利用层四个维度及下属多级指标:


准备度是“数根”,是数据开放的基础,包括法规与政策、组织与执行、标准规范等三个一级指标。


平台层是“数干”,是政府开放数据和用户获取数据的载体,是展示利用成果的中心,也是连接数据开放供给侧和需求端的桥梁,包括数据发现、数据获取、工具提供、利用展示、互动反馈、公众传播和账户体验等七个一级指标。


数据层是“数叶”,是数据开放的核心,包括数据数量、数据质量、数据标准、数据覆盖面、数据持续性等五个一级指标。


利用层是“数果”,是数据开放的成果。利用层是今年新增加的评价维度,旨在促进政府数据开放后的社会化利用,包括利用促进、成果产出和数据利用等三个一级指标。


数林概貌


截至2019年上半年,我国已有82个省级、副省级和地级政府上线了数据开放平台。与2018年报告同期相比,新增了36个地方平台。



省级数林分布


东南沿海地区的省级平台已经逐渐相连成片,并向内陆地区不断扩散。 广东省和山东省省内的各地市都推出了数据开放平台,形成我国最为密集的省级“开放数林”。


41.93%的省级行政区、66.67%的副省级城市和18.55%的地级城市推出了数据开放平台,政府数据开放平台已逐渐成为一个地方数字政府建设的“标配”。


指数分值较高的省份主要集中在东部沿海地区,指数分值较高的副省、地级城市很多都出现在山东和广东两省内,同时,位于中西部和东北部地区的贵州省、贵阳市、成都市、银川市、哈尔滨市也表现抢眼。


副省级地级数林分布


开发式数据集爆发式增长


全国开放数据集总量从2017年8398个迅速增长到2019年的62801个,增幅近七倍。开放数据集的容量与2018年报告同期相比,呈现出爆发式增长,一年之内增幅近20倍。


约三成的平台上开放的数据集总量已超过了一千个,约两成的平台上开放的数据容量已超过1亿,但仍有超过三成的平台上开放的数据容量仅在10万及以下。


仅有约四成的平台开放了优质数据集,但优质API接口仍屈指可数,调用难度较高,能调取到的数据容量小、更新频率低。近四成的平台缺少专门的数据开放授权协议,只有16%的平台在授权协议中明确授予了用户免费获取、不受歧视、自由利用、自由传播和分享数据的权利。



目前只有不到一成的平台为每个数据集明确标示了包括有条件开放在内的多种开放类型。不到一成的平台能在近两年来的每个季度中都持续上线新增数据集,而超过九成的平台曾出现数据集增长中断或停滞的情况。在2019年第一季度内,近五成的平台没有更新过数据集。


超九成平台未标注数据来源


有一成多的地方举办过类似开放数据创新利用比赛的利用促进活动,但只有上海市和北京市两个地方连续举办。仅在3.7%的平台上发现了少量的有效服务应用,主要关于交通出行、教育科技和卫生健康主题。


超过六成的平台展示的是由政府部门自身开发而不是政府数据开放后被社会开发利用所产生的应用; 超过九成的平台展示的利用成果未标注数据来源,而即使标注了的数据来源,也普遍存在数据链接无效、数据搜索不到或数据不完整等情况。


地方平台寥寥无几


只有一成的平台能按用户使用场景和标签分类进行数据导引。不到两成的平台提供了开放数据目录。提供了数据请求功能的地方平台已超过六成,但其中真正能回复用户数据请求的地方平台寥寥无几。


开通了意见建议和数据纠错功能的平台已占六成左右,但没有一个地方真正回复用户的意见建议和数据纠错反馈。 尚未有平台真正对有条件开放的数据开通了申请功能。


标明了利用成果的数据集来源、数据提供部门和利用者名称等信息的平台只占一成。提供数据发布者联系方式的平台不到一成。 超过三成平台的账户注册过程较为繁琐且要求用户提供的个人信息较多。


数据是数据开放的核心


各地方陆续组建了专门的政府数据管理部门,其中近七成为一级委办局,数据开放工作的组织基础得到加强。尚未有地方出台专门针对数据开放的地方性法规、地方政府规章或规范性文件。仅有16个地方的党政领导在公开场合讲话要求开放数据。仅有广东、山东两省制定了专门针对数据开放的地方标准。只有上海市连续制定和公开了专门针对政府数据开放的年度工作计划。


数据是数据开放的核心,没有数叶,就不会有枝繁叶茂的数林。一个地方政府数据开放的水平实际上反映了这个地方的政府数据治理能力,各地应不断提升数据质量,开放更多高价值、高颗粒度、动态更新的优质数据集。对不同安全等级和敏感程度的数据可进行分级分类开放,实现数据开放的精细化管理,在保障数据安全的前提下,尽最大可能将政府数据开放出来。


结语


目前缺少利用成果的根本原因并不是数据利用者没有需求或缺少能力,而是绝大多数优质的、高价值的政府数据仍没有开放出来。因此,促进利用的关键在于增加数据供给。


平台是连接数据供给侧和数据利用端的通道,是开放和获取数据的载体,是传播资讯动态的渠道,是展示利用成果的平台。平台应成为一种持续性提供的服务,而不只是一个一次性开发完成的项目。各地平台的常态化运营服务能力亟需得到加强,从而能及时回应用户提出的意见建议和纠错反馈,快速处理用户提出的数据申请和数据请求,定期审核和上传用户开发的利用成果。


法规、组织、标准方面的准备度是数据开放的基础,各地应加强针对数据开放的法规、政策和标准的制定,地方党政主要领导应更多公开表态支持数据开放。

2019大数据挑战赛(特征工程部分代码) 以下仅为总特征的部分特征 import pandas as pd import numpy as np import difflib from gensim.models.doc2vec import Doc2Vec, LabeledSentence import gensim import gc import warnings from sklearn.preprocessing import ... 阅读详情

相关推荐

数据库领域容量规划的最新趋势与挑战

想象一下:你开了一家24小时超市,每天要卖鸡蛋——备货太少会被顾客骂“缺货”,备货太多会过期浪费钱。数据库容量规划就像给数据库“备货”:我们需要预测未来的数据量、访问频率,给数据库分配足够的存储空间和计算资源,同时避免“过度囤货”导致的成本浪费。本文将覆盖传统容量规划的痛点、云时代的新变化、AI技术的应用,以及各行业的实战经验。

AI天才研究院 1318

数据集托管平台汇总比较

【代码】数据集托管平台汇总比较。

有问题请直接说问题就好 1975

城市交通拥堵的识别与预测

对交通流参数短时预测进行深入研究,将常用的几种交通流参数短时预测方 法进行数据融合,建立了一种多模型融合预测方法,并且运用在西安市南二环中段实际 调查所得的交通流量数据,对常用的两种预测方法和建立的多模型融合预测方法进行了 验证和分析比较。

SM2算法的加密签名消息语法规范(一)介绍

由于最近项目中需要根据国家密码局的规范(GM/T 0010)实现SM2密码算法加密签名消息数据的封装,花了些时间进行了下研究,现属文以记之~(^_−)☆ 接下来先介绍sm2算法的消息语法规范,至于具体如何通过gmssl库去实现消息数据的封装,小编将在之后的文章中逐一讲解。OK, 进入正题~ 首先我们知道PKCS#7中规定了6种数据内容:明文数据(Data)、签名数据(Signed-data),数字信封数据(Enveloped-data),带签名的数字信封数据(Signed-and-envelop...

lt4959的专栏 1万+

海康视觉通讯配置实战:TCP与Modbus协议深度解析

本文深度解析海康视觉系统与PLC通讯的实战配置,聚焦TCP与Modbus两大核心协议。详细阐述了TCP协议如何实现精准触发拍照,包括服务器端配置、数据转换(字符串与十六进制)的关键技巧与避坑指南;同时详解了Modbus协议用于读写PLC寄存器的配置方法、变量绑定及数据类型匹配。文章结合典型应用场景与高级调试技巧,旨在帮助工程师快速打通视觉系统与自动化设备间的数据通道。

m2n3o4p5的博客 826

Springboot信息泄露以及heapdump的利用

努力是为了不平庸~安全有些时候是枯燥的,这一次,让我们先人一步,趣学渗透!

LiBai'S BLOG 3万+

猫头虎分享:推荐 22 个高质量数据集服务平台(含国内外热门 AI 数据集、机器学习必备资源)

数据集去哪找?国内外平台全解析!机器学习和AI开发必读 在数据科学、机器学习、人工智能(AI)领域,高质量数据集是推动研究与应用的基础资源。从开源数据集到行业竞赛数据平台,本篇文章为你推荐 22 个国内外高质量数据集服务平台,涵盖 Kaggle、百度飞桨、阿里天池 等知名资源,助力开发者和研究人员找到精准数据源,高效完成项目。 关键词:数据集服务平台、数据科学平台推荐、机器学习数据集、AI数据集资源、国内外数据集大全、开源数据集推荐、百度飞桨数据集、阿里天池数据集

猫头虎技术团队:授渔优于赠鱼,兴趣引领智慧,探索之乐尤显珍贵。商务合作+:Libin9iOak ,万粉变现+:优快云WF,猫头虎承诺每年免费为100名C站创作者做账号流量诊断服务!全网搜:猫头虎技术团队,点击文章底部名片或直接私信我一切皆可谈,快找虎哥! 7268

游程理论提取灾害事件特征V2---基于MATLAB语言的编程实现

游程理论,灾害事件,MATLAB

EWBA_GIS_RS_ER的博客 3792

[250125] DeepSeek 发布开源大模型 R1,性能比肩 OpenAI o1 | 希捷推出高达 36TB 的硬盘

- DeepSeek 发布开源大模型 R1,性能比肩 OpenAI o1 - 希捷推出高达 36TB 的硬盘,扩展其基于 HAMR 的 Mozaic 3+ 技术平台

edwinjhlee的博客 1563

《UDS协议从入门到精通》系列——图解0x34:请求下载

上传下载类服务之0x34-请求下载,图解请求+响应格式,直观易懂,快速上手!!

车载系统攻城狮 4925

max96712 GMSL1/2 相机调试记录

在部分相机调试中,使用i2cdetect 无法进行i2c扫描,一旦进行扫描会影响整个I2C总线通信异常,但是其能使用i2ctranfer命令进行读写操作,并不影响相机的开发调试。max96712的流路径分布如下图所示,需要通过对max96712进行相关配置,对GMSL-A/B/C/D进入的数据规划pipe。确认VID_PKL_DET 状态。max96712相关状态确认。MAX97612 状态确认。Linux 状态确认。

navy2015_163的博客 1102

NX750HSA20美光固态闪存HSA36NC027

而HSA36NC027则主打QLC架构,虽速度略逊于TLC,但通过美光专利的纠错算法和冗余设计,在云存储等长期运行环境中展现出“马拉松选手”般的稳定性。耐久性方面,TLC的NX750HSA20标称擦写次数为3000次,QLC的HSA36NC027则为1000次。值得注意的是,新兴的PLC(五层单元)技术虽能进一步降低成本,但当前擦写寿命仅500次左右,短期内难以威胁QLC在企业级市场的地位。:HSA36NC027的每TB成本降低35%,配合美光动态磨损均衡技术,成为亚马逊云等厂商的性价比之选。

2401_84028645的博客 869

MATLAB应用实战系列(七十七)-基于长时间序列栅格数据的MK检验

1 MK检验介绍 MK检验是曼-肯德尔法,又称Mann—Kenddall 检验法,是一种气候诊断与预测技术,应用Mann-Kendall检验法可以判断气候序列中是否存在气候突变,如果存在,可确定出突变发生的时间。Mann-Kendall检验法也经常用于气候变化影响下的降水、干旱频次趋势检测。目前常用于长时间序列的栅格数据的显著性检验,在植被覆盖度,NDVI,NPP等方面尤为常见。 该检验功能强大,不需要样本遵从一定的分布,部分数据缺失不会对结果造成影响,不受少数异常值的干扰,适用性强。不但可以检验时

wenyusuran的专栏 6290

切片面试题:学习切片长度、容量,切片增长的过程

个人博客地址:https://zhounanjun.gitbook.io/nanjun/ 关于切片的面试题:摘自https://goquiz.github.io/#subslice-grow func Subslice() { s := []int{1, 2, 3,4,5,6,7,8,9} ss := s[3:6] fmt.Printf("len ss : %d\n", l...

学习学习再学习 804

GEE APP:基于Sentinel-2遥感影像的植被指数(NDVI)和水体指数(NDWI)可视化应用

本文介绍了利用Google Earth Engine(GEE)平台处理Sentinel-2卫星数据的方法,重点讲解NDVI(归一化植被指数)和NDWI(归一化水体指数)的计算与应用。内容包括环境准备、数据加载与处理、指数计算原理、可视化方法以及实际应用案例。教程详细展示了如何定义研究区域、加载影像数据、进行指数运算,并生成专业统计报告和图例。文章还提供了常见问题解答和最佳实践建议,为生态环境监测、农业评估和水资源管理等场景提供了实用工具。通过JavaScript代码示例,读者可以快速掌握GEE平台的遥感影像

此星光明博客 272

AUTOSAR&UDS 理论要点及isolar实战-DEM模块

从这节开始,将讲解UDS诊断中非常重要的知识点:故障事件触发、故障信息上报、故障信息处理、故障信息存储和故障系统降级,后续会陆续更新。

cqaa11的博客 552

36.ES集群规划—容量规划-2

36.3 容量规划案例2 基于时间序列的数据 相关的用案 日志 / 指标 / 安全相关的 Events 舆情分析 特性 每条数据都有时间戳;文档基本不会被更新(日志和指标数据) 用户更多的会查询近期的数据;对旧的数据查询相对较少 对数据的写入性能要求比较高 36.4 创建基于时间序列的索引 创建 time-based 索引 在索引的名字中增加时间信息 按照 每天 / 每周 / 每月 的方式进行划分 好处 更加合理的组织索引,例如随着时间推移,便于对索引做的老化处理 利用 Ho

大勇若怯任卷舒 365

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

2023年第四季度硬盘容量强势增长9%

在2023年第四季度(CQ4 '23),硬盘驱动器(HDD)市场的总容量出货量环比增长9%,达到214EB,而单位出货量保持在2900万块不变。其中,近线存储(Nearline)硬盘的容量出现了显著复苏,环比增长了16%,达到156EB,基于近1000万块硬盘的出货。综上所述,2023年第四季度全球HDD市场显示出稳健的增长态势,尤其是近线存储领域表现突出,各主要厂商如希捷、东芝和西部数据都在这一领域取得不同程度的增长,并通过优化产品结构和技术升级,推动了平均单盘容量的持续提高。

存储随笔 1413

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

jdk-8u144-linux-x64.tar.gz.

该资源为搭建Linux系统Java环境用,资源的后缀为tar.gz格式的压缩包

存储系统的容量规划与管理:从预测到优化

存储容量规划是指根据业务需求和数据增长趋势,预测存储系统的容量需求,并制定相应的扩容和管理策略的过程。满足需求:确保存储容量能够满足业务需求避免浪费:避免过度配置,减少资源浪费优化成本:优化存储成本,提高投资回报率确保性能:确保存储系统在预期负载下的性能数据驱动:基于历史数据和趋势分析进行容量规划分层策略:实施存储分层,优化存储资源使用压缩去重:利用数据压缩和去重减少存储需求持续监控:建立完善的容量监控体系灵活调整:根据实际情况灵活调整容量规划。

guoyizhongxing的博客 1035

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

东芝验证12碟硬盘技术,容量提升20%

东芝验证12碟硬盘技术,容量提升20%

zhidingkeji的博客 336

累计占比_风电整机制造企业前五名累计装机占比57.5%

由中国可再生能源学会风能专业委员会编制的《2019年风电产业地图》于日前正式发布。其中指出,截至2019年底,我国风电有装机的整机制造企业近70家,累计装机容量2.36亿千瓦。其中,位列前五名的金风科技、远景能源、明阳智能、联合动力和华锐风电的累计装机容量占比达到57.5%。2019年,我国风电有新增装机的整机制造企业共17家,新增装机容量2678.5万千瓦,装机容量前五名分别为金风科技、远景能源...

weixin_42561623的博客 92

vector对象是如何增长的

vector和string在内存中是连续保存的,如果原先分配的内存位置已经使用完,则需要重新分配新空间,将已有元素从就位置移动到新空间中,然后添加新元素。 管理容量的成员函数 操作 解释 c.shrink_to_fit() 将capacity()减少到和size()相同大小 c.capacity() 不重新分配内存空间的话,c可以保存多少个元素 c.reverse(n) 分配至少能容纳n个元素的内存空间 shrink_to_fit只适用于vector、string和deque

Bitdancing的专栏 254

深度剖析:大容量QLC SSD为何遭疯抢?-续

随着AI模型规模的扩大,训练数据量成比例增长,导致对更高存储容量的需求增加,同时推理应用也需要大量数据库存储,从而推动64TB至128TB SSD需求的上升,三星的QLC企业级SSD出货量在2024年下半年预计会比上半年增长三倍。则认为,AI应用从训练转向推理,促使存储需求向本地化转变,以满足安全性和定制化需求,导致对更快、更高密度SSD的需求激增,预计未来会从36TB发展到128TB,这将促使QLC技术取代TLC成为主流,且计划推出60TB的eSSD,尤其针对其子公司Solidigm的市场。

存储随笔 3312

从消费电子到AI芯片,LPDDR成推理“通解”,2026-2027年需求将指数增长

LPDDR还通过“统一内存架构”重新定义AI PC的性能边界。AMD Strix Halo(Ryzen AI MAX系列)、苹果M4 Max、英伟达RTX Spark‌‌超级芯片等都采用了LPDDR内存,实现了不同程度的高性能AI计算。英伟达还发布了“全球最强大的桌面AI超级计算机”DGX Station for Windows,配备高达748GB的相干内存和高达20 petaflops的FP4性能。

IT界那些事儿 132

LTO磁带市场2024年强势反弹,出货容量达176.5EB

报告没有提及与之前LTO代际变化不同,LTO-10并未在LTO-9基础上提供速度提升,仅表示:"LTO-10...将提供与LTO-9相同的极速性能。"Hald指的是LTO-10格式。LTO项目技术提供商(TPCs)——HPE、IBM和Quantum——发布了年度磁带介质出货报告,显示2024年压缩磁带总容量出货量创下176.5艾字节(EB)的记录,该数据基于2.5:1的压缩比计算。令人欣慰的是,对非结构化数据存档的需求现在重新开始增长,2023年至2024年实现了更为健康的15.4%增长。

至顶AI实验室 489
上一篇: 从认知学到进化论,详述强化学习两大最新突破
下一篇: 机器人学前班助力机器人简单快速学习,给予强化学习的自动驾驶策略 | 一周AI学术
BigDataDigest
博客等级 码龄9年 448粉丝 500原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值