2018大数据标准化白皮书.pdf
《2018大数据标准化白皮书.pdf》由会员分享,可在线阅读,更多相关《2018大数据标准化白皮书.pdf(129页珍藏版)》请在咨信网上搜索。
1、 大数据标准化白皮书(2018 版)编写单位:中国电子技术标准化研究院 全国信息技术标准化技术委员会大数据标准工作组 二零一八年三月 大数据标准化白皮书(2018 版)顾问指导组 梅 宏 谢少锋 戴 红 赵 波 林 宁 李冠宇 孙文龙 商 超 刘大山 傅永宝 侯建仁 全国信息技术标准化技术委员会大数据标准工作组 组 长:梅 宏 副组长:孙文龙 杜小勇 吴建明 闵万里 秘书长:吴东亚 联络员:刘大山 傅永宝 侯建仁 编写单位(排名不分先后)中国电子技术标准化研究院 勤智数码科技股份有限公司 神州数码系统集成服务有限公司 北京大学 华为技术有限公司 浪潮软件集团有限公司 美林数据技术股份有限公司
2、陕西省信息化工程研究院 北京东方国信科技股份有限公司 湖北省标准化与质量研究院 中电长城网际系统应用有限公司 交通运输部科学研究院 中国科学院信息工程研究所(信息安全国家重点实验室)江苏省经济和信息化委员会 成都市标准化研究院 中兴通讯股份有限公司 北京市金杜律师事务所 成都四方伟业软件股份有限公司 重庆大数据研究院有限公司 江苏中堃数据技术有限公司 深圳市华傲数据技术有限公司 北京软件和信息服务交易所有限公司 星环信息科技(上海)有限公司 九次方大数据信息集团有限公司 湖北省楚天云有限公司 交通运输部科学研究院 编写组(排名不分先后)代 红 吴东亚 董 建 张 群 刘宇峰 李 正 张慧敏 马
3、珊珊 光 亮 尹 卓 黄先芝 于 洋 马红霞 张 勇 张永丽 谢秋琪 闵京华 郭亚茹 刘 莎 马洪杰 李佳承 王 东 卫凤林 叶润国 宁宣凤 周 刚 刘 斌 魏 清 何运昌 于铁强 周洪明 胡 荣 夏 天 杨 坤 赵 茅 张 巍 赵俊峰 I 目 录 1 前言.1 1.1 研究背景.1 1.2 研究目标及意义.2 2 相关政策法规.3 2.1 国外政策.3 2.1.1 美国大数据政策.3 2.1.2 欧盟大数据政策.4 2.1.3 英国大数据政策.5 2.1.4 法国大数据政策.5 2.1.5 日本大数据政策.6 2.1.6 印度大数据政策.7 2.1.7 澳大利亚大数据政策.7 2.2 国内政
4、策.8 2.2.1 国家和行业政策.8 2.2.2 国家大数据综合试验区.10 2.2.3 地方政策.13 2.3 安全隐私法律法规.15 2.3.1 国内外立法现状.16 2.3.2 大数据立法趋势和对产业的影响.19 3 大数据发展现状和趋势分析.21 3.1 大数据核心产业链.21 3.1.1 大数据产业生态商业角色构成.21 3.1.2 大数据产业生态商业模式分析.23 3.2 重点领域应用.24 3.2.1 社会管理与公共服务.24 3.2.2 农业.31 3.2.3 制造业.32 3.2.4 电力及水务领域.33 3.2.5 通信与电子商务.35 3.2.6 交通运输领域.37 3
5、.2.7 邮政领域.38 3.2.8 金融领域.39 3.2.9 科学研究.40 3.2.10 教育领域.41 3.2.11 卫生领域.43 II 3.2.12 文化领域.44 3.3 大数据发展趋势分析.44 4 大数据参考架构.47 4.1 参考架构.47 4.2 参考架构中涉及的相关内容.49 4.2.1 系统协调者.49 4.2.2 数据提供者.49 4.2.3 大数据应用提供者.50 4.2.4 大数据框架提供者.52 4.2.5 数据消费者.54 4.2.6 安全和隐私.54 4.2.7 管理角色.57 5 大数据标准化现状.59 5.1 国外标准化现状.59 5.1.1 ISO/
6、IEC JTC 1.59 5.1.2 ITU-T.61 5.1.3 IEEE BDGMM.62 5.1.4 NIST.63 5.2 国内标准化现状.64 5.2.1 国家标准现状.64 5.2.2 行业及地方标准现状.66 6 大数据标准体系.68 6.1 大数据标准体系框架.68 6.2 标准明细表.70 6.3 重点标准描述.75 7 我国大数据标准化工作建议.77 7.1 完善大数据标准体系建设.77 7.2 加强大数据标准的宣传推广工作.77 7.3 加强大数据重点标准应用示范工作.77 7.4 加强大数据标准化在数据治理领域的推进作用.78 7.5 加快大数据标准化人才队伍的培养.7
7、8 7.6 加快我国大数据标准的国际化步伐.78 8 附件:成功案例.79 1 1 前言前言 1.11.1 研究背景研究背景 全球已步入大数据时代,互联网上的数据量每两年会翻一番。截止到 2013年,全球数据量为 4.3 泽字节,2020 年有望达到 40 泽字节。如果将数据视为一种生产资料,大数据将是下一个创新、竞争、生产力提高的前沿,是信息时代新的财富,价值堪比石油。大数据所能带来的巨大商业价值,被认为将引领一场足以与 20 世纪计算机革命匹敌的巨大变革。当前,世界各国政府和国际组织都认识到了大数据的重要作用,将开发利用大数据作为夺取新一轮竞争制高点的重要抓手,世界工业发达国家纷纷制定相关
8、政策,积极推动大数据相关技术的研发与落实。我国正处于数字经济发展的转型时期,信息的公开、共享与服务成为时代发展的主题。信息逐渐成为与物质和能源同等重要的资源,以开发和利用信息资源为目的的经济活动迅速扩大,逐渐占据或超越工业活动在国民经济活动中的地位。大数据的出现是跨学科技术与应用发展的结果。对于大数据,自然科学家强调在网络虚拟环境下对于密集型数据的研究方法,社会科学家则看重密集型数据后面隐藏的价值与推动社会发展的模式。目前大数据在支撑履行政府职能、保障公共安全、实施社会治理、支持重大决策和改进公共服务等方面发挥出越来越重要的作用。党中央、国务院高度重视大数据发展,将大数据上升为我国国家战略之一
9、。党的十九大明确提出“推动互联网、大数据、人工智能和实体经济深度融合”。国务院促进大数据发展行动纲要(国发201550 号)明确指出要“建立标准规范体系”。工信部 2017 年初发布的 大数据产业发展规划(20162020 年)(工信部规2016412)中部署了“推进大数据标准体系建设,加强大数据标准化顶层设计,逐步完善标准体系,发挥标准化对产业发展的重要支撑作用”的重点任务。2017 年 5 月 14 日,习近平在“一带一路”国际合作高峰论坛上发表讲话“要坚持创新驱动发展,加强在数字经济、人工智能、纳米技术、量子计算机等前沿领域合作,推动大数据、云计算、智慧城市建设,连接成 21 世纪的数字
10、2 丝绸之路。”2017 年 12 月 8 日习近平在中共中央政治局第二次集体学习时强调“实施国家大数据战略加快建设数字中国”。2016 年,在工信部信软司和国标委工业二部的指导下,中国电子技术标准化研究院组织国内相关产、学、研单位的专家针对大数据应用、产业、技术与标准化需求进行了问卷调研。通过对调研数据的分析,初步形成了对于大数据应用、技术、产业发展以及标准化需求的分析成果。作为业界共同研究的基础,由 30家单位共同编制形成并发布了大数据标准化白皮书2016 版,得到了业界广泛关注。2018 版白皮书在 2016 版的基础上更新了大数据政策,分析了大数据发展的最新趋势和重点领域的应用实践,完
11、善了大数据标准体系,给出了最新的大数据标准化工作建议,大数据标准相关成果的推进在本版本中也有所体现。1.21.2 研究目标及意义研究目标及意义 本白皮书介绍了国内、国外主要国家在大数据领域的发展战略、发展现状和趋势,描述了大数据的核心产业链以及大数据重点领域的应用实践,力图从应用、技术、产业、标准等角度,勾画出大数据发展的整体轮廓;从数据生存周期的角度提出大数据参考架构;同时抛开其他影响因素,从数据自身的角度提出在不断创新应用与服务模式下的大数据标准体系及大数据标准化路线;最后提出了我国大数据标准化工作建议。本白皮书立足于大数据产业发展的社会转型历史时期所具有的政策、经济与文化等特点,分析处于
12、初期发展阶段的大数据产业对于经济、社会的作用和影响,旨在与业界分享我们在大数据领域的研究成果和实践经验,呼吁社会各界共同关注大数据的政策研究、技术投入、标准建设与服务应用,共同推动大数据的发展,提升社会整体决策与服务管理能力。3 2 相关政策法规相关政策法规 2.12.1 国外政策国外政策 2.1.1 美国大数据政策美国大数据政策 2009 年 5 月,美国政府推出 Data.gov,这是为了增加政府资料透明度而设立的一系列网站。宣布实施“开放政府计划”(OpenGovernmentInitiative),这项计划提出利用整体、开放的网络平台,公开政府信息、工作程序和决策过程,以鼓励公众交流和
13、评估,增进政府信息的可及性,强化政府责任,提高政府效率,增进与企业及各级政府间的合作,推动政府管理向开放、协同、合作迈进。联邦政府同时开通了旗舰级项目“一站式”政府数据下载网站 Data.gov,只要不涉及隐私和国家安全的相关数据,均需全部在该网站公开发布。Data.gov 的上线意味着美国政府数据仓库的正式建立,标志着美国政府信息进一步公开与透明。2012 年 3 月,美国白宫科技政策办公室发布大数据研究和发展计划,成立“大数据高级指导小组”,旨在大力提升美国从海量复杂的数据集合中获取知识和洞见的能力。具体实现三个目标:(1)开发能对大量数据进行收集、存储、维护、管理、分析和共享的最先进的核
14、心技术;(2)利用这些技术加快科学和工程学领域探索发现的步伐,加强国家安全,转变现有的教学方式;(3)扩大从事大数据技术开发和应用的人员数量。2013 年 11 月,美国信息技术与创新基金会发布支持数据驱动型创新的技术与政策。建议世界各国的政策制定者应采取措施,鼓励公共部门和私营部门开展数据驱动型创新。指出“数据驱动型创新”作为崭新命题,所面临的包括新概念、新技术的挑战;并就政府如何支持数据型驱动的创新提出了建议:一是政府应大力培养所需的有技能的劳动力;二是政府要推动数据相关技术的研发。2014 年 5 月,美国总统行政办公室发布大数据:把握机遇,保存价值。对美国大数据应用与管理的现状、政策框
15、架和改进建议进行了集中阐述;并就保护个人隐私的价值、数字时代负责任的教育创新、大数据与歧视、执法与安全保4 护、数据公共资源化提出建议。2016 年 5 月,美国总统科技顾问委员会发布了 NITRD 编写的联邦大数据研究和开发战略计划,该计划在已有基础上提出美国下一步的大数据七大发展战略,代表大数据研究和开发(RD)的关键领域。包括在科学,医学和安全的各个方面促进人们的理解;确保国家在研发上的持续领导;提高国家应对社会压力的能力以及通过研究和开发面向国家和世界的环境问题。2.1.2 欧盟大数据政策欧盟大数据政策 2014 年欧盟委员会发布了数据驱动经济战略,聚焦深入研究基于大数据价值链的创新机
16、制,提出大力推动“数据价值链战略计划”,通过一个以数据为核心的连贯性欧盟生态体系,让数据价值链的不同阶段产生价值。数据价值链的概念为数据的生命周期,从数据产生、验证以及进一步加工后,以新的创新产品和服务形式出现的利用与再利用。2015 年欧盟大数据价值联盟正式发布了欧盟大数据价值战略研究和创新议程(以下简称为议程),设定了欧盟国家和区域层面的发展目标,以实现未来欧洲在世界创造大数据价值中的领先地位。议程建议建立欧盟大数据契约的合同制公私伙伴(cPPP),以在欧盟 2020 地平线(Horizon 2020)、各国和地区计划中推行议程,增强泛欧的研究与创新工作,形成清晰的研究、技术发展和投资战略
17、。议程从七个方面指出了在欧盟建立良好的大数据生态系统所需要解决的主要挑战。议程对大数据发展目标的预期影响进行了研究,设定了关键绩效指标,以评估预期影响。2017 年欧盟委员会发布打造欧洲数据经济报告,对数据驱动型经济的潜力、面临的障碍、解决方案等进行了分析总结。报告指出,大数据是经济增长、就业和社会进步的重要资源,2015 年欧盟数据经济的价值是 2720 亿欧元,接近于欧盟地区生产总值的 1.9%。如果有适当的政策和法律解决方案,数据经济的价值将会在 2020 年翻一番。5 2.1.3 英国大数据政策英国大数据政策 2012 年 5 月,世界上首个开放式数据研究所 ODI(The Open
18、Data Institute)在英国政府的支持下建立,首批注资十万英镑。这是英国政府研究和利用开放式数据方面的一次里程碑式发展。未来,英国政府将通过这个组织来利用和挖掘公开数据的商业潜力,并为英国公共部门、学术机构等方面的创新发展提供“孵化环境”,同时为国家可持续发展政策提供进一步的帮助。2013 年 1 月,英国商业、创新和技能部宣布,将注资 6 亿英镑发展 8 类高新技术,大数据独揽其中的 1.89 亿英镑,将近三成。英国政府预计大数据将成为英国经济的主要驱动力,而四个大数据研究中心将确保英国在国际竞争中保持较强竞争力。到 2017 年,大数据分析将为英国创造 5.8 万个工作岗位,并带来
19、2160 亿英镑的经济收入。2013 年 10 月,由英国商务、创新和技能部牵头编制的英国数据能力发展战略规划发布。该战略旨在使英国成为大数据分析的世界领跑者,并使公民和消费者、企业界和学术界、公共部门和私营部门均从中获益。该战略在定义数据能力以及如何提高数据能力方面,进行了系统性地研究分析,并提出了举措建议。2017 年 8 月,由英国运输部与英国国家基础设施保护中心(CPNI)共同制定新的网络安全准则车联网和自动驾驶汽车网络安全准则出台。该准则隶属于英国政府道路安全与网络安全相关政策的一部分。2.1.4 法国大数据政策法国大数据政策 2011 年 7月,法国工业部长埃里克贝松宣布,启动“O
20、penDataProximaMobile”项目,希望通过该项目实现公共数据在移动终端上的使用,从而最大限度的挖掘它们的应用价值。项目内容涉及交通、文化、旅游和环境等领域。2011 年 12 月,法国政府推出的公开信息线上共享平台 data.gouv.fr,上线当天发布的第一批资源中就包含 352000 组数据,且网站的数据由每个政府部门的专员统计和收集、持续更新。2013 年 2 月,法国政府发布数字化路线图,明确了大数据是未来要大力支持战略性高新技术。政府将以新兴企业、软件制造商、工程师、信息系统设计6 师等为目标,开展一系列的投资计划,旨在通过发展创新性解决方案,并将其用于实践,来促进法国
21、在大数据领域的发展。2013 年 4 月,经济、财政和工业部宣布将投入 1150 万欧元用于支持 7 个未来投资项目,法国政府投资这些项目的目的在于“通过发展创新性解决方案,并将其用于实践,来促进法国在大数据领域的发展”。2013 年 7 月,法国中小企业、创新和数字经济部发布了法国政府大数据五项支持计划,包括引进数据科学家教育项目;设立一个技术中心给予新兴企业各类数据库和网络文档存取权;通过为大数据设立原始扶持资金,促进创新;在交通、医疗卫生等纵向行业领域设立大数据旗舰项目;为大数据应用建立良好的生态环境,如在法国和欧盟层面建立用于交流的各类社会网络等。2.1.5 日本大数据政策日本大数据政
22、策 2012 年 6 月,日本 IT 战略本部发布电子政务开放数据战略草案,迈出了政府数据公开的关键性一步。政府将利用信息公开方式标准化技术实现统计信息、测量信息、灾害信息等公共信息,并尽快在网络上实现行政信息全部公开并可被重复使用。2012 年 7 月,日本推出了面向 2020 年的 ICT 综合战略,提出“活跃在ICT 领域的日本”的目标,重点关注大数据应用。战略聚焦大数据应用所需的社会化媒体等智能技术开发,传统产业 IT 创新、以及在新医疗技术开发、缓解交通拥堵等公共领域的应用。2013 年 6 月,日本公布新战略:“创建最尖端 IT 国家宣言”。宣言阐述了2013-2020 年期间以发
23、展开放公共数据和大数据为核心的日本新 IT 国家战略,提出要把日本建设成为一个具有“世界最高水准的广泛运用信息产业技术的社会”。2015 年 6 月,日本政府经内阁会议决定了 2014 年度版制造业白皮书。白皮书中指出,日本制造业在积极发挥 IT 作用方面落后于欧美,建议转型为利用大数据的“下一代”制造业。2017 年 10 月,日本公正交易委员会竞争政策研究中心发布了数据与竞争7 政策研究报告书。在这部报告书中,日本明确了运用竞争法对“数据垄断”行为进行规制的主要原则和判断标准。2.1.6 印度大数据政策印度大数据政策 2012 年,印度批准了国家数据共享和开放政策,目的是在于促进政府拥有的
24、数据和信息得到共享及使用。印度制定了一个一站式政府数据门户网站data.gov.in,把政府收集的所有非涉密数据集中起来,包括全国的人口、经济和社会信息,截至目前,已包括 107 个部门的 4237 个数据目录,3535 个 API 和135191 项数据资源。同时,印度政府还拟定一个非共享数据清单,保护国家安全、隐私、机密、商业秘密和知识产权等数据的安全。2013 年 1 月,印度政府公布新的科技创新政策。新政策既着眼于形成新的创新视角,又提出了到 2020 年跻身全球五大科技强国的目标。新政策强调印度将加强科学、技术与创新之间的协同,使之全方位融入社会经济进程。印度政府还将 2010-20
25、20 年作为“创新十年”,并组建了国家创新委员会,预计在 2017年,该国研发投入占 GDP 的比例将提高到 2%。2.1.7 澳大利亚大数据政策澳大利亚大数据政策 2012 年 10 月,澳大利亚政府发布澳大利亚公共服务信息与通信技术战略2012-2015,强调应增强政府机构的数据分析能力从而促进更好的服务传递和更科学的政策制定,并将制定一份大数据战略确定为战略执行计划之一。截至 2016年底,其政府数据开放网站 data.gov.au 已包括 275 个组织的 23293 个数据集和5625 个应用程序 2013 年 8月,澳大利亚政府信息管理办公室(AGIMO)大数据工作组发布了 公共服
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 2018 数据 标准化 白皮书
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【宇***】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【宇***】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。