数据共享交换平台设计方案.pdf
《数据共享交换平台设计方案.pdf》由会员分享,可在线阅读,更多相关《数据共享交换平台设计方案.pdf(25页珍藏版)》请在咨信网上搜索。
1、 数据共享交换平台设计方案 1.1 平台建设背景 当前政府、企业的信息化的状况是,各政府和企业一般都设计和建设了属于机构、业务本身的应用、流程以及数据的信息处理系统,独立、异构、涵盖各自业务容的信息处理系统,系统设计建设的时期不同、业务模式不同,信息化建设缺乏有效的总体规划,重复建设;缺乏统一的设计标准,大多数系统都是由不同的厂商在不同的平台上,使用不同的语言进行开发的,信息交互共享困难,存在大量的信息孤岛和流程孤岛。为了有效整合分散异构的信息资源,消除“信息孤岛”现象,提高政府和企业的信息化水平。宇思公司要开发的数据共享交换平台,主要目的是有效整合分散异构系统的信息资源,消除“信息孤岛”现象
2、,提高政府和企业的信息化水平,灵活实现不同系统间的信息交换、信息共享与业务协同,加强信息资源管理,开展数据和应用整合,进一步发挥信息资源和应用系统的效能,提升信息化建设对业务和管理的支撑作用。要求新构建的数据共享交换平台要遵循标准的、面向服务架构(SOA)的方式,基于先进的企业服务总线 ESB 技术,遵循先进技术标准和规,为跨地域、跨部门、跨平台不同应用系统、不同数据库之间的互连互通提供包含提取、转换、传输和加密等操作的数据交换服务,实现扩展性良好的“松耦合”结构的应用和数据集成;同时要求数据共享交换平台,能够通过分布式部署和集中式管理架构,可以 有效解决各节点之间数据的及时、高效地上传下达,
3、在安全、方便、快捷、顺畅的进行信息交换的同时精准的保证数据的一致性和准确性,实现数据的一次采集、多系统共享;要求数据交换平台节点服务器适配器的可视化配置功能,可以有效解决数据交换平台的“最后一公里”问题,快速实现不同机构、不同应用系统、不同数据库之间基于不同传输协议的数据交换与信息共享,为各种应用和决策支持提供良好的数据环境。要求数据共享交换平台能够把各种纷繁复杂的数据系统集成在一起完成特定业务,提供同构数据、异构数据之间的数据抽取、格式转换、容过滤、容转换、同异步传输、动态部署、可视化管理监控等方面功能,支持的数据包括各主流数据库(如 Oracle、SQL Server、MySQL 等)、地
4、理空间数据(如卫星影像、矢量数据)、常规文件(word、excel、pdf)等各种格式,并可以根据用户需求定制开发特定业务服务。1.2 应用场景 场景一:中国科学院电子学研究所的信息交换需求 实现各个数据中心间的数据库层面的数据共享交换,各中心之间是双向的、实时的数据交换,各数据节点的数据库是同构的数据库系统(即 Oracle),数据的类型是基于数据库表格的规则数据,字段类型包含 BLOB 字段类型。目前各数据节点的数据结构(表)是相同的,主要是一表对一表的数据交换,数据抽取和过滤需求比较简单。目前数据共享交换是通过 Oracle GoldenGate 数据库同步工具来实现的。用户具体需求包括
5、:1)可视化的交换节点配置管理,包括:动态添加数据交换节点、配置交换节点间的表的同步映射关系、配置表的同步规则、过滤条件等。2)OGG 交换进程监控管理 实时监控各节点间的 ogg 交换进程的统一管理,包括:按照进程的分类(如抽取、投递)来管理,并实时监控每个进程的运行状态,发生异常时通过短信或者声光报警的方式来告知用户。3)统计分析 实时统计各交换节点间的数据流量统计(按天、月、年来统计;按表)、数据同步状态统计(如更新的、插入的、删除的、成功的、失败的)。场景二:国土资源部航遥中心的信息交换需求 以高分地矿示应用系统为例,其数据交换节点是各个分系统,各分系统之间存在频繁的,海量的数据交换,
6、其数据类型主要是表格数据、影像文件、地理矢量数据、多媒体数据等;数据交换时需要做数据抽取、格式转换、容过滤、同步或者异步传输等业务操作,数据共享交换是通过应用层面调用服务接口的方式来实现的。场景三:国土资源数据中心的信息交换需求 场景四:场景 N:1.3 术语介绍(1)企业基础信息 工商、国税、地税、质监等部门涉及到企业注册登记、变更、注(吊)销、年检、税务登记、组织机构代码登记等业务容的基础信息,具有跨部门共享需求的特征。(2)企业基础信息交换平台 工商、国税、地税、质监等部门之间进行企业基础信息交换的通讯、传输与管理系统。企业基础信息交换平台是指成熟的应用集成和数据交换中间件产品。(3)交
7、换前置机 企业基础信息交换平台中与工商、国税、地税、质监等交换节点进行信息交换连接的交换前置服务器。(4)信息交换桥接 工商、国税、地税、质监等部门业务应用信息库与前置交换信息库之间信息安全交换的连接通道。(5)企业基础信息库 存储、管理企业基础信息的数据库。(6)前置交换信息库 工商、国税、地税、质监等部门与企业基础信息交换平台之间共享信息双向交换的中转数据库。(7)业务数据库 业务数据库是指各个委办局保存业务数据的数据库,运行在委办局的网中。如税务部门的税务征管数据库,工商部门以“经济户口”为主要容的工商业务数据。(8)应用系统 应用系统是指本项目开发的部署在各委办局节点前置机上的桥接系统
8、、中心数据管理系统、数据比对和整合系统等应用的总称。(9)中心数据管理系统 中心数据管理系统是指本项目开发的实现交换数据查询和管理等功能的应用系统。(10)数据比对整合系统 数据比对系统是用来加工整理各单位发送的企业基础信息的系统。按照一定的比对规则和条件,数据比对系统对各部门的信息进行对比,形成完整、统一的XX 市基础信息数据库。1.4 编制依据及参考资料 全国企业基础信息共享和应用建设实施要求 (国信办200510 号)电子政务信息共享互联互通平台总体框架技术指南(国办秘函200479号)政务信息交换体系 (GB/T 21062-2007)国家电子政务总体框架 (国信办20062 号)1.
9、5 必要性分析 在信息化建设过程中,各职能部门通常采用不同的技术和体系结构来构建自身的信息系统,虽然为各自业务发展起到了很好的促进作用,但各信息系统数据独立存储形成一个个信息孤岛,使得各业务系统之间很难实现数据共享,严重制约着政府各职能部门、业务系统之间的协作及工作效率的提升。如何在不改变原有系统的基础上实现跨平台数据访问也成为信息化建设道路上必须思考的一个问题。1.6 可行性分析 在技术上,当前市场已经涌现很多实现数据交换的平台产品,形成先进的信息交换和共享服务技术体系,能为数据交换平台的建立提供很好的技术架构。1.7 效益分析 通过数据交换平台的建立可以打破当前的“信息孤岛”现象,建立不同
10、业务系统的数据共享平台,形成政府综合信息库。同时,通过统一的数据交换平台实现各业务系统之间数据交换的单一安全通道,在实现信息共享的基础上也确保了各自数据信息的安全。从未来发展的角度看,当前建立数据交换平台可以为以后新的业务系统的建设提供标准,一旦标准形成,审批、监察等业务都可以直接利用共享的基础信息库数据,从而减少了数据采集的资本投入,也提高了监管工作效率和公共服务水 平,取得了良好的经济效益和社会效益。1.8 建设目标 核心目标是全市建设数据交换平台,作为今后数据交换的支撑,将来在平台上不断的扩展应用。本期建设目标 搭建政务数据交换中心,实现政府部门业务系统之间的数据交换,为政府部办公提供数
11、据交换采集综合信息库;建立全市电子政务建设地方标准和规,为以后信息系统的建立提供规指导。远期建设目标 通过数据交换建立企业信息库,实现政务、企业数据共享,为网上行政审批提供决策数据;建立业务数据的集中采集平台,实现了行政审批电子监察数据的在线、实时采集。1.9 建设思路 要实现各部门的数据共享,必须先建立统一的数据交换平台,通过交换平台实现各异构数据库之间的数据集成,实现原有各业务系统在数据级集成,保证异构数据库之间的数据交换与共享。在建立的数据交换平台基础上,针对各业务系统的技术和体系结构,配置各业务系统的数据交换映射关系,形成各业务系统的应用。当平台建立好以后,业务应用可以任意扩展,添加新
12、的共享数据。1.10 建设原则 全市信息交换平台建设必须遵守以下原则:不影响现有或其它相关信息系统的使用和信息安全;技术要成熟、可靠,在节约成本投入的前提下确保平台建设质量;建立一个坚实的系统应用平台,便于系统的管理和维护,技术易于更新,网络及业务规模可以逐步扩展。统一规划,分步实施。第二章 关键问题解析 2.1 数据交换平台能解决什么问题 对数据交换平台的理解有一种误区,就是有了数据交换平台不同系统之间的信息交换就可以随便实现了,而不需要任何编码;实际上这是不对的。数据交换平台的应用主要是在异构系统之间的信息交换,但在信息交换过程换平台本身要解决的问题只是一小部分,它本质是一个中间件,面向客
13、户时屏蔽了很多系统底层的信息,比如网络的协议、数据的传输安全等,据交换平台本身不具有业务本身的处理功能,比如无法自动从某个业务系统中直接获取数据信息,只能通过编程把数据从业务系统中提取出来,再送到数据交换平台。利用数据交换平台使开发过程中不需要关注数据各式转换、消息的传输、数据路由等,只需要关注与业务本身的数据处理部分。2.2 数据交换平台与业务应用的关系 在电子政务系统建设过程中,有些应用系统必须充分利用数据交换平台,比如资源目录管理系统、人口基础信息库、企业基础信息库的关系、决策支持系统等。这些业务系统从不同单位的不同系统中获取数据,数据交换平台为信息交换和传递提供一个安全可靠的通道,不同
14、的应用系统可以公用相同的数据交换平台,因为数据交换平台好比是高速公路,可以有不同的车道和车辆,而业务系统本身有自身的业务逻辑。所以从功能和应用层次的角度交换平台业务应用。2.3 数据交换平台无法解决实时性的业务需求 假设有 A、B 两套完全独立的系统,中间通过数据交换平台连接,能实现一部信息的交换,若从 A 系统发起一个请求查询 B 系统的数据,这类应用就是实时性业务。这类业务数据交换平台是无法实现的,因为查询是针对 A 系统的数据库,如果要看到 B 系统的信息必须 B 系统在查询前把信息传递到 A 系统,否则无法直接查询 B 系统的信息。第三章 总体设计 3.1 系统总体结构 基础库业务规则
15、库业务信息库平台日志库其他数据库主题库决策支持库元数据库元数据管理数据目录服务目录应用目录用户目录数据交换服务基础构件库信息安全服务信息导航服务政策法规与标准规范体系信息安全体系交互式网上办公系统OA系统社区信息化系统企业信用信息系统决策支持系统应用系统层政务信息共享交换层政务信息资源目录层数据资源层门户层其他应用系统内外门户外网门户信息基础平台网络基础设施、主机、系统软件等城市基础设施建设与维护系统 3.2 系统逻辑结构 业务系统的资源交换是通过中间件进行交换和共享。其中,发送模块负责从业务系统接收信息、把信息的格式转换成中间件可识别的格式、和把转换后的信息发送给中间件;接收模块负责从中间件
16、接收信息、把信息的格式转换成接收系统可识别的格式、和把转换后的信息发送给业务系统。业业业业业业业业业业(业业业业业业业)业业业业业业业业业业业B业业业业A业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业业 3.3 系统物理结构 业务系统通过交换平台接入点连接业务系统,接入交换平台的业务系统,需要开发相应的适配器,如下图:第四章 数据交换平台功能设计 4.1 交换中心管理系统 4.1.1 数据交换标准定义 根据对目标系统综合性应用容的需求分析,定义出一系列的数据交换标准。这些标准将反映各个应用所需要的数据的结构。同时在标准中定义的还有数据“宿主”位置等信
17、息,表示该块数据将向哪个业务系统请求获得。所有的数据交换标准定义信息,均以 XML 结构记录。可以通过数据交换标准定义管理工具完成如下功能:新建标准、修改或删除标准;维护标准中的属性,包括数据结构、数据“宿主”位置、缺省过滤条件等;实现对用户身份识别与管理权限控制;4.1.2 数据交换流程定义 数据交换是依据数据交换流程实现的,针对不同的数据,需要设定和管理不同的数据流转过程。该模块的作用是提供图形化界面,供给数据交换平台的管理人员实现数据流转过程的定义。数据交换流转过程的描述也采用 XML 方式。具体功能如下:新建流程、修改或删除流程 维护流程的规则、数据加工过程和数据路由方式 实现对用户身
18、份识别与管理权限控制 4.1.3 数据交换标准与部数据结构的映射管理 由于数据交换标准并不知道在具体业务系统的相应数据的位置、属性、名称等等信息,所以需要在业务系统对数据交换标准中的对应项有一个映射关系的定义。这种定义包括数据项与数据项的对应或组合对应(公式化)、数据类型的匹配或转换关系、数据项位置描述记录等等。以 XML 结构保存定义的容。具体功能包括:数据交换标准定义信息的导入 维护数据交换标准与部数据结构间的映射定义表,包括数据项与数据项 的对应或组合对应(公式化)、数据类型的匹配或转换关系、数据项位置描述记录等等 实现对管理员的身份识别与管理权限控制 4.1.4 数据交换流执行 数据交
19、换流的执行是通过应用集成中间件实现的。采用中间件产品可以保证数据交换的高效、安全和可靠地进行。其工作原理是:读入数据交换流程,根据流程设定,启动数据交换过程。根据业务需要,同时可以并发若干个数据交换流程。当业务变化时,只需修改数据交换流程定义,就可以实现基于新业务的数据交换过程,因此系统具有很好的可扩展能力。具体功能如下:接收数据 验证数据 分析流程定义 根据流程进行数据交互过程 数据交互的事务管理 日志管理和交换数据存储 消息队列管理 实现对管理员的身份识别与管理权限控制 4.2 接入管理系统 4.2.1 接入点注册 在接入点向信息交换平台注册时,信息交换平台会自动检测接入点提供的属性信息是
20、否正确,只有正确后,才可以注册,接入点才可以接入信息交换平台。4.2.2 接入点配置 由于有很大一部分的业务系统早已开发完成,且采用的数据库不同,有Sybase、Oracle、SQL Server、Access 等等,各个业务系统根据实际需要,挑选可共享的数据,定制不同的共享接入点,将共享接入点发布到数据交换平台上;也可以根据业务系统自身的不同的数据种类定制不同的共享接入点,将共享接入 点发布到数据交换平台上。这样就最大限度的提供了各自业务系统数据的共享,也保证了各业务系统数据的安全。共享接入点的管理员可以根据需要设置本接入点的类型(只能收、只能发、接收都可)、本节点只接收那种信息类型,如果管
21、理员本身是接入点的创建者,还可以设置本接入点的管理员。4.2.3 接入点维护(一)新增接入点 根据各个业务系统的实际需要,系统管理员可以增加新的接入点,和建立新接入点的管理员。为了便于管理和资源的充分利用,规定一个单位或部门只有一个共享(单位或部门部共享)接入点(因为多个业务系统可以通过一个接入点接入交换信息平台).如果要新增接入点,由使用单位或部门提出书面申请,经系统平台管理员审核同意后,统一由系统平台管理员新增接入点,同时由系统平台管理员设置新增接入点的相关信息(二)修改接入点 因为各个单位、部门的业务系统的数据种类是变化的,且用户的要求也是变化的,所以共享接入点的管理员要根据需时来修改其
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 共享 交换 平台 设计方案
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【丰****】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【丰****】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。