大数据融合共享平台技术方案.docx

大数据融合共享平台技术方案估等标准规范。图3-3标准规范体系建设数据类标准规范基于国家及智慧城市有关标准，结合平台建设实际需求和业 务特点，通过规范、完整的信息资源描述逻辑，形成城市信息资 源的元数据、数据元、资源目录、数据交换等标准规范，支持全 面描述各类信息资源的信息。主要用于数据整合、数据接入、交 换和发布等功能，便于数据的采集整合、更新维护以及数据管理, 便于数据质量的控制。元数据标准规范：在遵循国家标准和行业标准的基础上，根据本地数据实际情 况，形本钱地的元数据标准。本系统的元数据规范和标准主要包 括业务元数据、技术元数据和管理元数据三类。资源目录与分类代码标准规范：资源目录与分类代码标准主要用于描述平台数据资源与服务 资源的逻辑组织与分类展示，其由假设干个子标准构成。数据共享交换标准规范：数据整合是平台建设的基础，涉及到多种数据的整合手段，10 其中数据交换通过服务总线实现应用对接等都需要定义一套通 用的数据交换标准，基于此标准实现各个系统间数据的共享和交 换，并支持未来更多系统与平台的对接。其它数据标准规范：数据字典标准：该标准规定了信息资源数据库及其内部各类 数据的数据字典编写的内容、格式、方法及其技术要求。数据交换格式标准：该标准规定了数据资源交换的格式要求。信息资源库数据表结构规范：该标准规定了信息资源库的数 据库表结构。数据维护与更新规范：该标准规定了数据维护、更新、管理 流程以及技术要求。数据质量规范：该标准规范了信息资源数据的质量要求和质 量标准。数据组织及数据库命名规那么：该标准规定了信息资源库的数 据组织以及数据库命名规那么。属性数据结构：该标准规定了信息资源库的属性数据结构。管理类标准规范为保证平台建设过程中的规范化管理，需要制定工程管理标 准规范体系，包括软件工程管理规范、平台运维管理规范、验收 与监理制度、软件开发标准、系统测试和评估等标准规范和各种 管理方法。II第三章详细设计3.1 数据共享交换平台设计平台主要实现政府信息化及其大数据应用建设的需求，满足 一个中心、四个库的实施及其应用，满足政府采集、交换各部门 数据，以及政府数据平台自定义公开等政府数据相关业务的需求;模块结构与功能关系设计功能业务描述:共享交换平台分为五个模块数据传输模块共享交换的主要模块，2-4模块为其提供支持，实现应用单位 前置交换信息库之间的信息处理和稳定可靠、不间断的信息传递 和数据同步。JOB管理模块实现对【数据传输模块】交换过程的流程配置、部署、执行 和整个信息交换系统运行进行监控、管理，包括交换流程管理、 交换监控和管理。抽取组件模块根据【数据传输模块】配置整合及订阅流程过程中，针对各 个流程、字段选择不同的组件处理方式，将需要处理和转换的字 段根据指定格式进行动态转换。12上游配置模块为【数据传输模块】提供数据采集数据源。数据服务模块服务模块的主要产出物。使用方通过订阅模式订阅关注的资 源，当资源同步到交换中心后，再通过中心将资源发送到资源的 订阅者。模块关系如下列图所示：数据同步抽取组件叫笠换策略配置去重组 去空组 增量组 全量组 周期交 手动交I件II件II件II件II短西徉II换密件I前置机数 据同步JOB管理前置节点管理 JOB管理JOB监控 元数据记录中心数据监听数据服务 交换数据订阅数据共享交换平台功能结构图运行设计运行模块的组合【统计局】需求【农业局】、【粮食局】数据。13运行描述业务数据的获取由适配器与业务系统共同完成，由资源拥有 方的系统管理员完成所需的配置。系统中各种数据采集适配器针 对需要采集的数据进行实时采集、监听(1)统计局根据需求确定自己所需数据。(2)通过资源配置模块建立统计局和农业局资源库信息。(3)交换节点的网络与中心网络并非全时段互联互动，只有 固定时段才能连通网络，此时适配器仍然正常工作，并采集各个 应用单位共享数据的增量数据保存至前置交换库中，并实时将增 量数据采集并提交至交换系统参与交换流程。(4)交换过程中非需求数据根据清洗接口组件去除，并实时 监听去除数据条数。(5)配置完成交换规那么后进行JOB化操作。14（6）提供消息确认和消息选择性重发机制以实现前置交换子 系统之间可靠的信息传递功能，实现交换信息内容的“不丢、不 错、不重”进行数据传送。出错处理设计出错输出信息错误类型说明：DC_M100INP 页面表单验证DC_M100CON 后台连接错误DC_M1000P 业务校验错误出错输出信息表序号错误标题输出信息错误类型1主机名称输入错误主机IP地址输入错误DC_MI01INP2端口名输入错误端口格式输入错误DC_MI02INP3用户名输入错误用户名格式错误DC_MI03INP4密码输入错误密码格式错误DC_MI04INP5增量范围设置异常增量区间设置超出 范围。DC_MI05INP6测试数据库数据库连接出错，请DC_MI01CON15连接错误联系系统管理员7网络连接不通网络无法连接，请联系系统管理员DC_MI02CON8建立数据转换流程失败由于XXX原因，建立 数据转换流程失败。DC_MI01OP9删除数据转换流程失败由于XXX原因，删除 数据转换流程失败。DC_MI02OP10修改数据转换流程失败由于XXX原因，修改 数据转换流程失败。DC_MI03OP11定时任务执行异常XXX定时任务执行异常。DC_MI04OP12去重组件执行异常XXXJOB执行清洗组件异常。DC_MI050P13新建JOB错误。JOB创立失败。DC_MI06OP14删除JOB错误。JOB删除失败。DC_MI07OP15执行JOB错误。JOB运行失败。DC_MI08OP出错处理对策出错处理对策表序号错误标题处理对策16171主机名称输入错误主机名称输入框变成红色警示状 态，光标定位在相应的数据项录入 处。2端口名输入错误主机名称输入框变成红色警示状 态，光标定位在相应的数据项录入 处。3用户名输入错误主机名称输入框变成红色警示状 态，光标定位在相应的数据项录入 处。4密码输入错误主机名称输入框变成红色警示状 态，光标定位在相应的数据项录入 处。5测试数据库连接尝试屡次连接数据库。6网络连接不通提示客户检查网路连接设备。7建立数据转换流程失败根据情况不同返回当前页或提示 用户解决方案。8删除数据转换流程失败不做处理。9修改数据转换流程失败根据情况不同返回当前页或提示 用户解决方案。10增量范围设置异常生成参考格式数据。11定时任务执行异常尝试重新启动。12去重组件执行异常回滚之前数据，重新执行。13新建JOB错误。返回当前页面、不做处理。14删除JOB错误。返回当前页面、不做处理。15执行JOB错误。返回当前页面、不做处理。功能模块设计18序号功能模块子模块功能描述1数据交换服务数据交换系统的作用在于以一种新 的体系架构实现公共信息的统一交 换，通过交换实现数据共享交换平 台数据的同步和共享1. 1前置子模块前置子系统作为整个交换系统的交 换端，负责与业务系统适配，支持 应用单位业务信息库与交换中心之 间的信息双向交换1.2传输子模块传输子系统是一个黑盒的数据传输 系统，负责实现信息的平安、可靠、 稳定、高效的信息交换，实现信息 的打包、转换、传递、路由、解包 等功能1. 3中心处理中心处理子系统是数据共享交换平子模块台的中心数据处理模块，负责交换 数据的处理、交换数据的整合、数 据共享交换平台中心文件服务、数 据转换以及组件处理等工作2数据采集实现数据采集采用ETL策略，蜂巢系统 进行实施；数据采集模块采用集群(C/S)方式实现，主服务器要对每一个节点进行管理3调度与监控调度与监控，分为中心调度监控和 节点调度监控；中心控制整个网络 系统；节点仅仅控制自身的采集任 务与调度4文件传输大文件传输平台用于实现委办局到 基础数据库之间的文件传输，平台 主要用于工作文件、视音频文件、 图片等多种文件，并提供传输管理 功能5任务失败处理采集任务如果失败，可以重启操作6清洗模块配置根据需求通过页面可视化配置清洗规那么，完成规整化处理19第一章建设目标3总体规划31.1 建设目标3第二章总体设计5大数据中心系统架构设计52.1 数据流向设计标准规范设计第三章详细设计12数据共享交换平台设计123.1 信息资源目录设计21数据管理平台303.2 数据应用平台设计4969693.3 接口设计58第四章平安方案设计计算机网络平安设计694.1 防火墙70病毒防护系统704.2 对业务与数据灾难备份恢复的设计71信息平安与保密管理73II207清洗自动效验对采集过程中无效空数据、重复数据自动过滤8结果数据对标对数据源和目标数据两段的数据规 范进行核对，例如（字段名称，字 段类型，字段长度等）保证两端的 一致性9元数据记录对清洗过程跟踪。根据各个清洗规 那么组件，实现可插拔的页面可视化 配置10数据库适配存储前端数据库、中心数据库、节点数 据库可以按照各种关系型数据库存 储11前置目录同步实现前置机目录结构和其他节点同步12前置节点管理可视化页面监控前置节点的活动状 态，对各节点的启、停、故障等进 行监控13数据交换任务控制页面可以使用编辑、运行、停止、 等，对定制完备的采集策略进行控 制14网路结构与解决对于不同的网络结构，采取与业务 系统松耦合的数据采集策略；可以方案在节点与数据中心之间以通信服务器（前置机）的方式进行解决15FTP方式定义多格式数据数据中心接受FTP方式的数据上传， 但是所有以FTP方式上传的数据结 构必须在数据字典中已经定义确认16交换数据订阅通过页面以目录树为级别导出该目 录下的数据和数据结构。文件格式 可以是文档、PDF、Json等形式17数据存储平台数据存储采用关系型数据库实现；应用层以关系数据库实现数据仓库的星型数据结构18逻辑模型逻辑模型是每一个数据结构展现的 基本数据模块，逻辑模型主要定义 基于数据展现的多个数据结构之间 的关系19数据交换数据交换，双方通过平台达成共识 的权限后，互相开放特定的数据浏 览、下载使用权限3.2信息资源目录设计目录管理与服务系统包括信息资源目录子系统和信息资源编21 目管理子系统。目录子系统的建设，以目录方式实现资源共享， 是公共信息平台实现信息资源共享的有效手段，使用目录体系可 以以更灵活的方式实现更多应用单位、更多资源的接入与共享。编目管理子系统作为公共服务平台信息资源目录体系的载体, 采用一种非落地的信息共享模式，是对交换共享模式的补充。在 目录式共享中，各应用单位对各自共享的资源有完整的控制权， 可有效地解决交换模式中各应用单位因担忧违反相关规定而不 愿意批量提供数据的问题。3.2.1 模块结构与功能关系设计功能业务描述：系统包括五个模块，分别是目录编制、目 录管理、目录审核、系统管理和目录订阅。五个模块之间存 在一定的依赖和调用关系，可参考下面的设计图。目录编制 模块依赖系统管理模块提供的资源标识符、资源分类和元数 据管理的相关功能，目录编制完成之后进入目录管理模块， 在目录管理模块进行相关的状态操作，如发布，撤回，升级 和下架等，同时依赖目录审核模块提供的审核功能，通过审 核的目录才能发布和进行后续操作。被发布的目录可以被目 录订阅模块获取，在此模块被订阅，实现对编目资源的访问。 目录订阅也依赖目录审核模块，表现为两点：1.在目录订阅模 块申请的订阅，需要在目录审核模块进行审核，通过审核的 订阅的才能生效，向下执行；2.当前用户不具备访问某个目录22的权限时，可以通过申请特殊权限，获取一定时间区间中订阅权限，申请特殊权限需要在目录审核模块中进行审核，通 过审核的特殊权限申请才能生效，向下执行，最终实现订阅。目录审核目录审核查看1审核,发布1)订阅审核/特殊权限审核查看审核查看 审核 3.2.2 运行设计运行模块的组合(1)目录编制(2)目录订阅23运行流程系统的核心功能为目录编制和目录订阅，目录编制指目录资 源拥有单位(作为资源持有者)为本单位指定资源进行编目，并 发布至系统的过程；目录订阅指应用单位(作为资源访问者)通 过本系统获取已经发布的资源的过程。(1)目录资源拥有单位有资源发布需求，进入目录编制模块, 完成该目录的核心信息、资源信息和授权信息的填写，提交该目 录；单位主管在目录审核模块对该目录进行审核；通过审核的目 录在目录管理模块被发布后，即可被其它授权应用单位订阅。(2)应用单位有访问系统中非本单位资源的需求，进入目录订 阅模块，填写订阅信息，申请订阅；该资源责任人在目录审核模 块对本次订阅进行审批；通过审核的订阅，向其它系统发出订阅 信息，实现对订阅资源的访问。如果应用单位不具备访问该资源 的权限，那么需要先在目录订阅模块申请特殊权限；该资源责任人 在目录审核模块对本次权限申请进行审批；通过审核的申请，将24让该用户获取订阅权限。323出错处理设计出错输出信息错误类型说明：RC_M100INP 页面表单验证RC_M100CON 后台连接错误RC_M1000P业务校验错误出错输出信息表出错处理对策序号错误标题输出信息错误类型1用户名或密码错误用户名或密码错误RC_MIOOINP2数据不在设定范围内* * * * 的值 不在 * * * * 和 * * * *之间RC_MIOOINP3数据未输入*必须输入RC_MIOOINP4重复订阅您已订阅该资源RC_MIOOOP5网络不通网络无法连接，请联系系统管理员RC_MIOOCON6未选取请选择*RC_MIOOOP7选取多项请选择一项*RC_MIOOOP出错处理对策表25序号1数据不在设定范围内流程停在录入界面，光标定位在相应的数据项录入处2数据未输入流程停在录入界面，光标定位在相应的数据项录入处3重复订阅流程停在录入界面，光标定位在相应的数据项录入处4网络不通5未选取流程停在录入界面，光标定位在相应的数据项录入处6选取多项流程停在录入界面，光标定位在相应的数据项录入处错误标题处理对策功能模块设计序号功能模块功能描述1资源标识符管理包括资源标识符结构管理、资源标识符应用 单位配置、应用单位标识符中心配置、核心 元数据定义等功能。2元数据定义编目子系统的核心元数据定义提供对核心 元数据的定义管理，包括核心元数据查询、26添加、编辑和删除功能，同时提供核心元数 据详细信息查看的功能。3目录发布目录发布主要提供在编目中心已注册的目 录的发布功能（支持批量），在发布时可指定 允许访问资源或目录的应用单位列表，以及 资源访问权限要求，通过发布目录，可以将 前置目录发布到全市统一的门户中供各级 应用单位进行检索、查看和申请。4目录撤消针对无效的目录或需要进行下线的目录信 息，系统提供目录撤消的功能，该功能可对 已发布的目录进行撤消和下线，目录撤消后 可重新进入发布流程。5交换互动（订阅）提供目录驱动交换功能，资源使用方通过目 录方式获取资源信息后，通过平台提供的申 请流程向平台管理者与资源拥有方进行申 请，得到管理者与资源拥有方同意后，由平 台自动开始按配置的规那么进行信息资源的 交换与共享。目录系统提供数据交换驱动 入口，调用对交换系统提供的相关接口，实 现与交换系统的互联互通，并能对交换系统 业务数据及各类服务提供资源编目功能。6查询统计查询统计功能提供服务状态的统计，如目录27评价、访问量统计等信息，目录评价主要提 供各应用单位对已发布目录的评价信息查 询功能，访问量统计能够根据各应用单位对 该目录的浏览数量进行统计。过程信息查询 提供目录在编目中心的过程信息记录。7特殊权限申请在发布时可指定允许访问资源或目录的应 用单位列表及资源访问权限要求，只有被 允许的单位或个人才能访问特定的资源。当 出现特殊原因或业务需要，某些单位和个人 希望在某个时间段内访问原先不能访问的 资源时，可使用特殊权限审批功能，通过流 程化管理，可在指定的时间段内暂时开放资 源及目录的访问权限。8目录编制目录编制包含结构化编目和非结构化编目， 两种编目均可在前置环境中进行。结构化数 据编目，编目系统提供对异构数据库等结构 化数据进行手工或自动编目，支持主流关系 型数据库,包括Oracle、DB2、MSSQL、 MYSQL等异构数据库。除了可以对数据 库等结构化数据进行编目外，也可以对非结 构化的数据进行编目，如文件、图片、视频 等进行编目，通过文件交换系统实现文件的2829共享服务。9目录查询提供前置编目信息的查询服务，支持快速查 询和自定义查询，可以通过资源标示符、资 源名称、关键字、分类方式、编目日期等多 种条件进行查询，并支持查询结果的目录详 细信息查看，从而让用户快速定位信息资源 位置。10目录提交提供前置编目信息提交至平台中心的服务， 编目信息经过提交后，在编目中心等待审核 人员进行审批，并最终发布。提供编目信息 批量发布功能，并能够查询已提交的编目信 息。11目录审核编目信息审核主要提供给编目前置管理员 使用，编目信息经审核后方能向编目中心提 交，在编目信息审核后可以进行该条编目信 息的查看。12目录管理目录管理提供编目信息的修改和删除功能， 前置编目人员可以对编目的信息进行修改， 包括编目信息的核心元数据项、核心表数据 项、字段数据项等内容。修改完毕后，可以 对编目重新进行提交、审核和注册。同时， 前置编目人员也可以通过编目信息删除的第一章建设目标L1总体规划在统一标准框架下，面向智慧城市建设的信息资源共享和开 发需求，依据国家智慧城市建设相关标准，采用云计算、大数据 等信息化技术手段，统筹整合法人、地理信息、宏观经济、人口 数据资源，构建统一的基础数据资源体系、标准规范体系、平安 体系、四大基础库、公共专题库、公共业务库及四大公共平台, 建立政务信息的共享和交换机制，面向其他委办部门、对外提供 多层次、可扩展、平安可靠的共享服务接口，有效支持各类应用 系统的开发和运行，实现对信息资源的深度利用，实现不同部门 异构系统间的资源共享和业务协同，有效防止城市重复投资、重 复建设、资源浪费等问题。1.2建设目标城市大数据中心（一期）建设目标为四个平台、三个基础信 息库，分别为数据共享交换平台、信息资源目录管理平台、数据 管理平台、数据应用平台和基础信息库（法人库、宏观经济库、 地理信息库）。其中基础信息库为本期工程建设的重点内容；数 据共享交换平台、数据管理平台为大数据中心的数据生产平台, 负责获取、整合数据，为基础信息库提供技术支撑和管理能力，方式删除多余的编目信息。13目录状态同步目录状态同步主要提供平台门户与后台数 据的手动同步功能，系统提供自动同步检测 的功能，能够自动检测目录状态不一致的状 况，然后通过对相应的编目数据进行手工同 步，可实现目录状态的同步更新。3.3 数据管理平台平台主要实现政府信息化及大数据应用建设的需求，满足一 个中心、四个库的实施及其应用，满足政府采集、交换各部门数 据，以及政府数据平台公开等政府数据相关业务的需求；模块结构与功能关系系统用户层面：相关管理员可以对系统用户及用户行为平安 进行相关管理与配置。具体表达为，系统管理-管理员可以对平 台注册机构用户权限及可访问信息作管理；平安管理-配置平台 用户会话及身份，保证接入数据的平安访问；数据交换层面：相关管理人员可以对数据标准，数据交换共 享过程中任意环节的管理与配置。具体表达为，标准管理-管理 数据接入过程中各种数据标准及元数据信息；数据管理-查看和 管理数据同步信息及数据整合模型；前置机管理-管理前置机相 关信息；质检管理-校验数据标准及其可用性配置；交换监控-整30 体把控整个交换过程，提供数据回溯，统计分析。系统维护层面：运维人员可以对系统的运行进行告警配置及 维护。表达为运行监控-对系统运行中的一些基本信息的了解及 统计分析，便于运维人员的巡检；系统维护-维护系统相关基础 信息及系统表创立等。如下图：数据管理平台系统用户层系统管理平安管理组织机构管理统一身份认证用户管理单点登录权限管理密钥管理字典表管理数据备份、还原目录权限管理数据平安保密授权管理数据交换层标准管理数据管理前置机管理质检管理交换监控代码管理式提元管理概要信息致是字典管理元数据信息数据来源元数据管理一二境型管理同步信息式有变迁元数定管理切换数据标准数据回溯领域埠型管理记录浏览信息资源元数据管理质量管理交换过程监控库体结构管理整合模型系统运行元数据管理数据质检统计分析系统维护层运行监控系统维护应用启停访问统计系统日志管理运行报告运行状态监控标准规范导入与导出故障预整运行平等性能监控数据统计工具故障巡检 邮件接口系统表创立工具数据管理平台功能结构图3.3.1 运行设计运行模块的组合运行监控中对服务、硬件、数据库监控的流程控制如下图：31数据管理平台流程控制图Web用户登录、注册、修改用户信息和退出如下图：32注册信息远程用户登录模块(Ml.1.1)注册信息用户信息Web用户Web用户注册模块匚用户信自.(Ml.1.8)I JORACLE用户信息用户信息Mb用户修改用户信 息模块 (Ml.1.9)退出指令Web用户退出模块 A退出指令Web用户退出模块 A(Ml.1.10)数据管理平台登录退出图数据元、模型管理、库体结构管理如下图:Web用户加载树节点列表节点维护树节点列表树节点列表信息ORACLE对节点土需U改查维，节点列表数据列表信息刷新右侧数据列表数据维护力彳对数据进行增删改查维护数据列表信息刷新数据列表标准管理功能结构图(4)代码标准管理33如下图:标准管理代码标准功能结构图数据字典管理如下图:加载代码代码标准代码标准信息Web用户代码标准维护对代码标准增删改查维护代码标准-ORACLE代码标准内容,加载右侧代码标准内容列表代码标准内容信息代码标准内容信息34标准管理数据字典功能结构图运行控制(1)当监控的硬件、服务、数据库发生异常时，详情将不能 查看，同事更改数据库中监控对象的监控状态，还需要向相关负 责人发送邮寄，以便尽快处理(2) Oracle数据库有数据导出的功能，需要管理员填写数据 库的基本信息以便导出数据库中的数据(3)硬件监控详情包括磁盘，内存，CPU等的基本信息，同 事有图表显示当前监控的硬件的使用情况。(4)数据元、数据模型、库体结构功能在加载页面时，同时 加载左边树节点，点击左边节点，右边刷新数据。(5)数据元、数据模型、库体结构功能可以对树节点进行维 护，并且对右侧列表进行维护。(6)代码标准功能直接加载代码标准列表，并对其维护。(7)数据字典功能在加载页面时直接加载左侧字典标准列表, 点击列表数据刷新右侧代码标准内容。3.3.2 出错处理设计出错输出信息错误类型说明：DM_M100INP 页面表单验证35DM_M100CON 后台连接错误DM_M1000P 业务校验错误出错输出信息表序号错误标题输出信息错误类型1用户名或密码错误用户名或密码错误DM_MIOOINP2数据长度小于设定值*长度小于*DM_MIOOINP3数据不在设定范围内* * * * 的值 不在 * * * * 和 * * * *之间DM_MIOOINP4数据未输入*必须输入DM_MIOOINP5数据库无法连接数据库连接出错，请联系系统管理员DM_MIOOCON6网络不通网络无法连接，请联系系统管理员DM_MIOOCON7硬件异常或断开连接详情无法查看，请联系负责人并排查DM_MIOOCON8数据库断开连接无法查看详情，请联系负责人并排查DM_MIOOCON9服务器异常详情无法查看，请联系负责人并排查DM_MIOOCON3610无法修改数据请选择一条数据DM_MIOOOP11无法删除数据请选择要删除的数据DM_MIOOOP12无法查看数据请选择要查看的数据DM_MIOOOP13无法添加数据请选择节点DM_MIOOOP出错处理对策出错处理对策表序号错误标题处理对策1用户名或密码错误流程停在登录界面，光标定位在用户名录入处2数据长度小于设定值流程停在录入界面，光标定位在相应的数据项录入处3数据不在设定范围内流程停在录入界面，光标定位在相应的数据项录入处4数据未输入流程停在录入界面，光标定位在相应的数据项录入处5数据库无法连接定时自动重新连接；双机热备6网络不通定时自动检查；为远程操作提供本地操作功能7长时间收不到数据不做处理378数据库连接不上向管理人员发送邮件提示异常9硬件异常或断开连接发送邮件10导出表时未成功提示输入的信息有误并重新输入11无法修改数据弹出提示框，先选中一条数据再进行修改12无法删除数据弹出提示框，先选中一条数据再进行删除13无法添加数据需要先选中左侧的一个树节点再进行添加14无法查看信息弹出提示框，先选中一条数据再进行查看334功能模块设计38序号功能模 块子模块功能描述1系统管理组织机构管理组织机构管理功能模块主要包括组 织机构信息维护，在系统中一般用户 只能查看组织机构相关信息，不能修39改与删除，保证组织机构信息变更后与系统保持一持。2系统管理用户管理用户管理是平台管理员进行账号创 建和维护的模块。3系统管理权限管理权限管理是对用户的可操作权限进 行，定义和管理。平台定制了各种角色，并为这些角色 授予各种资源的访问权限，包括节点 及用户的定义（指增加、删除、修改 等）权限、任务定义及管理权限等。4系统管理字典表管理对于系统使用到的业务、系统常量， 如：是、否，等进行维护管理，包括 增加、删除、修改、查询等功能。5系统管理目录权限管理目录管理与服务系统包括专项资 源目录库和共享资源总目录库。各部 门可以根据协同应用的需要建立部 门间共享指标工程目录库；此功能提供目录的权限的分配，提供 目录是否具备查看读写等权限。6平安管理统一身份认证数据管理平台要求通过统一身份认 证门户实现统一组织结构、人员管理并对上层应用系统提供数据服务；数据应用平台为大数据中心的 应用平台，结合法人库、宏观经济库、地理信息库、公共专题库、 公共业务库提供基于GIS、报表的数据展示和在线数据查询等功 能。1、数据共享交换平台负责各委办局数据的采集，通过交换平台将共建部门的业务 数据汇总到数据中心。同时提供跨部门的数据共享与交换。2、数据管理平台通过ETL工具将数据从ODS库整合到委办局业务库，提供 数据的处理、元数据管理、数据申请授权、错误数据反响、数据 运行监控、数据服务等功能。3、信息资源目录管理平台信息资源目录管理平台主要实现了做为法人库、宏观经济库、 地理信息库三大基础库及其它智慧应用数据源的委办局信息资 源的管理。4、数据应用平台数据应用平台针对不同的用户提供灵活的信息查询、分主题 的统计分析、领导驾驶舱、等丰富的数据应用服务，并支持主题 应用的扩展功能。5、基础信息库基础信息库建设包括法人库、宏观经济库、地理基础信息库。和统一登录入口等功能。7平安管理单点登录在统一身份认证的基础上，实现用户 只需一次登录就可以访问其权限范 围内的各种信息资源及服务，并可以 方便的在各系统之间切换访问，而不 必进行二次登录。8平安管理密钥管理密钥管理包括，从密钥的产生到密钥 的销毁的各个方面。功能包括公钥、 私钥、PKI的创立、分发、更新、销 毁等。9平安管理数据备份、还原数据备份、还原，针对业务生产中的 数据库，进行的数据自动备份和数据 库还原的功能。数据库应用主要为 oracle o10平安管理数据平安 保密授权 管理数据不得随意泄露，只有经授权的相 关专门人员可以有权限利用和管理 数据，经正式授权后，需要数据时必 须申请相关主管单位登记，并由需要 人签字备案，保密数据不得以其他任 何形式存储和传输，根据数据的保密 规定和用途，确定数据开发使用人员40的存取权限、存取方式和审批手续。11运行监控应用启停针对平台中应用到的业务服务器进 行，进行自动化管理。其中功能包括，应用服务器注册、销 毁、更新，以及对应用服务的自动控 制，主要实现启动、停止功能。12运行监控运行报告运行报告提供平台系统运行状态报 告，以报表的方式生成并以邮件的方 式定期发送至运维人员，运行报告内 容包括服务名称、服务访问量、服务 状态等多项内容。13运行监控故障通 知、预警、 告警故障通知提供多种方式的故障通知 服务，当某项服务发生故障时，系统 能够以邮件、短信等多种方式通知指 定用户，从而对系统故障进行快速响 应。14运行监控故障巡检故障巡检提供对各种服务、接口和数 据库等的故障检测功能，用户只需将 需要定期巡检的服务加入至巡检服 务队列中，同时，设置完毕巡检的参 数，即可以实现定期巡检的功能，并 生产巡检报告发送至指定邮箱。4115运行监控访问统计访问统计提供各种服务的访问统计 功能，可以灵活进行统计，根据不同 的条件进行各种数据的统计服务。主 要包括服务流量统计、服务访问量统 计、用户/IP访问量统计等功能。16运行监控运行状态监控运行状态监控指平台系统各种注册 服务的实时监控，包括该服务的状 态、运行时间、同时可以对平台监控 的时间间隔，是否自动启动等参数进 行设置和应用。17运行监控运行平台性能监控运行平台性能监控指对平台性能（包 括CPU、内存等实用状况）的监控和 预警功能。18运行监控邮件接口实现对邮件发送、接收功能封装，以 接口形式提供服务，方便外部或其它 应用的统一调用。19交换监控数据回溯数据回溯，对结果（准）数据形成过程 进行追溯溯源，可根据结果数据溯源 到原始数据，以及对清洗和规那么格式 化的过程检索，主要提供过程化数据 检索与展示。20交换监交换过程对数据交换中心、交换前置、交换过42控监控程、数据交换量，交换使用的中间件 及其服务器运行情况的统一监控。提 供交换情况的统计分析功能，可多维 度统计展示数据采集交换情况，方便 平台的管理维护。21交换监控统计分析统计分析，涉及如部门交换数据情 况、异常数据、访问日志等各纬度的 统计与分析，提供数据检索功能，为 用户行为追溯提供数据依据。22前置机 （节点）管 理数据来源元数据管理数据来源元数据管理，数据中心的所 有数据都来自各个委办局的业务系 统，在经过清洗、转换、整合后形成 的，并提供对外服务。23前置机 （节点）管 理数据变迁 元数据管理变迁历史元数据管理，由于数据中心 的数据存在清洗、转换和消重整合的 过程，甚至需要人工干预，为了保证 数据的正确性，必须对数据变迁的过 程历史进行记录，以保证可以追溯和 追踪。24前置机信息资源信息资源元数据管理，信息资源元数43（节点）管理元数据管理据管理是管理所有数据中心所拥有 的信息资源的描述信息，由于信息资 源多种多样，因此描述其特征的元数 据结构也多种多样，需要适应不同类 型的信息资源而运用不同的元数据 项。前置机 （节点）管 理系统运行元数据管理系统运行元数据管理，该模块所存储 管理的主要是整个系统运行的信息， 包括系统的各种配置信息，以及各配 置信息的修改变更情况。25标准管理代码标准管理“代码标准”规定了信息指标体系的 分类与代码和指标项的说明。分类码 采用数字/字母或字符编码结构来区 分不同类别和层次的信息。