星环合作上海市大数据中心：数据云支撑上海市数据共享交换平台

1045次阅读

项目背景

2018年4月，上海市大数据中心正式揭牌成立，将构建全市数据资源共享体系，制定数据资源归集、治理、共享、开放、应用、安全等技术标准及管理办法，实现跨层级、跨部门、跨系统、跨业务的数据共享和交换。

同时，上海市市委办公厅、市政府办公厅颁布“上海市全面推进‘一网通办’加快建设智慧政府工作方案”，明确提出“以电子政务云为基础,以跨部门、跨层级应用为抓手,统筹构建‘云数联动’的数据共享交换平台,实现重要信息系统通过统一平台进行数据共享交换,打通各部门信息系统、打破‘数据孤岛’”，要求“建设统一的数据共享交换平台”，建成对接国家平台,覆盖全市、统筹利用、统一接入的数据共享交换平台。

2019年7月23日，中共中央政治局常委、国务院总理李克强在中共中央政治局委员、上海市委书记李强和市长应勇陪同下参观考察了上海市大数据中心。星环科技为上海市大数据中心数据共享交换平台提供大数据支撑管理子系统，为汇集政务数据提供大数据存储和计算能力支撑，可支持多个应用系统运行、用于数据存储和查询；数据范围包括49家市级委办局、16区县、四大库等各类数据。数据共享交换平台接入更多市政部门系统数据，一网通办平台可以做更多业务查询和处理。

项目建设需求

建设上海市数据共享交换平台，将“四大库”、“市级统建系统”、“各市级委办”、“各行政区”的数据，通过前置节点汇聚到市级数据湖，再通过市级数据共享交换子系统（数据集成子系统）与数据治理，实现各类数据的集成与治理。将集成与治理后的数据通过市级数据库构建成主题库与基础库，最终通过市级数据共享交换子系统（数据服务子系统）提供基础服务、数据展现与决策支撑。同时数据共享交换平台需建设完善的安全体系与标准规范体系，确保数据的安全性与规范性。

上海市数据共享交换平台整体上包含市级数据共享交换子系统（含数据交换子系统、数据服务子系统、数据集成子系统等）、市级数据湖、市级数据库、市级数据治理子系统、市级数据质量管理子系统等业务模块。其中：数据交换子系统实现数据交换引擎、统一调度引擎、任务管理、数据桥接等功能；市级数据湖汇聚“四大库”、“市级统建系统”、“各市级委办系统”、“各行政区系统”的经过初始治理的原始数据；数据集成子系统实现对数据湖数据的存储管理、共享与交换，推送数据到治理平台，并建立与市级数据库的连接；数据治理子系统与数据质量管理子系统实现数据元管理与数据质量管理；市级数据库主要用于存放经过一系列清洗、转换、加载、治理步骤后的高质量的政务数据资源，其数据来源主要来自数据湖；数据服务子系统主要提供市级数据库中数据对外的服务发布与利用。

星环科技为上海大数据共享交换平台提供大数据存储和计算能力的基础平台；按照门户集成规范要求，进行大数据支撑平台二次开发，实现用户、权限等统一管理，提供相关接口服务；配合公共数据归集实施，并开发领导驾驶舱功能，探索数据应用展现。

项目将初步建立市、区两级的数据资源共享体系，包括相应的组织角色、平台工具、标准规范和管理制度。其中市级数据湖、数据资源池、数据交换子系统、数据集成子系统、数据服务子系统，由大数据中心统筹规划、建设与运维；各交换前置节点由各业务部门自行建设与运维。

平台架构

基于星环数据云平台TDC数据共享交换平台，汇集了统一、标准、完整的人口信息数据库、法人单位基础信息库、自然和地理基础信息库及电子证照信息库四大库信息，49家市级委办政务数据及交换日志数据，构建三级数据共享交换体系，保障数据安全，支撑“一网通办”、“市民主页”等数据服务能力。主要包含提供数据承载、共享交换管理、三清单和目录管理、数据质量管控、数据安全保障、数据服务等六大能力。

大数据共享交换平台功能系统架构如下图

undefined