数据中心建设技术服务采购需求文档一、项目建设要求1.建设目标建成广东省食品药品追溯数据中心和标准体系,支持全面开展“智慧食药监”项目建设,对省、市、区县、乡镇(街道)四级食品药品监管部门的信息化建设提供统一的应用支撑体系,力争各级监管部门的信息化系统可以互联互通、信息共享、业务协同;实现与国家总局、省政府及相关部门、省内各地市应用系统的数据交换共享,打造“承前(省局已建系统)启后(智慧食药监项目)”、“承上(国家总局及其他国家单位的系统)启下(省内地市区系统)”的应用支撑。
2.建设任务项目建设的主要任务由“建设一套标准规范、建设一个数据中心”组成,具体如下:1)建设一套标准规范。
以总局信息化办2014年发布的《食品药品监管信息化标准体系》为基础,结合广东省食品药品监管信息化建设行业和地方特色需要,编制《广东省食品药品监管信息化标准体系》,确保省局建立的系统能够与国家总局、省政府及相关部门、省内各地市系统等进行互联互通。
2)建设一个数据中心。
2.1)数据中心总体规划。
对数据中心进行前瞻型的总体规划,满足可预估未来三年内广东省食品药品追溯数据中心和标准体系的建设和运行需求。
2.2)建设数据中心系统平台。
建设统一的数据中心系统平台,提供数据采集、清洗、整合、存储、分析、应用、备份和可视化等系统工具,支撑广东省食品药品追溯数据中心和标准体系的所有数据交换工作。
2.3)建设数据中心数据库。
对接国家总局、各地市、相关部门和各业务系统,依托平台归集各类数据并进行抽取、清洗、转换等数据处理工作,建设统一的基础库和专题库。
2.4)建设数据可视化系统。
建设和维护一个食品药品监管数据可视化系统,作为数据中心平台的重要组成部分,采集各类数据进行分析和可视化展示。
2.5)提供数据应用和技术支撑服务。
为上层业务系统提供各类数据应用服务,指导业务系统按标准进行数据库建设,为业务系统的建设和运行提供技术支撑。
2.6)提供数据中心运维服务。
按制定的数据中心平台运维管理办法进行日常运维管理,保证平台运行的稳定性,并对数据中心数据进行持续管理。
3.数据中心建设要求本项目数据中心建设要求对接国家总局和广东省各地市数据中心,全面采集已建业务数据并进行标准化和融合工作,同时联通广东省其他相关部门,满足广东省食品药品追溯数据中心和标准体系项目的建设和运行需求,建成横纵贯通的数据中心系统平台,并依托平台对数据进行采集、清洗和整合等,建设用于支撑上层应用的基础库和专题库,统一上层应用的数据标准和建设规范,为广东省食品药品追溯数据中心和标准体系的各种业务系统提供数据服务和标准支撑。
本项目数据中心建设内容包括:1、数据中心总体规划。
2、建设数据中心标准规范。
3、建设数据中心平台系统。
4、建设数据中心数据库。
5、建设数据可视化系统。
6、提供数据应用和技术支撑服务。
7、提供数据中心运维服务。
3.1.数据中心总体规划要求本项目要求对数据中心进行前瞻型的总体规划,设计数据中心的总体架构和数据库结构,评估各应用系统的对数据中心的业务需求,合理分配数据中心的存储、服务、备份等资源,满足预估未来三年内广东省食品药品追溯数据中心和标准体系的建设和运行需求。
1)总体架构规划:要求明确数据中心与省食药监、国家总局、省直单位和广东省各地市食药监等多个业务系统之间的数据关系,分析数据中心的各种数据来源和数据需求,规划与之适配的数据应用服务,制定有前瞻型的、可扩展的数据中心系统架构、部署结构、数据库组成等设计方案。
2)资源分配规划:要求根据广东省食品药品追溯数据中心和标准体系现有及可预估未来三年的建设运行需求,准确分析各系统的存储容量、访问安全、使用频率、性能要求等需求,合理分配数据中心的存储、服务、备份等各类资源。
3.2.数据中心标准规范建设要求本项目要求建立数据中心的标准规范,作为本项目标准规范体系的组成部分,规范数据中心的建设、运营和维护工作,为广东省食品药品追溯数据中心和标准体系各业务系统的数据库建设提供标准,指导各业务系统的从数据中心中提交和获取数据。
要求对标准管理规范进行全生命周期的管理,包括标准管理规范调研、编制、发布、使用指导和更新维护。
本项目要求建立的数据中心标准规范包括但不限于以下内容:1)数据中心数据标准建设:包括但不限于基础数据标准、资源目录编制标准。
2)数据中心技术规范建设:包括但不限于数据接入接口规范、数据服务接口规范。
3)数据中心管理办法建设:包括但不限于数据共享交换工作规范、数据中心平台运维管理办法、数据共享交换绩效考核办法。
3.3.数据中心系统平台建设要求本项目要求建设一个统一的数据中心系统平台,系统平台提供从数据采集、清洗、整合、存储、分析和可视化等的系统工具,支撑全过程的数据交换和共享,依托本系统平台可实现广东省食品药品追溯数据中心和标准体系及与关联的所有系统的数据交换工作。
系统平台应包括以下功能:1、中心交换控制功能。
2、前置机交换功能。
3、数据接口采集功能。
4、资源目录管理功能。
5、数据清洗整合功能。
6、数据共享服务功能。
7、运行监控管理功能。
8、信息资源门户功能。
9、数据安全管理功能。
3.3.1.中心交换控制功能要求中心交换控制功能是数据交换共享平台的核心组件,负责管理各数据交换节点及数据交换规则,其功能应包括:1)交换节点管理:对进行数据交换的每个交换节点进行管理。
2)节点数据源配置:对交换来源节点的数据库等信息进行配置。
3)节点目标源配置:对交换目标节点的数据库等信息进行配置。
4)交换规则配置:交换平台提供规则配置模板,平台按照用户配置的模板,自动完成相关数据处理任务。
3.3.2.前置机交换功能要求前置机交换功能是指业务系统与数据中心进行数据交换,以数据库前置、文件服务器前置等方式将数据采集到临时存放区域。
其功能应包括:1)支持内外两种前置机模式:支持部门局域网内部署前置机和在电子政务云上部署前置机两种方式。
2)文件接入交换:提供前置文件接入交换方式,支持通过FTP服务上传提交文件数据。
3)数据库接入交换:提供数据库接入方式,支持通过数据库服务器提交结构化数据。
4)适配器接口:通过适配器接口,支持不同类型的数据库接入。
适配接口支持主流关系型数据。
3.3.3.数据接口采集功能要求数据接口采集是业务数据通过接口方式提交数据的统一接口集,按结构化数据、大文件、消息等数据类型以不同的接口方式进行数据采集,其功能应该包括:1)结构化数据提交接口:要求平台提供结构化数据提交接口,供其他系统进行结构化数据接入。
2)文件上传接口:要求平台提供文件提交接口,供其他系统提交视频、照片等非结构化数据。
3)消息中间件数据采集:对于并发量大、消息量小的数据,平台提供信息中间件的数据提交接口。
4)异常数据处理:要求对在数据采集过程发生的数据异常进行记录和处理。
3.3.4.资源目录管理功能要求资源目录管理系统是系统管理员对数据资源进行编目管理的工具,提供目录管理、资源元数据管理、目录权限配置等功能,其功能应包括:1)资源编目管理:需提供完整的编目功能,包含目录注册、审核、更新、删除和关联等。
2)元数据管理:需提供资源元数据编制功能,包含数据资源结构定义,数据映射含义,数据服务定义,数据规则定义等。
3)资源权限管理:需提供完善的数据权限管理功能,权限需控制到每个数据表的每个字段。
4)资源目录检索:需提供资源目录浏览功能,提供目录查询、目录导入和导出、数据预览等功能。
3.3.5.数据清洗整合功能要求要求提供简洁、易用、功能性强的数据清洗整合系统工具,其中功能需包括:数据清洗、数据对比、数据转换、数据加载等。
1)数据清洗:要求系统提供数据清洗功能,解决各单位之间信息数据不一致和不规范问题,保证数据的一致性、完整性和正确性。
2)数据比对:要求系统提供数据比对功能,建立、管理数据关联的规则,通过任务调度系统,启动后台作业发现异常的数据。
3)数据转换:要求系统对抽取出的数据进行数据转换和加工,对从业务应用系统中抽取的源数据,进行数据的转换、清洗、拆分、汇总等处理,保证来自不同系统、不同格式的数据的一致性和完整性。
4)数据加载:要求将经过抽取、转换后的数据加载到主题数据库系统中。
要求数据加载工具需具有高效的加载性能。
3.3.6.数据共享服务功能要求数据共享服务是平台向外提供数据服务的服务管理系统,管理和发布的数据服务包括数据查询服务、数据推送服务和数据校验服务等1)数据推送服务:要求提供数据推送规则设置,系统可以按设定的频率、时间等抽取相关数据资源,并将数据主动推送到目标前置机里。
2)数据获取服务:要求提供丰富的接口服务,各本业务系统可以通过接口服务在线实时获取到数据。
3)数据校验服务:要求提供数据校验服务,可调用服务将指定数据集与基准数据源进行比对校验。
3.3.7.运行监控管理功能要求运行监控管理功能是数据中心平台各系统的运行情况的监控管理模块,对数据平台用户使用情况,数据交换情况,数据清洗情况等进行监控。
1)用户使用情况监控:要求提供用户对平台服务的实时访问情况监控功能。
2)数据清洗情况监控:要求提供数据清洗情况监控以及相应日志功能。
3)数据质量情况监控:要求提供数据质量情况监控以及相应日志功能。
4)数据交换情况监控:要求提供数据交换情况监控以及相应日志功能。
5)运行情况异常预警:要求提供运行异常规则配置及预警功能。
3.3.8.信息资源门户功能要求信息资源门户是业务人员查询数据中心数据的门户,门户内容包括信息资源浏览和查询,信息资源申请,标准规范发布和信息资源统计等。
1)信息资源查询:系统支持多种信息资源查询方式,可通过目录关键字查找数据项、分类标签、部门名称、资源名称等属性中包含某个特定词或词组的数据主题资源。
2)信息资源申请:系统需提供信息资源申请及应用的工作流,实现信息资源共享交换权限管理。
3)标准规范发布:可以通过信息资源门户,向各部门、地市发布最新的各类标准规范,提供下载和在线查阅功能。
4)资源情况统计分析:对数据中心的数据从多个维度进行统计分析,并在信息资源门户中以直观、丰富的展现形式进行显示。
3.3.9.数据安全管理功能要求本项目要建立保证数据在平台流转过程中安全性的管理系统,包括对数据的传输、存储和访问安全控制,对数据进行集中备份和异地备份。
1)平台访问安全:系统需提供健全平台访问及授权机制,保证平台以及所使用的数据库用户拥有最少的权限,防止数据库受到SQL注入式攻击。
2)数据库传输安全:确保数据在用户端应用程序和数据源之间传输过程中的安全性,对于敏感信息、涉密信息需要加强密级。
3)数据库加密传输:系统需对必要系统数据和业务数据进行加密存储,从而保证即使是数据管理员也无法直接读取重要信息。