当前位置:文档之家› 大数据智能分析系统详细设计

大数据智能分析系统详细设计


备份备份
OLAP
…资源数据
信息生命周期管理&ETL调度
数据质量管理 元数据管理
数据质量Logging库 元数据库(MDR)
管理应用
空间数据库
WebService/FTP 服务
接口层扩展数据库
接口层扩展文件库
采集层 前置机标准接口服务
ETL系统逻辑架构
数据源
接口
流程控制
ETL 服务器
流程控制
流程控制
应用服务器
Web 组件接口
BI Platform: Linux Server
安全服务
调度和预警 发布和分发服
服务

系统管理服务
协作服务
审核服务
ETL Platform: Linux Server
作业
转换
任务调度 业务规则和指标 指标管理引擎 管理
内容库
数据仓库
在数据中心开辟单独的数据库实例空间,用于数据仓库的存放。
数据库
Intranet安全检查
相应的用户访问和存取权限检查
Web权限
用户必须是合法的Oracle用户 用户必须拥有数据库和视图的存取权限 对于关键数据的存取,如系统用户表,系统记录用户对 这些表的使用情况
用户Intranet 中间信息服务系统
Oracle Oracle审计跟踪
部署架构
Web服务器
Web 连接器
业务库
****
总体架构

功能架构


数据架构
分 析
技术架构

ETL架构

安全架构
部署架构
目录
E BI
T
L GIS
总体架构
功能架构设计
WebGIS服务
基于GIS的安全监控、经济运行、综合监控
安全监控
经济运行
重点监管
防灾应急
安全生产状况 动态评估
综合数据可视 化分析
安全隐患预测 预警预防
7系统 8管理系统 9管理系统
10 11水管理系统 12管理系统
13系统 14门户平台
应用层
安全监控
经济运行
重点监管
防灾应急
煤矿安全生产 状况动态评估
综合数据 可视化分析
安全隐患 预测预警预防
政府监管重点 目标集聚分析
事故应急 救援辅助决策
组件/中
业务
间件层
组件
HTTP/FTP组件 OCX XML
应用 中间件
J2EE平台,支持EJB、JDBC、JMS、 JNDI等
GIS 中间件
ETL数据抽取与BI分析服务
ODS
EDW
操作数据存储
企业数据仓库
临时数据层
接口文件交换 平台
细节数据层 汇总数据层
应用集市层
数据汇总装载
数据集市
数据仓库应用 平面报表 交互报表 ……报表
GIS服务 WEB GIS服 GIS服务引擎
政府监管重点 目标集聚分析
事故应急救援 辅助决策
政府行业监管大数据决策支持
* Cognos BI服务
数据架构设计
生命周期维
日期维
智能分析数据仓库
信 息
经济运行数据集市

报表数据
统计数据
查询数据


维表数据
热点数据
……


安全生产数据集市
专题信息
门户信息
风险知识
排名信息
预测知识
……
数据仓库
综合业务相关数据
经济运行 相关数据
安全生产 相关数据
企业 相关数据

综合业务相关数据
安全监控系统
各业务系统操作数据
调度管理系统
执法政务系统
领导带班系统

元数据 模型 路径 规则
……
主数据 机构 部门 人员 用户 煤矿 ……
技术架构设计
综合信息门户平台
ETL直连DB
1监管系统 2管理系统 3管理系统 4填报系统 5报表系统 6管理系统
数据仓库
安全监 控
经济运 行
行政执 法

0.抽取 接口 文件
抽取
1.FTP传输
FTP传输 接口 服务器1 数据装载
抽取
2.数据装载
临时区 3清洗转换
细节数据层
4.数据汇总 5.集市数据
生成 汇总数据层
5.集市数据生成
抽取
应用集市层
6.Cube数据生成
应用
OLAP
数据挖掘
WebGIS
报表
安全架构
业务用户 用户界面
相关主题