智慧银行大数据分析综合服务平台建设方案20191215001

1

智慧银行大数据分析综合服务平台建设方案

智慧银行大数据分析综合服务平台建设方案20191215001

2

目 录

第1章 项目概述 ......................................................................................................................... 13

1.1、 建设背景 ....................................................................................................................................... 13

1.2、 建设目标 ....................................................................................................................................... 13

1.2.1、 总体目标 ....................................................................................................................................... 13

1.2.2、 分阶段建设目标 ......................................................................................................................... 14

1.3、 相关系统联动对接 .................................................................................................................... 15

1.3.1、 数据分析综合服务平台 ........................................................................................................... 15

1.3.2、 量收系统 ....................................................................................................................................... 16

1.3.3、 金融大数据平台 ......................................................................................................................... 16

1.3.4、 各生产系统 .................................................................................................................................. 17

1.3.5、 CRM................................................................................................................................................... 17

第2章 业务需求分析 ................................................................................................................. 17

2.1、 总体需求 ....................................................................................................................................... 17

2.2、 数据管理 ....................................................................................................................................... 19

2.2.1、 数据采集 ....................................................................................................................................... 20

2.2.2、 数据交换 ....................................................................................................................................... 20

2.2.3、 数据存储与管理 ......................................................................................................................... 21

2.2.4、 数据加工清洗 .............................................................................................................................. 22

2.2.5、 数据查询计算 .............................................................................................................................. 22

2.3、 数据管控 ....................................................................................................................................... 23

2.4、 数据分析与挖掘 ......................................................................................................................... 24

2.5、 数据展现 ....................................................................................................................................... 25 智慧银行大数据分析综合服务平台建设方案20191215001

3

2.6、 量收系统功能迁移 .................................................................................................................... 26

第3章 系统架构设计 ................................................................................................................. 27

3.1、 总体设计目标 .............................................................................................................................. 27

3.2、 总体设计原则 .............................................................................................................................. 27

3.3、 系统总体架构设计 .................................................................................................................... 29

3.3.1、 总体技术框架 .............................................................................................................................. 29

3.3.2、 系统总体逻辑结构 .................................................................................................................... 34

3.3.3、 平台组件关系 .............................................................................................................................. 37

3.3.4、 系统接口设计 .............................................................................................................................. 44

3.3.5、 系统网络结构 .............................................................................................................................. 51

第4章 系统功能设计 ................................................................................................................. 54

4.1、 概述 ................................................................................................................................................ 54

4.2、 平台管理功能 .............................................................................................................................. 55

4.2.1、 多应用管理 .................................................................................................................................. 55

4.2.2、 多租户管理 .................................................................................................................................. 60

4.2.3、 统一运维监控 .............................................................................................................................. 61

4.2.4、 作业调度管理 .............................................................................................................................. 86

4.3、 数据管理 ....................................................................................................................................... 88

4.3.1、 数据管理框架 .............................................................................................................................. 88

4.3.2、 数据采集 ....................................................................................................................................... 91

4.3.3、 数据交换 ....................................................................................................................................... 95

4.3.4、 数据存储与管理 ......................................................................................................................... 97

4.3.5、 数据加工清洗 ............................................................................................................................ 123