应用系统
挖掘区 部门特色需求数据
部 门 快 报 专 题 分 析 临 时 统 计 差 异 统 计 其 他 需 求
业务应用数据
对 公 绩 效
数据服务区 公 准
客 户 升 级 营 销 平 台
对
精
S A S 直 连
对公CRM
对公绩效
O 源 D 系 S 统 平 台
汇总区
余额汇总
指标区
交易汇总 账户数指标
产品汇总
项目目标
功能范围 银行对公客户信息整合 简述 包括客户基本信息、客户产品信息、客户销售信息、客户价 值信息等，建立统一完整的客户360视图 配合对公条线各部门基于产品营销的需求，建设一套以产品 归口管理部门划分的产品目录树 各个业务单元和对公管理系统使用数据源统一由对公数据集 市提供（本期为精准营销平台，对公报表提供数据支持）
核心
信贷Biblioteka 国结信用卡网银基金代销
核心
信贷
国结
信用卡
网银
基金代销
....
• 为ETL方便设计的专用层，可加载 增量或全量数据 • 在此层完成数据同构化 • 数据原样加载，保持与源结构一致 • 一般按照业务系统进行命名识别 • 可保留部分最近数据以供重新加载
12
数据集市
• • 从前面一般银行数据仓库的架构可以看出，数据集市是数据仓库的一个子集 ，是为特定的分析应用而建设的。 数据集市根据所处位置的不同分以下几类：
实 时 数 据 服 务
直连
对公绩效
︶
……
PDM
︵ 落 地 文 件 ︶
ETL
对公客户 升级
对公报表
明细区
补录
批 量 数 据 服 务
精准营销 平台
SAS
第三方
历史归档
数据标准 管理
数据质量 管理
交易系统 点对点 文件传输
集市数据架构
数据服务区
报表数据
固 定 报 表 多 维 报 表 管 理 驾 驶 仓 对 公 C R M
汇总层
•相对通用，具业务意 义的初加工数据； •作为上层应用数据加 工的基础，或供业务人 员直接访问； •提炼应用需求共性 •多种数据粒度 •易于理解和使用 •初步数据加工； •分层设计；
应用集市层
服务特定应用
原则
•面向具体应用 •按需设计
形式
•形式各异，依具 体应用不同；
重点
•理解源结构
•主题定义 •框架设计 •整合策略 •实施方法
目录
01 02 03 04 05 06 07
项目背景
为更好的贯彻最佳银行战略，做好公司业务客户管理和营销工作，进一 步巩固和发挥平安银行业务优势实现公司银行的战略目标。 为适应平安银行对公业务管理需要，为支持最新的对公业务管理工作方 针，为配合、推进平安集团综合金融的战略要求；必须实现银行对公客户信 息整合，形成对公数据集市,通过整合客户的数据信息，进一步挖掘客户的价 值信息，更好的支持公司业务客户营销、管理分析工作的开展。挖掘客户的 潜在需求，为我行制定个人业务发展战略、产品创新、客户服务的准确定位 提供了良好的、科学的分析依据。同时，为战略客户的营销和管理提供依据 ，通过客户信息的整合，客户经理及各层级管理领导、各分支行机构能全方 位的360度的了解公司客户过去及现状的全貌，能第一时间了解客户的营销 意向，能清晰的知道客户给我行带来的价值，以日常工作平台为高效的沟通 管理工具，对重点项目、销售机会和营销活动等营销服务管理的资源共享和 工作协同，实现银行E化营销销售流程管理，并带来新的客户服务体系、科 学的市场营销策略、更低的营销和服务成本、更高的客户保留率、优化的银 行市场价值链条、以及增加银行业务量、提高商业银行核心竞争能力，实现 公司银行的战略目标。
操作系统
修改 查询
数据仓库
载入 增加 删除
访问
随时间变化
• • 操作系统一般只会保留数据的最新记录。 数据仓库需要保留各个历史时点的数据，已便于对数据在时间维度上进行分 析、挖掘。
操作系统
数据仓库
时间期限：近三个月 记录更新 日期戳可有可无
时间期限：5~10年 复杂的快照数据 时间维度
数据仓库的两种建设方式
• • 自顶向下：先建设数据仓库，再建设数据集市 自底向上：先独立建设数据集市，在统一维度总线的基础上合成数据仓库
自顶向下
对公集市 零售集市
自底向上
…
风险集市
数据仓库
对公集市 零售集市
统一维 度总线
风险集市
…
数据仓库
核心
信贷
…
国结
核心
信贷
…
国结
一般银行业数据平台架构
数据架构中的关注点（五个维度）
面向主题
• • 操作系统是面向事务处理的。事务处理关注的是整个事务操作流程，即操作 系统是围绕事务操作流程来组织数据的。 数据仓库是面向主题的。主题是管理人员分析问题的重点。面向主题就是所 有的数据都是根据主题来组织的。即数据仓库的数据都是围绕分析的重点来 进行组织数据的。 面向主题
操作系统 票据 数据仓库 客户
•灵活查询 •整合规则检查
•应用筛选 •应用提炼
•整体性 •一致性
用途
•业务原貌查询 •即时报表 •数据质量检查
•常规报表 •灵活查询 •业务规则检查
•特定应用
数据架构之EDW
上报数据 报表数据 查询数据 指标数据 挖掘数据 参数数据
数据平台
EDW
管理会计 数据集市 风险管理 数据集市 数据集市（DM） 客户关系 财务管理 数据集市 数据集市 LDM汇总数据 经营管理 数据集市 其他业务 数据集市 • • • • • 面向应用，按需定制 可分为内部集市和外部集市 可通过反范式提高响应性能 可为汇总层提供扩充依据 视情况保留较长历史
客户 A：A1 性别 男：M 机构 O：O1 客户 A：A2 性别 男：0 机构 O：O2
数据仓库 MAPPING
客户 A：A 性别 男：M 机构 O：O
国结
客户 A：A3 性别 男：1 机构 O：O3
…
非易失
• • 操作系统是实时、事务级的更新和小数据明细的查询。 数据仓库是定期、批量更新和大数据汇总查询的。由于数据仓库一般并不会 更新历史数据，所以数据仓库是非易失的。
账户汇总
产品汇总
渠道汇总
整合数据层（LDM）
交易汇总
客户汇总
• 供统一的业务口径 • 避免集市的重复加工 • 随着应用建设逐步完善 • 业务统计口径变化，ETL会随之变化 • 视情况保留较长历史 • • • • • 面向整合 主题设计 标准化数据 3NF设计 保留较长历史
协议
团体
事件
账务
产品
渠道
数据缓冲层（FDM）
缓冲层
目标 •服务数据加载； •直接提供基于源系 统结构的简单原貌 访问； •简单处理，不考虑 整合； •关注保留策略； •偏源系统模型； •少量数据保留短暂 历史； •部分数据保留全量
基础层
•长期的，细节的，整合 的数据存储； •为BI环境中的各类业务需 求提供支持 •面向全局，数据整合 •中性设计，灵活扩展 •提供规范和共享 •面向主题设计； •偏范式化； •长期保留历史；
信用证
协议
贷款
产品
集成
• • 集成是数据仓库最重要的特性。 集成并不是简单的把数据聚合在一起，还要消除数据的不一致性。由于数据 仓库是面向主题的，一个主题下可以包含多个源系统的数据，只有统一各个 源系统不同的编码，才能在同一个主题下汇总、分析数据，从而消除不同系 统间的信息孤岛问题。 操作系统 核心 信贷
集市数据加工流程
目录
01 02 03 04 05 06 07
1. 集市功能介绍 2. 生命周期管理 3. 调度批次介绍
对公数据大集中（集成21个对公系统数据）
序号
1 2 3 4 5 6 7 8 核心系统 信贷系统 票据系统 国际结算系统 基金与理财系统 保理系统 黄金系统
系统
业务数据
客户基本信息、账户信息、国内保函信息、现金管理信息、存款信息、贷款信息、传票信息、 机构信息、科目信息、（还款利息）、欠息等 客户基本信息、授信业务品种信息、授信审批信息、授信合同信息、授信借据信息、抵押物信 息、担保物信息、其他重要信息等 客户基本信息、承兑汇票信息、票据贴现信息、开票申请信息等 客户基本信息、国内信用证信息、进口信用证信息、进口保函信息、汇入汇出信息、托收（跟 单、光票）信息、外汇买卖信息、传票数据等 客户基本信息、客户签约信息、基金交易信息、理财交易信息、基金余额信息、理财余额信息 客户基本信息、保理产品信息、保理交易信息、保理余额信息、发票信息 客户基本信息、签约信息、黄金产品信息、现货交易信息、延期交易信息、库存信息。
产品基本信息 产品账户映射
交易 主题
交易整合信息 交易对手信息
明细数据区
财务主题
各系统账务信息
精准营销 平台
银行组织
银行机构信息 银行员工信息
公共信息
公共维度信息
附属信息
其他附加信息
SAS
数据标准管理 数据质量管理
集市物理架构
对公数据集市环境配置： 生产环境：2台 IBM P720 8C 32G 1T 存储 IP： 10.1.39.224、10.1.39.225
其他汇总
汇总区 客户标志
贡献度汇总
客户扁平化
资产类指标
利率类指标
指标区 负债类指标
其他指标
客户数指标
交易量指标
收支类指标
对公客户 升级
明细区
客户主题
客户基本信息 客户映射关系 客户联系信息
对公报表 客户权益
客户收益信息 客户风险信息 客户分层标准