(ENU/DEU) St = Saint (FRA)
Camera = manufacturer, mega
pixels, zoom, and color
Woodd=wood=wud Paper weight:
100g i.s.o. 100kg
识别和消除 重复数据
Haidong Song = 宋海东=
一致性: 数据C是on格si式ste正n确cy并: 完整，
In但co不rre符ct合F业orm务a逻t 辑
值域划分: 界定数值范围
准关确联性性: : 须利识用别其记他录数关据系来 验证其准确程度
完整性 COMPLETENESS
合法性 CONFORMITY
一致性 CONSISTENCY
重复性
关联性
DUPLICATION INTEGRITY
1
Master Data Records
100%
Completeness KPI%
Accuracy KPI%
Non Duplicate KPI%
Non Obsolete KPI%
Equipment attrib
共同参与数据质量工作
数据经理 业务主管
数据 管理人员
记分卡 基于WEB 客户端
1. 分析
IT 开发人员
5. 数据质量报告与 跟踪
数据质量
4. 部署数据质量计 划
2. 确定数据质量规则 和目标
3. 制定质量提高计划
使用Analyst对数据进行全方位的剖析
Data Steward
Master Data Quality KPI%
Incompleteor duplicateor ObsoleteorInconsistnetrecords MasterDataRecords- Incompleteor duplicateor ObsoleteorInconsistnetrecords InaccuracyRatio
使业务人员参与数据分析工作，提高生产力和工作效率，降低IT 人员的依赖性
使用Developer开发具体任务
图形化界面，功能强大，操作简单
流间分析
在处理流程中任意位置进行分析
剖析数据源
剖析处理单元
剖析规则
量化质量，跟踪监控
基于web的积分卡便于共享
基于Web格式的记分卡 是你能够:
查看和共享数据质量记分卡 下钻到具体数据
Account
Account Zone
Services
主数据管理的不同实现路径
Байду номын сангаас
平台级 MDM
客户
产品
COA
根据客户的特 有需求进行配 置，使用不同
客户需求
• 灵活的数据模型 • 可定制的业务逻辑和工作流程 • 可配置的用户界面/接口
COA Product Customer
应用级 MDM
预置的应用以 解决特定的主
制定策略，降低对业务的影响
数据主管 业务经理
简单易用，不需要任何专业技术
Data Quality 可提供每个实体对象记分卡及监控
纳税人 税金 发票 出口退税
规则
DQA - 业务人员可手工管理不良数据
案例 Data Quality Framework
KPI Calculation And Aggregation Model (CAAM)
Acct Rep MDM Account
数据服务
Customer Product
DI/DQ
决策支持
DW
人力资源
数据管理
Account Organization
Sales Rep
Partner Organization
Product
Account Pricing
Product Organization
1
MasterDataRecords
100%
Material Data Quality KPI%
Customer Data Quality KPI%
Vendor Data Quality KPI%
Employee Data Quality KPI%
Incomplete or duplicate or Obsolete or Inconsiste nt records Master Data Records - Incomplete or duplicate or Obsolete or Inconsiste nt records Inaccuracy Ratio
数据探索
2
数据探索 Data Profiling
关键需求:
• 发现和记录数据中的所有异常
• 将问题进行分类（完备性、遵从性 、一致性、准确性、唯一性、依赖 性）
产品支持: •Informatica Data Profile
数据清洗
3
数据清洗 Data Quality
产品支持: •Informatica Data Quality
Merrill Lynch, Deutsche Bank, Johnson & Johnson, Pfizer, Apple, Kodak, Cadbury, …
跨越多行业的客户解决方案 (25+ solutions)
部署情况
大量案例证明在多域主数据部署的 能力
快速部署 平均上线时间: 3-9 个月 最具伸缩性解决方案 最大 450M 主
Account
Account Zone
Services
客户、产品、服务、供应商、机构、资源等组成 完整的 360度主数据视图
完整的主数据视图
不同主数据是业务的 不同视角：
• 客户角度 • 产品、服务 • 机构 • 资源
• 产品角度 • 客户 • 资源 • 机构
• 供应商角度 • 产品
• 机构角度 • 产品 • 客户 • 资源
记录数的成功案例
可验证的多域主数据 几乎一半的客 户都在统一平台上部署了客户和产品域
平台需要的能力
5
数据发布
为应用和数据仓库交付可信的数 据
4
数据管理
管理统一、可信、真实的主数据
3
数据清洗
数据清洗和标准化
2
数据探索
剖析、发现数据内容、一致性、数据结构
1
数据获取
从不同的应用和数据源访问、获取数据
ESB
1
数据集成 Data Integration
关键需求: • 在任意的源和目标数据之间进行数
据访问和发布 • 各种数据格式，各种地方 • 不同的延迟需求 (批量, 实时, 消息队列) • 高性能和高可用 • 支持不同MDM部署风格 • 元数据可视化
产品支持: •Informatica PowerCenter •Informatica PowerExchange •Informatica B2B Exchange
• 客户: 超过5,000家
• 客户遍布全球82个国家 • 直接客户遍布全球28个国家 • 客户忠诚度排名位居榜首
（已连续7年获此殊荣）
Informatica 产品定位
外部数据 云计算
套装应用
非结构化数据
业务系统
ERP
CRM
PLM
财务
办公
网站
•任意格式 •任意数据源
•任意延时 •任意模式
2. 数据审计与发现
数据问题 (customer,
product, financial)
• 预定义数据模型
• 预定义的业务逻辑和工作流程
• 预定义的用户界面/接口
• 解决不同领域业务问题
• 可用统一的平台扩展到解决其他业务问 题和领域
• 解决特定领域的业务问题 • 扩展到其他业务领域需要购买新的应用
Informatica MDM 简介
2 products in different languages are in fact
the same item
数据丰富
增加附加的属性 和分类
Haidong Song: “single, 1 child, Summit Estate,
DoNot Mail”
Diving watch with Watch attrib and Diving
•AddressDoctor
关键需求: • 数据清洗 • 数据丰富 • 地址标准化 • 数据监控和报告 • 基于SOA 访问DQ规则 • 根据条件的格式 • 校验规则 • 数据变化，去噪，转换 • 开放式清洗架构
数据质量问题实例
Du重pli复ca性tio: n: Fuz模zy糊m匹at配ching 完整合性法: 性: 丢失关非键法数格值式
报表 数据挖掘
8. 元数据管理
(操作型, 技术型, 业务层)
归档
内容提要
• 从公司治理到主数据管理 • 主数据平台解决方案 • Informatica 案例分享
集团企业数据利用的发展与挑战
• 不同的系统管理各种业
务流程
• 走向精细化协同管理
投资管理
• 利用数据仓库汇集数据
• 但是企业内外协同受信
息流现状的制约
• 面临的问题
• 数据标准
• 数据质量 • 管控流程 • ……
Account Organization
Sales Rep
客户服务
Partner Organization
Product
财务管理
决策支持 人力资源
企业数据仓库
企业数据集成
集团
产业 集团
Account Pricing
Product Organization
技术。
CRM System