数据分析与商务智能概述
• 知识发现的主要技术构成就是数据挖掘。
Knowledge Discovery in Database,KDD Data Mining,DM
商务智能的2个层次
历史数据
预测数据
?
加入智能挖掘算法的系统功能 ——最后一个框中应该有多少个三角形?
商务智能的2个层次
• 例如,通过对销售数据的分析,发现一条 关联规则:
商务工具的变迁
• 伴随着商务工具的变迁,人们处理信息的 能力在工具的帮助下变得越来越强大,信 息量的增长也越来越快。
– 电报 – 电话 – 传真机 – 计算机 – 互联网
商务工具的变迁
• 在20世纪初,或者即使到了20世纪中叶,没有一 个公司的账目、订货记录和文件柜的数据总和能 超过几十个百万字节(megabytes)。
– 一个工具
• Business Intelligence Development Studio
SQL Server 2005的商务智能构架
服务
作用
商务 智能 应用
Business Intelligence Development Studio
集成 (SSIS)
分析 (SSAS)
报表 (SSRS)
谢谢大家!
•
生活中的辛苦阻挠不了我对生活的热 爱。20.12.1120.12.11Friday, December 11, 2020
•
人生得意须尽欢,莫使金樽空对月。09:54:1309:54:1309:5412/11/2020 9:54:13 AM
•
做一枚螺丝钉,那里需要那里上。20. 12.1109 :54:130 9:54De c-2011 -Dec-2 0
• 如果将知识用在辅助企业经营管理决策中, 那么这种智慧就可以称为商业智慧,也就 是商业智能,或者叫商务智能。
Business Intelligence, BI
商务智能的2个层次
• 第1个层次:在整合系统数据的基础上提供 灵活的前端展现。
– 例如,通过直方图等形式表现来自销售管理系 统的地区销售情况报表。
•
日复一日的努力只为成就美好的明天 。09:54:1309:54:1309:54Friday, December 11, 2020
数
据
复制服务
库
全文检索服务
管
服务代理
数据库引擎
理 通知服务 部
分
报告
整合 服务
分析
商 业 智
能
服务
服务
应
用
部
分
SQL Server 2005的商务智能构架
• SQL Server 2005的商务智能
– 三大服务
• SQL Server 2005 Analysis Services (SSAS) • SQL Server 2005 Integration Services (SSIS) • SQL Server 2005 Reporting Services (SSRS)
商务智能的2个层次
经过数据整合的BI系统功能 ——现在有多少个三角形? 数据仓库 Data Warehouse, DW 联机分析处理 On-Line Analytical Processing, OLAP
商务智能的2个层次
• 第2个层次:数据库中的知识发现。
– 数据库的爆炸性增长已远远超出了能够解释和 消化这些数据的能力,需要新一代的工具和技 术对数据库进行自动和智能地分析。这些工具 和技术正是知识发现。
–决策所需的历史数据量很大,而传统的数据库 一般只存储短期数据。
–辅助决策的信息涉及许多部门的数据,而不同 系统的数据难以集成。
–由于访问数据库的能力不足,它对大量数据的 访问性能明显下降。
如何将数以百万计的网络文件、电话记录、销售 细目文件记录变成可利用的信息和知识?
企业信息系统的进化
管理信息系统和企业资源计划系统
数据抽取 数据整合
从各种异构数据 源中整合BI需要 的数据,同时可 以实现与商务流 程统一
OLAP 数据挖掘
为已有数据建立 模型,并且经分 析后找出数据的 内部关系
自定义报表 数据展现
对分析结果提供 类型多样、美观 且适合不同需求 的图表和报表
Question?
•
树立质量法制观念、提高全员质量意 识。20.12.1120.12.11Friday, December 11, 2020
数据
过滤
文档资料
转载
数据源
ETL过程
数据集市 数据仓库 数据集市
数据集市
数据仓库及其应用
数据挖掘
前
端
OLAP
展 现
工
具
数据报表
BI前端展现
商务智能的结构描述
• 商务智能系统工作过程的技术抽象
– 源数据层 – 数据转换层 – 数据仓库(数据集市)层 – OLAP – 数据挖掘层 – 用户展现层
商务智能的结构描述
技术. 机械工业出版社. 4.(美)谭,(美)斯坦巴赫 著, 范明 等译, 数据挖掘
导论. 人民邮电出版社. 5.(美)贝里,(美)利诺夫 著, 袁卫 等译. 数据挖
掘——客户关系管理的科学与艺术. 中国财经出版 社.
软件
主要软件参考书
案例
• 1. 电信公司的数据仓库建设 • 2. Data mining for decision support on
•
安全在于心细,事故出在麻痹。20.12.1120.12.1109:54:1309:54:13December 11, 2020
•
踏实肯干,努力奋斗。2020年12月11日上午9时54分 20.12.1120.12.11
•
追求至善凭技术开拓市场,凭管理增 创效益 ,凭服 务树立 形象。2020年12月11日星期 五上午9时54分 13秒09:54:1320.12.11
•
一马当先,全员举绩,梅开二度,业 绩保底 。20.12.1120.12.1109:5409:54:1309:54:13Dec-20
•
牢记安全之责,善谋安全之策,力务 安全之 实。2020年12月11日 星期五9时54分 13秒Fr iday, December 11, 2020
•
相信相信得力量。20.12.112020年12月 11日星 期五9时54分13秒20.12.11
– 每个邮件在递送过程中都要对条形码进行多次扫描; – 统计控制过程通过成千上万个传感器不断读取和记录
生产过程数据; – 电话系统要跟踪每一个电话的开始时间、持续时间和
网络路线等; – 顾客在网络上的每一次链接及看过的每一件商品都被
记录下来。
商务工具的变迁
• 今天,最大的公司数据库容量是用万亿字节 (terabytes)来计量的。
数据分析与商务智能
管理科学与工程系 安利平
教学内容
• 数据分析与商务智能概述 • 数据仓库与OLAP基础 • 数据仓库的设计与OLAP建模 • 数据挖掘的过程与算法
主要参考书
1. W H Inmon 著. 数据仓库. 机械工业出版社. 2. 林宇 编著. 数据仓库原理与实践. 人民邮电出版社. 3. Jiawei Han, Micheline Kamber著. 数据挖掘概念与
商务工具的变迁
• 利用现有的数据进行分析和推理,从而为 决策提供依据。
–谁是高价值的客户?谁将成为高价值客户? –什么产品可以交叉销售或提升销售? –公司明年的收入前景如何?
• 这种需求既要求联机服务,又涉及大量的 数据。
商务工具的变迁
• 传统的数据库技术已无法满足这种需求, 具体体现在以下三方面:
3. DMReview
过程
4. Gartner、IDC、IBM、SAP和MSTR
工具和技术集合
商务智能的结构描述
• 商务智能的实现包含了“数据信息知 识行动智慧”这一过程所运用的技术 和方法。
– 数据仓库 – 联机分析处理(OLAP) – 数据挖掘 – 模型库和方法库
外部数据
抽取 转换
清洗
业务系统
•
严格把控质量关,让生产更加有保障 。2020年12月 上午9时 54分20.12.1109:54December 11, 2020
•
作业标准记得牢,驾轻就熟除烦恼。2020年12月11日星期 五9时54分13秒 09:54:1311 December 2020
•
好的事情马上就会到来,一切都是最 好的安 排。上 午9时54分13秒 上午9时54分09:54:1320.12.11
百家争鸣、百花齐放的管理系统数据 ——共有多少个三角形?
商务智能系统
• 来自不同系统的大量数据中往往隐藏着重 要的规律和商业规则,这些是企业管理者 需要寻找的“金矿”。
商务智能系统
• 此“金矿”的挖掘过程就是“数据信息 知识智慧”的转化过程。
数据处理
数据
信息
信息分析
辅助决策
知识
智慧
商务智能系统
PowerStage
Warehouse Analyzer
SAS SPSS
InfoPump 第三方
PLATINUM ERWin PLATINUM InfoPump
DecisionBase InfoBeacon
Neugent Aion
Warehouse Administrator
SAS MDDB
Enterprise Miner
OLAP Server
Intelligent Insight&Qucik
Miner
view
Oracle
Oracle ETL Server
Enterprise Manager
Express Server