当前位置:文档之家› 云计算、大数据与智慧城市建设

云计算、大数据与智慧城市建设


速响应能力 应用、流程和信息作为服务 (SaaS) (行业应用, CRM, ERP, OA等) 平台作为服务 (PaaS) (优化的中间件 – 应用服务器、数据库服务器等 ) 基础架构作为服务 (IaaS) (虚拟的服务器、存储、网络 )
进一步理解PaaS
• PaaS(Platform as a service) :平台即服务。 • 所谓PaaS实际上是指将软件研发的平台(业务基础平台)作为一种服 务,以SaaS的模式提交给用户。因此,PaaS也是SaaS模式的一种应用 。但是,PaaS的出现可以加快SaaS的发展,尤其是加快SaaS应用的开 发速度。 • PaaS之所以能够推进SaaS的发展,主要在于它能够提供企业进行定制 化研发的中间件平台,同时涵盖数据库和应用服务器等。 • PaaS能将现有各种业务能力进行整合,具体可以归类为应用服务器、 业务能力接入、业务引擎、业务开放平台,向下根据业务能力需要测 算基础服务能力,通过IaaS提供的API调用硬件资源,向上提供业务调 度中心服务,实时监控平台的各种资源,并将这些资源通过API开放 给SaaS用户。
故障恢复
监视统计
资源池
计算资源池
存储资源池
网络资源池
数据资源池
软件资源池
物理资源
计算机
存储器
网络设施
数据库
软件
12
理解云计算

云计算(Cloud Computing)是能够提供动态资源池、虚拟化和高可用性的下一代计算 模式。如果把一个计算的资源,比如一台服务器,看成一个小水滴,当很多资源汇聚 在一起的时候,它就形成了计算的云,正如我们不关心水滴是怎么产生的,用户也不 需要关心计算资源位于哪台物理的服务器上。用户关心的是需要什么样的计算能力, 需要什么时刻拥有这些计算能力。云计算管理平台可以为用户提供“按需计算”服务 。 云计算的主要特点是分布式、虚拟化、动态的可扩展性、灵活性。云计算平台使用的 物理节点是分布的。每一个应用部署的环境和物理平台是没有关系的。通过虚拟平台 进行管理达到对应用进行扩展、进行迁移、进行备份,种种操作通过虚拟化层次完成 。通过动态的扩展虚拟化的层次达到对以上应用进行扩展的目的。可以把各种IT资源虚 拟化,放在云计算平台中统一管理。 云计算主要是针对现有的以及即将出现的大规模数据密集型工作负载,它将能够动态 地分配资源、调整负载。与传统以PC 为中心的计算不同,云计算把计算资源和数据资 源分布在大量的分布式计算机上,这使计算和存储获得很强的可扩展能力,并方便用 户通过多种接入方式,例如电脑、手机等方便地接入网络获得应用和服务。
• 通过用户行为分析实现精准营销是大数据的典型应用,但是大数据在各行 各业特别是公共服务领域具有广阔的应用前景
消费 行业
金融 服务
食品 安全
医疗 卫生
军事
交通 环保
电子 商务 气象
26
管理大数据“易”,理解大数据“难”
•目前大数据管理多从架构和并行等方面考虑,解 决高并发数据存取的性能要求及数据存储的横向扩 展,但对非结构化数据的内容理解仍缺乏实质性的 突破和进展,这是实现大数据资源化、知识化、普 适化的核心.
腾讯在天津投资建立亚洲最大的数据中心;也在投资建立大数据处理中心;新浪推出企业微博 产品,提供精准的数据分析服务。
17
什么是大数据
• 大数据(big data),或称巨量资料,指的是所涉及的资料量规模巨大到 无法透过目前主流软件工具,在合理时间内达到撷取XIEQU、管理、 处理、并整理成为帮助企业经营决策更积极目的的资讯。 • 大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程 优化能力的海量、高增长率和多样化的信息资产。 • 大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据 。适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据 挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩 展的存储系统。采用SOA的体系架构。 • 大数据当前的主流实现平台———并行数据库(分布式数据库)、 MapReduce及基于两者的混合架构. • MapReduce是一种编程模型,用于大规模数据集(大于1TB)的并行 运算。概念"Map(映射)"和"Reduce(化简)",和他们的主要思想 ,都是从函数式编程语言里借来的,还有从矢量编程语言里借来的特 性。 • 我们可以把MapReduce理解为,把一堆杂乱无章的数据按照某种特征 归纳起来,然后处理并得到最后的结果。 18
19
大数据的4V特性
非结构化数据的超大规模和增长
体量Volume
总数据量的80~90% 比结构化数据增长快10倍到50倍 是传统数据仓库的10倍到50倍 大数据的异构和多样性 很多不同形式(文本、图像、视频、机器数据) 无模式或者模式不明显 不连贯的语法或句义
多样性Variety
价值密度Value
8
云计算发展现状
• •
Amazon研发了弹性计算云EC2(Elastic Computing Cloud)和简单存储服务S3(Simple Storage Service)为企业提供计算和存储服务。 诞生两年时间,Amazon上的注册开发人员就多达44万人,其中包括为数众多的企业级用户。
Google搜索引擎建立在分布在30多个站点、超过200万台服务器构成的云计 算设施的支撑之上,这些设施的数量正在迅猛增长。Google的一系列成功应用, 包括Google地球、地图、Gmail、Docs等也同样使用了这些基础设施。目前, Google已经允许第三方在Google的云计算中通过Google App Engine运行大型并 行应用程序。Hadoop模仿了Google的实现机制。
大量的不相关信息 对未来趋势与模式的可预测分析 深度复杂分析(机器学习、人工智能Vs传统商务智能 (咨询、报告等)
实时分析而非批量式分析
速度Velocity
数据输入、处理与丢弃 立竿见影而非事后见效
大数据与云计算
21
大数据与云计算
• 云计算的模式是业务模式,本质是数据 处理技术。(肉体+灵魂) • 数据是资产,云为数据资产提供存储、 访问和计算。 • 盘活资产,使其为国家治理、企业决策 、个人生活服务,是大数据核心议题, 也是云计算的最终方向。
前瞻来看,随着互联网对网民的理解,网民对网络的反作用,互联网将变得越来越智能。它在满足你需 求的同时,也在创造新的需求。前者的代表是Google,后者的典型则是Facebook。 谷歌的盈利在于所有的软件应用都是在线的。用户在免费使用这些产品的同时,把个人的行为、喜好等 信息也免费的送给了Google。因此Google的产品线越丰富,他对用户的理解就越深入,他的广告就越精准。 广告的价值就越高。 这是正向的循环,谷歌通过好用的、免费的软件产品,换取对用户的理解;然后通过精准的广告,找到 生财之道。颠覆了微软卖软件拷贝赚钱的模式。成为互联网的巨擘。

云计算本质上是计算池
4
云计算的概念模型
5
云计算的类别
专 用
将软件作为服务 SaaS (Software as a Service)
如:Salesforce online CRM
将平台作为服务 PaaS (Platform as a Service)
如:Google App Engine
Microsoft Windows Azure
9
云计算发展现状
•IBM在2007年11月推出了“改变游戏规则”的“蓝云”计算平台,为客户带 来即买即用的云计算平台。 •IBM正在与17个欧洲组织合作开展名为RESERVOIR云计算项目,以“无障碍 的资源和服务虚拟化”为口号。欧盟提供了1.7亿欧元作为部分资金。 •2008年8月, IBM宣布将投资约4亿美元用于其设在北卡罗来纳州和日本东 京的云计算数据中心改造。IBM在2009年在10个国家投资3亿美元建13个云 计算中心。
10
云计算实现机制
11
云计算技术体系结构
SOA构建层
服务接口 服务注册 服务查找 服务访问 服务工作流
管理中间件
用户管理 帐号管理 用户环境配置 用户交互管理 使用计费 安 全 管 理 身份认证 访问授权 综合防护 安全审计
任务管理
映像部署和管理
任务调度
任务执行
生命期管理
资源管理
负载均衡
故障检测


13
讲解大纲
• 1. 云计算概述
• 2. 什么是大数据 • 3. 智慧城市建设思路
14
不知道BIG DATA? 你out了!
15
互联网越来越智能
Google精确掌握用户行为、获取需求
Facebook用户 产生内容,创造 需求。
Google分析用 户搜索信息,满 足用户需求 雅虎提供静态的 导航信息
云计算、大数据与智慧城市建设
1
——引领城市信息化新发展
中国联通青海省分公司 2012.08
2
讲解大纲
• 1. 云计算概述
• 2. 什么是大数据 • 3. 智慧城市建设思路
3
云计算(cloud computing)定义
• 维基百科 “云计算,是这样一种计算方式,计算资源是动态易扩展而且虚拟化的,往往通过互 联网提供。用户不需要了解‘云’中基础设施的细节,不必具有相puting )、分布式计算(Distributed Computing)、并行 计算(Parallel Computing)、效用计算(Utility Computing)、网络存储(Network Storage Technologies) 、虚拟化(Virtualization)、负载均衡(Load Balance)等传统计 算机技术和网络技术发展融合的产物。 云计算是一种商业计算模型。它将计算任务分布在大量计算机构成的资源池上,使 各种应用系统能够根据需要获取计算力、存储空间和信息服务。
相关主题