当前位置:文档之家› 基于时空大数据、云计算的智慧城市解决方案最新PPT

基于时空大数据、云计算的智慧城市解决方案最新PPT

所以认为“大数据”是 数据、技术和应用的统一体
7
8
大数据方法与传统方法的对比
9
大数据可视化分析
? 大数据的可视化和绘制主要是基于并行算法设计的,能合理利 用有限的计算资源,高效地处理和分析特定数据集的特性
? 可视化通常会结合多分辨率表示方法,以获得足够的互动性能
10
二、时空数据
? 世界的哲学定义:时空及有无的划分匡定为世界 ? 大数据无处不在,它是现实世界到信息世界的映射,是
17
三、块数据 - 概念
? “条数据”:为在某个行业和领域呈链条状串起来的数据。 但这些数据被困在一个个孤立的条上,相互之间却不能连 接起来。如城市各委、办、局独立管理的数据。行业的 “ 一张图”(如国土一张图)也是条数据
? 条数据的特征: 1 领域单一 2 数据封闭 3 数据垄断 4 源自事务流
11
时空数据
? 时空数据也是现实世界到信息世界的映射,是对现实 世界的采样
? 时空数据往往是多维的,既有空间,也有时间 ? 时间决定了时空数据的现势性及演变过程 ? 空间决定了时空数据的位置空间属性和关系属性,包
括时空关系
? 文献指出世界上80%的数据与空间有关,实际上世界上几乎 100%的信息都与时空关联,因为世界就是时空
基于时空大数据、云计算的智慧城市 解决方案
1
报告提纲
1 大数据 2 时空数据 块数据
3
4 云计算 5 智慧城市
2
一、大数据
3
时代变迁 - 大数据时代
? 机械化时代:以蒸汽机、内燃机的发明为驱动,释放化学能替代肌肉的
能 量,用机械力解放了人力畜力,引发了工业革命,引起了社会变革,
改善 了人们生活。
ቤተ መጻሕፍቲ ባይዱ
人们 的生产和生活方式。
? 大数据时代??:分布式存储、移动计算、深度学习。更广的数据采集
, 更细的数据加工,使得数据应用革命性地繁荣。机器自动产生大量的
数据
4
大数据特征( 4V)
1. Volume:海量的数据规模,PB ~ EB 2. Velocity:快速的数据流转和数据处理体系 3. Variety:多样的数据类型:结构化、半结构化、非结构化 4. Value:价值密度低,商业价值高
? 研究结构化、非结构化、半结构化、流化数据的一体 化存储和组织模型,重点突破三大数据库:多维数据 库、全媒体数据库和位置数据库
? 解决基于大规模文件和基于数据库的统一存储管理 问题
? 解决基于时间的块数据存储组织和快速检索问题
15
跨结构一体化时空大数据存储模型
报表 数据
矢量 数据
三维 模型
影像 数据
? 世界上85%的数据是半结构化和非结构化的
12
时空数据的 4V特征
? 数据类型:
?多维数据:真三维模型、实景影像、BIM、点云 ???媒位物体置联数数网据据数据::视L:B频各S轨图类迹像传数、感据影器、音实室多时内媒数地体据图、…半/非结构化数据
? 时空数据具备的4V特征:
?Volume:遥感、街景、视频、BIM、位置等数据规模达PB ~ EB ?Velocity:LBS、BIM、遥感、实时传感信息需要快速流转和处理 ?Variety:矢量、栅格、多媒体、BIM、LBS等数据类型多样 ?Value:海量实景数据中蕴含极高的应用价值
13
时空大数据管理采用混搭架构
? 包括:设计标准、系统体系 结构、存储架构、查询处理 架构、弹性扩展架构、安全 访问控制体系等
? 文件底层与分布式文件系统 (如HDFS)结合,研究虚 拟块数据管理容器
? MPP与云计算平台(如 Hadoop)结合,研究块数据 并行分布式查询处理架构
14
跨结构一体化时空大数据存储模型
对现实世界的采样 ? 无论是现实世界,还是信息世界,其实质是世界
? 世:往世、现世、来世,指的都是时间,一维的时间 ? 界:物体的边界、位置,也就是多维的空间
? 狭义上:时间 + 空间 = 世界
宇宙也可以理解为时空:
宇宙是“时间无尽永前、空间无界永在、质量无限永有”的存在 。 宇宙O={→T=∞;S(x,y,z)=∞;M=∞ }
医教交安生国规 疗育通全产土划
18
块数据
? “块数据”:狭义上,块数据是一个物理空间或者行政区域 内形成的涉及人、事、物的各类数据的总和。广义上则是有 关块的数据、技术和应用的统一体
? 结构化数据:可描述为二维表格的数据,用SQL管理 ? 半结构化数据:非关系描述的其他结构化数据,如XML、
HTML、EML等
? 非结构化数据:如图片、音频、视频等
5
大数据内涵
大数据仅是 数据本身吗? ,或称巨量资料,指的是所涉及的资料量规模巨大到 无法通过目前主流软件工具,在合理时间内达到撷取、管理、处理、并 整理成为帮助企业经营决策更积极目的的 资讯。
街景 影像
地名 地址
视频 监控
16
16
BigGeoSQL 分布式并行查询处理
? 融合GeoSQL + NewSQL + 云计算平台,研究实现 BigGeoSQL并行查询处理引擎
? 同时支持实时计算和批处理计算 ? 支持时空数据融合查询优化与处理 ? 实现高效的时空数据序列运算能力
BigGeoSQL = BigSQL + GeoSQL
2 维基百科:
大数据,或称巨量数据、海量数据、大资料,指的是所涉及的数据量 规 模巨大到无法通过人工,在合理时间内达到截取、管理、处理、并 整理 成为人类所能解读的信息。
6
大数据内涵
狭义上,大数据仅是 资讯、信息而已 但其内涵涉及到 流转、管理、处理、应用等
1从对象角度看,大数据是大小超出典型数据库软件采 集 、储存、管理和分析等能力的数据集合 2从技术角度看,大数据技术是从各种类型的大数据中, 快 速获得有价值信息的技术及其集成 3从应用角度看,大数据是对特定的大数据集合、集成 应 用大数据技术、获得有价值信息的行为
? 电气化时代:以发电技术、输电技术、电器技术的发明为驱动,释放了
能 量的空间限制,让能量能高速高效地聚集和转移,让机械化应用从工
厂转 移到了千家万户。
? 信息化时代:以计算机技术的发明为驱动,让信息和知识能高效、高速传
输和传播,信息 /知识成了社会的主要财富,信息 /知识流成了社会发展
的 主要动力,让产业结构正在实现制造经济向信息经济的转化,改变了
相关主题