紫光云计算机产品介绍
• 每台节点出厂预装
• 由用户选择的角色定义需要 启动的服务
目录
紫光云计算机简介 虚拟化模块 云存储模块 大数据模块 快速部署模块 功能特点 应用案例
虚拟化模块 UVM
应用 OS 计算设备 存储设备 网络设备
虚 拟 机
管理平台 资源池 硬件服务器 UNIS Virtualization Module
UVM – 解决的问题
• 硬件庞大,利用率低
• 故障率高,运维负担过重 • 扩展性差,难以适应新技术、新需求
• 建设周期长、单项投资大、资源浪费严重
• 难以适应业务动态调整
UVM – 功能
物理资源管理
- 添加删除资源池 - 添加删除物理机
监控告警
- 物理机资源及网络状态 - 虚拟机资源及网络状态 - 共享存储
云存储特点
传统存储构架不能动态调配,需要对不同的存储结构分别管理,且 底层数据库不可互通;云存储打通底层数据库,可按照需求,划分和调 整SAN、NAS和面向对象存储的空间大小,分配资源如同倒水般容易。
紫云1000
UCSM +Hypervisor
UCSM +Hypervisor
场景:对即时性要求高, 支持海量小文件的存储的 应用
UQDM – 功能特点 & 解决的问题
功能特点:
1. 传统的方式安装一个节点需要几个小时,线性安装 2. 使用快速部署模块,安装一个节点只需15-30 分钟,同时安装多台机器 3. 安装部署时间节省90% 以上 4. 能同时安装的机器数量理论上没有限制,被网络环境和UQDM主机的性能影 响,正常情况下可以达到百台机器同时安装。
云存储模块 -- UCSM
UNIS Cloud Storage Module 1. 文件系统:共享文件夹;目录
结构;通过协议共享,POSIX兼
容,例如NFS, Samba 2. 块存储:大磁盘;存结构化数 据;磁盘卷;iSCSI 3. 对象存储:网盘,扁平化,没 有目录结构,每个文件是个对象, 每个对象有Object ID和User ID。
大数据模块 UBM -- Hadoop
大数据模块为Hadoop 构架,是目前最主流的分布 式系统构架,可兼容现有的 大部分硬件和软件产品。
紫光云计算机对其中的
集群管理和应用程序管理等 进行了加工,开发了一些简
单易用的工具和功能。
UNIS Big Module
UBM – Hadoop – 分布式架构
目录
紫光云计算机简介 虚拟化模块 云存储模块 大数据模块 快速部署模块 功能特点 应用案例
市场背景
全球数据量 40
(单位/ZB)
35
• • •
30
20 10 0 0.8 2009 1.2 2010 1.8 2011 2015 2020
7.9
•
非结构化、半结构化数据爆 发式增长 根据IDC 监测,全球数据量 大约每 18 个月翻一番 2020 年,全球将拥有 35ZB 的数据量 随着数据量的爆炸式增长, 数据采集、存储、挖掘和商 业智能迎来大数据的新时代。
Hadoop是一个能够对大量数据进行 分布式处理的软件框架,主要由HDFS、 MapReduce和HBase等组件构成。 HDFS(分布式文件系统)和Hbase(分布式数据库)用来将数据存
储或部署到各个数据节点上,借助Hadoop 框架及云处理核心技术
MapReduce 来实现数据的处理和存储,并且将HDFS 分布式文件系统和 HBase 分布式数据库很好的融入到云处理框架中,从而实现云处理的分布 式、并行处理和存储,并且得以实现很好的处理大规模数据的能力。
交换机
软件:UCSM,
硬件:3 台 R5210作为存 储节点
存储空间:20T (36T/3)
扩展性:如有更多的存储 需求,增加节点。
UCSM +Hypervisor
UCSM +Hypervisor UVM
UCSM +Hypervisor
目录
紫光云计算机简介 虚拟化模块 云存储模块 大数据模块 快速部署模块 功能特点 应用案例房,管理员不需要管 理机器上运行的应用以及应用运行的状况, 他们只需要做: 1、从监控上发现设备故障 2、用新的设备替换故障设备 3、云自动配置新设备的角色,并部署应用
紫光云计算机 – 应用行业
企业:大量业务信息的采集,存储和分析,发掘数据价值
• 基于分布式系统架构,以集群的形式提供服务 • 元数据节点:存储数据的属性信息 • 元数据节点互为备份,实现HA • 每块数据多份备份,分布式存储于各数据节点
紫云1000
元数据节点/数据节点 元数据节点/数据节点
场景:大文件的存储,对 即时性要求不高,对计算 和数据处理要求高的应用
软件:Hadoop,UBM
大数据
数据量激增
数据类型多样化
数据处理速度要求极快
对IT系统的计算、存储和传输能力提出了极限要求。 “大量化(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低 (Value)”就是“大数据”的显著特征。
大数据难点
技术瓶颈和成本控制
技术瓶颈: 由于大数据中大部分都是非结构化的数据,而现有的软件和工具大多针对
• 最小配置为3台服务器
• 以集群的形式对外提供服
交换机
务
• 横向扩展
• 用户定义节点的角色
紫云服务器
紫云R5210服务器
紫云服务器
紫光云计算机- 软件架构ቤተ መጻሕፍቲ ባይዱ
UVM UQDM UBM
Hypervisor
UCSM
Hadoop
Linux OS
• UVM+ Hypervisor -> 提供虚拟化 • UBM+ Hadoop -> 提供大数据的 分布式存储和运算 • UCSM -> 提供分布式存储 • UQDM -> 提供部署和安装工具
虚拟化
构成的,缺一不可。
单一的云存储、虚拟化或者大数 据并不是完整的云计算,只是云计算 和传统构架的混搭,是一种“四不像” 的云架构。 紫光云计算机是集虚拟化、云存 储、大数据和网络于一身的,完整的 云架构。
网络 大数据 云存储
紫光云计算机构架
企业资产管理 企业资源计划 产品周期管理 客户关系管理 供应链管理 办公自动化 分销资源计划 商业智能
交换机
硬件:3 台 紫云服务器其 中两台同时作为元数据节 点和数据节点,剩下1台 作为数据节点 存储空间:20T (36T/3) 扩展性:如有更多的计算 存储需求,增加节点。
数据节点
数据节点
数据节点
UBM – 功能
管理控制台
集群服务管理 - 监控运行情况 - 启动、停止服务 - 配置集群服务的参数 集群资源管理 - 查看集群里的主机列表 - 查看某台主机的详细信息 - 添加新机器进集群 监控管理 - 集群物理机磁盘监控 - 物理机资源利用率监控
虚拟资源管理
- 虚拟机部署和管理 - 虚拟机配置更改 - 动态迁移
资源审批流程
- 项目申请和审批 - 虚拟资源申请和审批
UVM – 管理界面
UVM – 管理界面
资源管理
UVM – 管理界面
项目列表
UVM – 管理界面
监控管理
目录
紫光云计算机简介 虚拟化模块 云存储模块 大数据模块 快速部署模块 功能特点 应用案例
UBM – 管理界面
UBM – 管理界面
UBM – 管理界面
目录
紫光云计算机简介 虚拟化模块 云存储模块 大数据模块 快速部署模块 功能特点 应用案例
快速部署模块 UQDM
云计算机在被使用前,需要预安装OS、Hadoop、UBM、UCSM和UVM, 这一系列的安装比较繁琐,需要一位专业Hadoop工程师花费几个小时才能安装 完成一个节点。 考虑到安装的复杂性,所以在云计算机的解决方案中,还需要有一个用于各 个节点安装的自动安装系统(即快速部署模块),解决节点的快速安装问题。
UVM部署虚拟机负载均衡
全数据支持:同时支持文件系统、块存储和对象存储,可以支持包括非结构化数据、半结构
化数据和结构化数据的所有数据类型。
DataCenter OS
紫光云计算机采用DataCenter OS模式,紫云平台可替代以Cisco、
IBM、Oracle及EMC等国外厂商设备搭建的传统数据中心构架。而针对海量 数据的大数据模块,则可实现与Oracle类似的海量数据分析检索功能。
计算机的演进
个人计算机
服务器(并行式计算)
超级计算机
以太网 服务器(分布式计算)
云计算机
云计算机定义
紫光云计算机
云计算机采用了与个人计算机和超级计算机完全不同的分布式体系架构,借助于 云计算的虚拟化技术将多个成本相对较低的计算资源融合成一台具有强大计算能力的 计算机,可高效支持大数据处理,高吞吐率, 高可用和高安全性信息服务等多类应用 需求,其计算能力和存储能力是可动态伸缩并无限扩充的。
快速部署可以简单理解为一个全自动的软件安装流水线。
快速部署模块 UQDM – 流程
1. 2. 3.
配置目标机器的网络环境 收集目标机器的硬件信息 定义安装角色的操作系统
4. 定义目标机器的角色: 元数据 节点、数据节点、虚拟化服务器 等 5. 批量的一键部署:目标机器集 群从裸机至上线运作
和软件列表
电信:网络运营数据和用户业务数据已堆积了巨大的数据财富 广电:分析视频用户行为,并提出用户体验优化解决方案 信息安全:安全监控,分析用户行为, IP溯源 金融:客户签单扫描;所有客户往来的资料,图档数量上亿 政府:电子政务,智慧城市发展离不开大数据的支持 教育:数据勘探和分析可以帮助教育者研究不同学习模式的效果 数据成为核心资产。对数据的掌控导致了对市场的支配和巨大的经济回报。