当前位置:文档之家› Espan分布式存储系统介绍

Espan分布式存储系统介绍


9
目录
Espan分布式存储是什么 体系架构原理 Espan特性和优势 应用场景及案例
10
对象存储模型
– 分布式对象存储机制是将用户数据在底层分割成一组小的对象,并按照一 定的算法将这组对象均匀一致地分布于整个集群的各个设备节点上。 – 用户使用时,由存储系统将这些小对象拼接成完整的用户数据,提供给用 户使用。
11
对象存储工作原理
API
API
API
Storage Pool
存储系统架构
存储系统部署架构
对称架构与非对称架构比较
对称架构(Espan) 结构特点 性能 无需专门的元数据服务器 (MDS) 只有数据节点影响系统性能; 非对称架构 元数据服务器是必需(Mandatory) 元数据服务器是性能瓶颈。 将元数据都保存在内存中;为了解决可靠 性问题,在文件系统上创建检查点(元数 据快照) 数据节点也会影响性能。 整个系统依赖于元数据服务器,元数据服 务器故障,将导致整个系统无法正常运行。 采用复杂的分布算法 受元数据服务器性能的限制
MDS管理链路
8
对称式分布式存储架构
通过FC、iSCSI协议来传输数据块
OS Application OS Application OS Application
通过CIFS、NFS等协议传输文件
OS Application
通过对象存储协议来传输文件
通过CIFS、NFS等协议传输文件
管理链路、分布式存储链路
整套系统无单点故障!
灵活策略
Application A Application B Server
灵活的策略
工作载荷QoS管理 动态在线去重、压缩和自动精简配置 负载均衡机制 数据安全隔离机制 基于卷的高效快照系统
带宽/IOPS QoS控制
灵活策略
自动精简配置 Thin-provision;
业界领先的Scale-out分布式存储系统!
海量存储空间
服务器/工作站
服务器/工作站
FC/IP网络
… 高速网络 VS …
传统 磁盘阵列 不同型号有 不同容量限制

存储节点集群
卓越性能
服务器/工作站

高速网络 …
Scale-out横向扩展架构;无性 能瓶颈问题; 整体性能随着存储节点增加线 性增长; 高速网络聚合带宽,支持大规 模业务访问
典型分布式存储架构
OS
OS Application
Client
终端用户
OS
Application
OS Application
Client
Client
服务器
Application
Client
MDS查询链路 通过私有存储协议来传输文件
MDS
Metaserver 元数据服务器
OSD
Object Stroage Devices 对象存储器
Espan分布式存储系统介绍
目录
Espan分布式存储是什么 体系架构原理 Espan特性和优势 应用场景及案例
2
传统存储架构
3
Espan是什么?
1、Espan分布式存储系统是采用Scale-out(横向扩展)架构实现的高性能、 高可用的分布式存储系统; 2、适用于大数据量和高IO访问的应用领域;
400TB 100TB 100TB
灵活的策略
工作载荷QoS管理 动态在线去重、压缩和自动精简配置 负载均衡机制 数据安全隔离机制 基于卷的高效快照系统
实际空间 在线重复数据删除deduplication、压缩;
用户界面
应用A
A
B
C
M
N
A
应用B A
B
B
C
C X Y
灵活策略
Espan 192.168.0.200 192.168.0.202

存储节点集群
丰富接口
Espan 分布式存储系统是构建 于分布式对象存储基础上的多存 储接口的统一存储资源管理平台
高可靠性
存储节点内部RAID,防止硬盘 故障; 存储网关虚拟IP漂移、多路径 IO访问,确保存储服务一直可达; 故障节点自动切换; 数据副本自动恢复和再平衡; 不同安全级别配置不同副本策 略; 支持冗余网络,确保集群的高 可用; 异地灾备,更安全的数据保障
192.168.0.201
灵活的策略
工作载荷QoS管理 动态在线去重、压缩和自动精简配置 负载均衡机制 数据安全隔离机制 基于卷的高效快照系统
192.168.0.200
192.168.0.201
192.168.0.202


灵活策略
灵活的策略
工作载荷QoS管理 动态在线去重、压缩和自动精简配置 负载均衡机制 数据安全隔离机制 基于卷的高效快照系统
高可用
数据节点相对独立,一个节点 故障,不影响其他节点的运行 高效的一致性随机算法 无限制
数据分布算法 可扩展性
目录
Espan分布式存储是什么 体系架构原理 Espan特性和优势 适用场景及案例
16
Espan分布式存储
海量空间:最大100PB以上存储空间 卓越性能:单节点带宽 > 850MB/s,随机IOPS > 20000 弹性扩展:IO性能和存储容量线性扩展 丰富接口:可同时支持NAS/SAN/S3/Swift 接口访问 高可靠性:节点RAID、多副本、纠删码、高效快照、异 地灾备 灵活策略:在线压缩、去重;QoS管理;自动精简配置 简便管理:统一视图,统一管理
灵活策略
虚拟存储器
高性能IO应用
DB 虚拟机 归档
虚拟化应用
备份和归档
灵活策略
X Y 前端应用
灵活的策略
A B C D E Snapshot缓存 Snapshot 工作载荷QoS管理 动态在线去重、压缩和自动精简配置 负载均衡机制 数据安全隔离机制 基于卷的高效快照系统
何谓“横向扩展”?
服务器/工作站
服务器/工作站
FC/IP网络 控制器数量无法扩展 FC/IP网络 性能有瓶颈
扩展柜数量有限 容量有瓶颈
2个控制器,8GB缓存; 1个扩展柜,15块硬盘;
传统 磁盘阵列
2个控制器,16GB缓存; 多个扩展柜,15*N块硬盘;
何谓“横向扩展”?
服务器/工作站 服务器/工作站
PB级容量扩展 网络带宽线性增长 每个节点均有同等处理能力, 性能线性增长

高速网络 高速网络 …

Espan存储节点集群
Espan存储节点集群
绿皮火车: 传统存储 绿皮火车: 只有火车头有动力 只有火车头有动力
Espan 分布式存储 高铁动车: 每节车厢都有动力 高铁动车: 每节车厢都有动力
相关主题