华为企业存储产品解决方案1存储产业趋势主流存储市场,发展方向是什么混合存储全闪存存储云存储数据来源:Gartner 、Wikibon 、IDC全闪存高速增长(BYO+HCI)全闪存是传统企业存储的主要驱动力,将加速存储行业更新换代和厂家洗牌分布式存储具有高扩展,易服务化等优势,有效承载了私有云和公有云的存储需求 传统混合存储存量空间仍然巨大123存储介质全面SSD化主流硬盘厂商西数将在2019年提前停产万转机械盘Gartner :2018年全闪存技术,进入大规模商用阶段Innovatio n TriggerSource: Hyper cycle for Storage TechnologyPeak of Inflated Expectation Through of Disillusionme ntSlope ofEnlightenmen tPlateau of Productivity2016Solid-State Arrays2017Solid-State ArraysExpectationTime201825677, 50%25332, 50%全球存储硬盘2018年发货容量SSD 占据半壁江山单位:PB20152016201720182019202020212022Performance-Optimized HDD Price-per-GBSSD 与SAS 盘价格差距越来越小阵列架构发展历程,从单一到融合协议层存储层…ObjectObject SystemObjectKeyMetadatadata User defined meta-dataHTTP/REST/SOAP/S3ObjectObjectObjectObject●直接数据访问,最低资源消耗,最高效率●裸设备访问模式●应用场景:低延时,少共享(不强调权限管理),如Oracle件系统●文件访问●应用场景:广泛共享基于文件的服务●扁平化结构,系统由用户管理,用户间数据隔离●用户可以创建桶(就像文件夹)和上传或下载对象,可通过转发链接分享数据●应用场景:互联网服务存储,数据归档或备份IP SAN/FC SANNASObjectbucket bucket bucketFC/IP/IB 存储交换机服务器RAID FC/ISCSI/IB dis k物理层应用层IP 口RAID文件系统FS服务器NFS/CIFS●共享文件和文件夹,存储提供文dis k2企业存储产品原理介绍和解决方案Oceanstor V5/F V5 SAN 场景解决方案一览Device Manager :单设备管理eSight :数据中心内跨领域多设备管理ReplicationDirector :数据中心间容灾简捷管理软件数据保护软件HyperSnap :基于增量的本地数据保护HyperClone :完整副本的本地数据保护HyperCopy :设备间的数据保护HyperReplication:数据中心间的容灾保护HyperMetro:双活数据中心保护效率提升软件EMCHDSIBMHWSmartVirtualization数据跨系统流动SmartTier数据垂直流动SmartMotion数据水平流动SmartThin自动精简配置SmartQoS智能服务质量控制分区1分区2分区4分区5分区3分区NSmartPartition智能缓存分区SmartCache智能SSD 缓存SmartMigrationLUN 迁移SmartErase数据销毁F V5不包含HyperMirror(卷镜像)-单阵列内数据高可靠卷镜像是一种数据冗余备份技术,可以为一个LUN创建多个镜像物理副本,对LUN提供持续的冗余备份保护,从而提高单个LUN的可靠性和可用性。
功能原理●创建镜像LUN:①将一个本地LUN或外部LUN变成镜像LUN,同时生成一个镜像副本;再为镜像LUN添加一个镜像副本,形成冗余备份●同步:①初始同步:当创建镜像LUN后,将镜像LUN中的数据全部拷贝到镜像副本中,之后对镜像LUN、镜像副本进行双写②增量同步:当镜像副本从“分裂”或“异常断开”中恢复“正常”时,待恢复的镜像副本会增量拷贝镜像LUN变更的数据●应用场景:单套阵列内始终有两个/多个镜像LUN,一套LUN概念远程复制技术的一种,存储间周期性地同步数据,最大限度减少由于数据远程传输的时延而造成的业务性能下降。
HyperReplication/A 工作原理●建立异步远程复制之初,会启动一个初始同步,也就是将主LUN 数据全量拷贝到从LUN ;●初始同步完成以后,开始按照下面的流程进行I/O 处:1.每个复制周期启动时在主LUN (LUN A )和从LUN(LUN B )的缓存中产生新的时间片(TPN+1 和TPX+1);2.主站点接收生产主机写请求;3.主站点将写请求的数据写入Cache 时间片TPN+1 中,立即响应主机写完成;4.同步数据时,读取前一个周期主LUN A Cache 时间片TPN 的数据,传输到从站点,写入LUN B Cache 时间片TPX+1 中;若主站点Cache 写缓存达到高水位时会自动刷盘,此时时间片TPN 的数据会在盘上生成快照;5.同步时已刷盘的数据从快照中读取并复制到LUN B 。
异步远程复制CacheCacheLUN ALUN B主站点从站点125354N+1NX+1X1秒级RPO 实现异步远程复制工作原理优势和应用场景●性能影响较小,RPO 可达到5秒●复制比可达64:1●主从存储可互为镜像,支持跨高、中、低、全闪存,混合闪存建立复制关系●适用于本地、同城、异地数据容灾HyperReplication/A (异步远程复制)-跨阵列数据级灾备方案概念远程复制技术的一种,存储间实时的同步数据,最大限度保证数据的一致性,以减少灾难发生时数据的丢失量。
HyperReplication /S 工作原理●建立同步远程复制之初,会启动一个初始同步,也就是将主LUN 数据全量拷贝到从LUN ;●初始同步完成以后,如果此时主LUN 收到生产主机写请求,按照如下流程进行I/O 处理:1.主站点接收生产主机写请求,记录这个I/O 对应数据块的差异日志值为“有差异”;2.主站点将写请求的数据写入主LUN (LUN A ),同时利用配置好的链路将写请求发送到远端从站点;3.判断写LUN A 和写LUN B 的执行结果,如果都成功,则将差异日志改为“无差异”,否则保留“有差异”,在下一次启动同步时重新拷贝这一个数据块;4.向主机返回写请求完成。
同步远程复制CacheCacheLUN A LUN B主站点从站点12223334HyperReplication/S 工作原理优势和应用场景●零数据丢失●复制比可达64:1●适用于本地或同城数据容灾●主存储故障时,灾备存储需手工拉起业务HyperReplication/S (同步远程复制)-数据零丢失解决方案CDM 融合数据备份解决方案-基于BCManager的数据备份解决方案生产存储备份存储备份功能:通过快照及复制的管理实现数据备份到备份存储,出现故障时数据恢复到指定时间点优势:单次备份时间极短,对生产性能0影响,实现高频率的备份销售组件支持应用生产端:快照+复制备份端:快照+复制管理:BCManager (eReplication )5种应用oracle ,db2, SQL server, SAP HANA 单机,vmware LUN 级别SmartTier (智能数据分级)-存储性能加速解决方案迁移模式提供手动和自动迁移模式。
可设置IO 监控时段和迁移时段迁移速度可提供三种不同级别的迁移速度:高、中、低迁移策略包括“自动迁移”、“向高性能层迁移”、“向低性能层迁移”、“不迁移”四种方式SmartTier 的价值满足企业对性能和容量的双重需求,避免历史数据占用昂贵的存储介质,保证企业有效投入,消除无用容量带来的能耗开销,降低企业TCO ,得到最优性价比ApplicationTier 1(SSD)Tier 2(SAS)Tier 3(NL-SAS)SmartPartition(智能缓存分区)-关键业务性能保障方案SmartPartition(智能缓存分区)通过对系统核心资源缓存的分区,保证关键应用的性能技术原理●将存储缓存划分为多个大小不等的缓存分区●将不同应用分配到不同的缓存分区●系统自动调整每个缓存分区的主机并发和访盘并发,进而调整每个应用的服务质量效果●专属缓存分区,实现业务隔离,提高可靠性●核心业务专属保障,充分利用缓存资源,大幅提升服务质量●适用于多业务混合应用场景vVOL-为Vmware 定制的精细化LUN 管理解决方案概念虚拟机的一个分区对应vVOL LUN ,在阵列上能够以虚拟机为粒度进行管理,并对vVol LUN 的数据搬移操作进行卸载操作到阵列,提升虚拟机的管理效率。
技术特点●单个虚拟机可使用QoS 、重删压缩等存储高级特性;●虚拟机的克隆和迁移任务卸载到阵列侧,不占用主机带宽;●vVol LUN 与普通LUN 共享规格。
●PE LUN 最大规格64个应用场景虚拟机快速部署,迁移或者克隆vVOL 工作原理1、一个虚拟机存放在多个vVOL LUN 中;2、VMware 对vVol 进行管理(快照,迁移等);3、阵列卸载主机的数据搬移OceanStor V5/F V5NAS 场景解决方案一览CIFSNFSNDMP通用Internet文件系统网络文件系统网络数据管理协议SmartQos智能服务质量控制SmartCache智能SSD 缓存SmartPartition智能缓存分区SmartThin自动精简配置SmartQuota配额管理SmartCompression智能压缩SmartDedupe智能数据重删HyperReplication远程复制HyperSnap快照功能HyperLock文件系统WORMHyperVault一体化备份SmartTier智能分级HyperMetro文件双活HyperClone文件克隆F V5不包含HyperSnap 文件系统快照解决方案-ROW 秒级快照文件系统快照,支持生成源文件系统在某个时间点上的一致性映像,在不中断正常业务的前提下,快速得到一份与源文件系统一致的数据副本。
副本生成之后立即可用,并且对副本数据的读写操作不再影响源文件系统中的数据,同样文件系统的数据修改或写入也不会对快照数据产生任何影响。
可以应用于在线备份、数据恢复、数据分析、应用测试等场景。
快照数据可直接访问,不需要单独挂载。
data1-data4: 修改data5-data7 :不变data8-data10:新增rootsnapsh otdata2data3data4data5data6data7data1data2data3data4data8data9data10data1root写入数据●秒级快照:创建快照时,仅只需要拷贝文件系统的根节点并保存,就形成了一个文件系统的快照。