行至水穷处、云起浙里时 --XX移动云计算和大数据实践
汤人杰 2019年6月18日
目录
第一部分
第二部分
第三部分
第四部分
第五部分
云计算与团队建设成果 背景和问题
技术发展跟踪和思考 XX支撑云建设蓝图
建议与思考
XX公司云平台建设现状
目前XX公司建设了三个资源池，各自独立发展，有独立的管理平台。
➢ 支撑资源池：承载业务支撑系统与管理支撑系统，上层管理平台由华胜天成负责开 发
大数据技术平台和云计算到底什么关系？大数据资源池和我们现在的资源池 什么关系？
技术架构竖井化，甚至以项目为单位搞技术架构。基础软硬件标准化管理失 控，七国八制，运维亚历山大，这种情况谈何核心能力掌控？
困惑与问题（二）
XX移动的云平台在技术架构上与阿里云有什么异同？ XX移动的云平台在业界处于什么技术水平？ XX移动的云平台是否可以使用或融合阿里云或华为云的技术架构？
资源池化、云化IT架构
打破竖井、应用和平台解耦 打破供应商绑定
加强企业自身核心能力掌控 敏捷建设、聚焦支撑业务
统一管理建设运营，提升运维效率、提升资源利用率，降低TCO ……
云计算技术-服务分层
云计算包括以下三个层次的服务： • IaaS(Infrastructure-as-a- Service)：基础设施即服务。消费者通过Internet可设施获得虚
深度参与集团公 司去IOE试点项目
争取集团内去IOE工作的绝对领先地位
目录
第一部分
第二部分
第三部分
Байду номын сангаас第四部分
第五部分
云计算与团队建设成果 背景和问题
技术发展跟踪和思考 XX支撑云建设蓝图
建议与思考
困惑与问题（一）
资源池CPU利用率为什么提不高？ 小型机能云化吗？去I以后小型机如何投资保护？
应用永远云化中，开发商始终在叫云化改造工作量大，报价高。应用云化？ 这概念是个什么东东？
虚拟资源 物理资源
云计算是大数据的基础，大数据是云计算的应用 大数据技术平台是云计算PaaS层的一个分支，是云平台
的重要组成部分
云计算技术-核心技术
云计算是分布式计算、并行计算、分布式存储、数据管理、虚拟化、负载均衡等 技术发展融合的产物
云计算最核心的技术是 -- 并行计算
并行计算的基本思想是：用多个处理器协调求解同一问题。即将被求解问题分为 若干部分，各部分均由一个独立的计算单元来并行处理，处理完成后，将结果进 行处理后返回用户
20%
资源池
• 截止2019年5月，支撑系统共有服务器3ＸＸＸ台，其中Ｘ８６服务器２ＸＸ Ｘ台。
• 支撑资源池共计604台X86服务器，共部署843个虚拟机，采用Vmware虚拟 化技术搭建
云化系统
• 截止2019年5月，共完成72个系统迁移至支撑资源池 • 2011年已完成CRM Web和APP的云化改造 • 计划8月底前完成计费账务系统云化改造 • 目前系统云化比例为43.56%，计划至年底前系统云化比例提升至60%
拟计算、网络和存储资源，比如Amazon AWS。 • PaaS(Platform-as-a- Service)：平台即服务，指将软件研发的平台作为一种服务，比如
Google的AppEngine为企业和个人提供完整的开发、运行和部署的环境和工具。 • SaaS(Software-as-a- Service)：软件即服务，通过Internet提供软件的模式，用户无需购
云计算主要核心特征
• 资源共享 • 按需自助 • 集中部署 • 弹性伸缩
云计算核心价值-降本增效、高能可靠
• 快速部署--聚焦业务，支撑业务 • 集中、共享、弹性、标准--有效降低成本 • 分布式计算和存储—提升性能和可靠性
云计算驱动企业IT架构演进
企 业 IT 架 构 演 进
“烟囱”式IT系统架构
➢ 网管资源池：承载网管支撑系统与业务平台，上层管理平台由东信北邮负责开发 ➢ IDC资源池：承载IDC业务（公有云），上层管理平台由华为负责开发
资源池管理平台（华胜天成）
支撑资源池 （业务支撑+管理支撑系统）
物理资源
资源池管理平台（东信北邮）
网管资资源池 （网管支撑+业务平台）
物理资源
资源池管理平台（华为）
IDC资源池
物理资源
➢ 以大数据资源池管理平台为核心整合，形成企业统一资源池管理平台 ➢ 网管支撑系统后续将逐步迁移到支撑资源池
支撑系统云化成果概览
设备
• 5个机房，合计面积约1.15万平方米，机房利用率为77.5% • 各类主机3290台，处理能力达到18.11亿Tpmc，其中系统X86化比例62.5% • 各类存储设备容量达到6191TB，利用率88%；非高端（分布式）存储比例达
ORACLE云如何建设和提供？ 什么是PAAS？ 公有云私有云？政企独立云？什么概念？如何实现？ 云计算和大数据的关系？不使用虚拟机算不算云？ HADOOP上虚机？
云计算技术-核心特征和价值
云计算起源于亚马逊EC2产 品和谷歌-IBM分布式计算 项目
云计算是个人PC、互联网之 后的第三次IT浪潮
买软件，而是向提供商租用基于Web的软件。如Google提供的Gmail、Apps、搜索等。
云平台建设的常见路径是自底向上 IaaS PaaS SaaS
云计算与大数据
SaaS PaaS IaaS
云计算架构
公共服务组件
数据挖掘分析
EPaaS TPaaS DPaaS
Hadoop
NoSQL
MPP
（大数据平台服务）BDPAAS
2019年去IOE和系统云化工作重点
去“I”
• 支撑、经分和管信三 域系统全面去“I”
• 在原有商业虚拟化软 件基础上将引入开源 虚拟化软件
去“O”
• 已使用大云RDB3完成统 一用户系统去“O”工作 • 今年将在CRM核心系统
部分模块实现去“O”
去“E”
• 今年将在计费账务 系统和虚拟化资源 池中试点引入软件 定义存储，初步实 现去“E”
分布式操作系统-小变大之谜
由于纵向拓展可优化空间太小（单台服务器的性能上限很明显），分布式系统强调横向扩展、 横向优化，当分布式集群计算资源不足时，就要往集群里面添加服务器，来不停地提升分布式集 群的计算能力。分布式系统要做到统一管理集群的所有服务器，屏蔽底层管理细节，诸如容错、 调度、通信等，让开发人员觉得分布式集群在逻辑上是一台服务器。真正意义的大云必须真正实 现数据中心级的弹性伸缩，俗称小变大。