系统维护和机房运维方案Revised at 2 pm on December 25, 2020.运维服务方案2016年5月18日目录1 服务内容 (3)服务目标 (3)信息资产统计服务 (3)网络、安全系统运维服务 (4)主机系统运维服务 (6)存储系统运维服务 (10)数据安全存储及灾备运维服务 (11)传统的灾备方式 (11)容灾方案的关键指标 (13)常见的备份策略 (14)容灾的核心问题 (15)容灾的实现方式 (16)异地容灾技术 (18)灾难恢复级别 (20)容灾建设方式 (21)企业信息系统保护层次 (21)容灾技术模型 (23)业务平台的保护---业务处理能力的冗余 (23)数据平台的保护---业务状态数据的复制 (24)接入平台冗余和贴换 (24)容灾模式 (24)2 运维服务流程 (32)3 服务管理制度规范 (34)服务时间........................................................................... . (34)行为规范............................................................................. .. (34)现场服务支持规范................................................................. . (35)问题记录规范.......................................................................... ................................................ .354 应急服务响应措施................................................................... (37)应急基本流程 ................................................................................................................................ ..37预防措施......................................................................................... .............................. . (37)突发事件应急策略 (38)1服务内容1.1服务目标可为提供的运行维护服务包括,信息系统相关的主机设备、操作系统、存储设备容灾的运行维护服务,保证用户现有的信息系统的正常运行,降低整体管理成本,提高网络信息系统的整体服务水平。
同时根据日常维护的数据和记录,提供用户信息系统的整体建设规划和建议,更好的为用户的信息化发展提供有力的保障。
用户信息系统的组成主要可分为两类:硬件设备和软件系统。
硬件设备包括网络设备、安全设备、主机设备、存储设备等;软件设备可分为操作系统软件、典型应用软件(如:数据库软件、中间件软件等)、业务应用软件等。
通过运行维护服务的有效管理来提升用户信息系统的服务效率,协调各业务应用系统的内部运作,改善网络信息系统部门与业务部门的沟通,提高服务质量。
结合用户现有的环境、组织结构、IT资源和管理流程的特点,从流程、人员和技术三方面来规划用户的网络信息系统的结构。
将用户的运行目标、业务需求与IT服务的相协调一致。
提供的信息系统服务的目标是,对用户现有的信息系统基础资源进行监控和管理,及时掌握网络信息系统资源现状和配置信息,反映信息系统资源的可用性情况和健康状况,创建一个可知可控的IT环境,从而保证用户信息系统的各类业务应用系统的可靠、高效、持续、安全运行。
服务项目范围覆盖的信息系统资源以下方面的关键状态及参数指标:➢运行状态、故障情况➢配置信息➢可用性情况及健康状况性能指标1.2信息资产统计服务此项服务为基本服务,包含在运行维护服务中,帮助我们对用户现有的信息资产情况进行了解,更好的提供系统的运行维护服务。
机房服务内容包括:➢机房电源、温度、湿度信息统计记录➢硬件设备型号、数量、版本等信息统计记录➢软件产品型号、版本和补丁等信息统计记录➢存储产品型号、版本和性能等信息统计记录➢网络结构、网络路由、网络IP地址统计记录➢综合布线系统结构图的绘制➢其它附属设备的统计记录1.2.1机房电源、温度、湿度要求硬件设备清单如下表统计:1.3网络、安全系统运维服务从网络的连通性、网络的性能、网络的监控管理三个方面实现对网络系统的运维管理。
网络、安全系统基本服务内容:(1)用户现场技术人员值守可根据用户的需求提供长期的用户现场技术人员值守服务,保证网络的实时连通和可用,保障接入交换机、汇聚交换机和核心交换机的正常运转。
现场值守的技术人员每天记录网络交换机的端口是否可以正常使用,网络的转发和路由是否正常进行,交换机的性能检测,进行整体网络性能评估,针对网络的利用率进行优化并提出网络扩容和优化的建议。
现场值守人员还进行安全设备的日常运行状态的监控,对各种安全设备的日志检查,对重点事件进行记录,对安全事件的产生原因进行判断和解决,及时发现问题,防患于未然。
同时能够对设备的运行数据进行记录,形成报表进行统计分析,便于进行网络系统的分析和故障的提前预知。
具体记录的数据包括:➢配置数据➢性能数据➢故障数据(2)现场巡检服务现场巡检服务是对客户的设备及网络进行全面检查的服务项目,通过该服务可使客户获得设备运行的第一手资料,最大可能地发现存在的隐患,保障设备稳定运行。
同时,将有针对性地提出预警及解决建议,使客户能够提早预防,最大限度降低运营风险。
巡检包括的内容如下:(3)网络运行分析与管理服务网络运行分析与管理服务是指工程师通过对网络运行状况、网络问题进行周期性检查、分析后,为客户提出指导性建议的一种综合性高级服务,其内容包括:(4)重要时刻专人值守服务深刻知道保证重要时刻设备稳定运行对客户成功尤为关键,因此,可对客户提供重要时刻的专人现场值守支持,包括政府客户的重大会议期间、金融客户的年终结算日、运营商客户的生产网重大割接或其它任何客户认为可能对其业务运营产生重大影响的时刻。
如需专人值守,客户需至少提前3周与授权服务商客户服务经理联系。
对每位合约客户,授权服务商均需按事先合同约定提供专人值守服务。
客户如需超出合同约定范围的更多值守支持,需额外支付相应人力和差旅费用。
1.4主机系统运维服务现在造成IT架构不可用的原因有很多,主要包括非计划性宕机和计划性宕机两大类,其中,非计划性宕机主要是由计算机故障或数据故障引起的;计划性宕机主要是由于生产系统的数据改变或系统改变引起的。
(1)、非计划性宕机非计划性宕机主要包括主机宕机、数据故障宕机、存储故障、人为错误、数据损坏、站点故障等。
主机故障宕机当主机系统或数据库服务器出现意外故障并导致服务中断时,主机系统就会发生故障。
数据故障宕机数据故障是指丢失、损坏或破坏关键企业数据。
数据故障的原因比计算机故障更加错综复杂,可能由于存储硬件、人为错误、损坏或站点故障引起。
存储故障单一存储配置,目前都是采用磁盘RAID技术加热备磁盘来解决,因此存储系统的故障主要是由机房电力故障或人为因素导致存储设备的电源发生故障。
人为错误人为错误包括:误删除重要数据或升级语句中不正确的“WHERE”子句更新了比预定更多的行。
数据损坏数据损坏通常由 I/O 堆栈中的故障组件导致,例如,数据库将 I/O 作为更新交易的结果,该数据库 I/O 将在各个组件中进行传输,包括:操作系统的I/O 代码、文件系统、卷管理器、设备驱动程序、主机总线适配器、存储控制器和磁盘驱动器,直至最后被写入。
I/O 堆栈中任何组件发生错误或硬件故障,都可能“变换”数据中的一些位,进而导致损坏的数据被写入数据库中,这一损坏可能是数据库控制信息或用户数据,它们对于数据库的正常工作至关重要;同样,磁盘故障也可能损坏数据。
站点故障数据保护特性提供了预防灾难性事件的能力,这些事件可能在某一段时间内严重减缓站点的处理能力,这些事件包括文件损坏、自然灾害、电力或通信中断,甚至恐怖活动。
(2)、计划性宕机计划性宕机是IT系统在运行阶段所不可避免的,但IT系统停机运维会影响到数据库停止对外提供服务,会对业务运营造成一定影响,特别是对7×24×365的业务系统、计费系统、在线交易系统等。
计划内停机包括例行操作、定期维护和部署新设备等:例行操作指频繁进行的维护任务,包括备份、性能管理、用户管理和批处理;定期维护,如安装补丁和重新配置系统,只是偶尔进行,以更新数据库、应用程序、操作系统、中间件或网络;部署新设备包括硬件、操作系统、据库、应用程序、中间件或网络的重大升级。
申请计划停机时不仅要考虑计划的停机时间,同时还要考虑因停机造成的对整个业务系统的影响。
数据更改导致的停机对于数据的更改例如增加数据空间、改变数据库的对象,添加及删除数据库对象,对数据库的参数进行调整等操作,都有可能导致计划性停机。
系统更改而导致的停机由于系统更改导致的停机主要表现在两方面:一是主机系统的更改,例如更新设备、添加硬件、调整参数造成主机系统重启;二是数据库系统的更改,例如数据库补丁升级,调整一些重要参数需要重新启动数据库的运维操作。
提供的主机系统的运维服务包括:主机的日常监控,设备的运行状态监控,故障处理,操作系统维护,补丁升级等内容。
主机系统基本服务内容:现场值守人员可进行监控管理的内容包括:➢CPU 性能管理;➢内存使用情况管理;➢硬盘利用情况管理;➢系统进程管理;➢主机性能管理;➢实时监控主机电源、风扇的使用情况及主机机箱内部温度;➢监控主机硬盘运行状态;➢监控主机网卡、阵列卡等硬件状态;➢监控主机HA运行状况;➢主机系统文件系统管理;➢监控备份服务进程、备份情况(起止时间、是否成功、出错告警);1.5网络存储系统运维服务提供的机房存储环境(SAN、NAS)运行维护服务是包括存储的IOPS和Space利用管理,存储的主动IOPS性能和Space利用管理对系统运维非常重要。
可了解用CIFS、iscsi、FC、FCoE、NFS协议运行状况,通过性能管理可了解存储的日常运行状态,识别存储的IOPS性能,有针对性地进行性能优化。
同时,密切注意存储系统的变化,主动地预防可能发生的问题。
存储---主机规划主机名HostName分区Space应用ApplicationOS版本HA版本HBA型号IOPS(64K\512K)存储故障单一存储配置,目前都是采用磁盘RAID技术加热备磁盘来解决,因此存储系统的故障主要是由机房电力故障或人为因素导致存储设备的电源发生故障。