技术维护规程单服务器版教程文件.docx

1、技术维护规程单服务器版教程文件XXX广电局大洋IP-SAN网络技术维护规程大洋安徽技术支持部2009年2月12日技术维护规程和值班巡检日志一、系统维护管理规范 1. 明确以不停止业务生产为主要目的。2. 本系统属于技术相对复杂的节目制作平台，其用途是为满足电视台专业性节目制作的业务需要而构建。3. 网络管理员对问题应采取主动认真的态度，事无大小，均应纳入问题处理流程，严禁回避掩盖。4. 系统维护过程中，网络管理员应严格按照所有大洋或第三方产品的技术文档进行操作，严禁违规操作。5. 网络管理员应执行日常巡检工作，即每天按照系统日常巡检项目清单所列的项目检查系统；并填写系统日常巡检项目记录表。6.

2、 网络管理员在日常巡检发现系统问题，或者接收到使用人员反馈的问题后应填写到问题汇总及跟踪表；以便跟踪处理结果。二、系统日常巡检科目 重要提示：网络管理员每天应详细检查所有巡检科目，并认真填写淮北矿区台大洋制作网系统日常巡检记录表。 巡检时间：全部科目的完整巡检工作应在每日系统开始使用前至少进行一次；此外，建议每日下午系统使用高峰期前及每日晚间节目生产工作结束后，再进行所有科目的再次巡检。巡检科目见下表，（后面会介绍具体科目的巡检方法）淮北矿区台大洋IP-SAN制作网系统日常巡检科目清单序号类别科目1基础网络检查以太交换机的状况2存储阵列检查IP-SAN阵列的状况3SQL/MDC域服务器检查服务

3、器的状况4检查网络磁盘的共享脚本运行状况5数据库系统检查数据库服务的状况7检查数据库存储磁盘空间的使用状况8检查每个表状态与表空间的使用状况9MDC系统检查Sanergy服务的状况10检查MDC及共享服务的运行状况检查共享存储卷空间容量的使用状况11定期对共享存储卷空间执行Chkdsk /F12后台服务检查操作系统日志状况14检查数据库备份服务的运行状况15检查FTP或其它传输服务器或服务的状况三、基础网络 基础网络由综合布线系统及核心交换机系统两部分组成。 1、综合布线系统的维护要求 综合布线系统作为基础线路工程，除非发生人为触碰或鼠咬等情况；一般较少发生故障。系统正常运行中，应注意以下几点

4、：. 保证线路连接清楚，定期进行机柜除尘。. 不轻易移动、震动机柜中的所有设备。. 设备检修时先断开外接电源线，再断开所有外接连线；2、核心交换机日常检查内容该网络核心由一台DELL5424以太网交换机构成，共对外提供24个连接端口。（另有4个SFP模块插口可扩展，暂不使用）日常检查工作如下：2.1、请检查所有以太交换机SYS指示灯；显示绿色为正常。如该灯为橙色或未亮状态，请及时核对交换机相关技术材料，同时联系大洋公司售后人员，并记录。2.2、请检查以太交换机的端口指示灯，已正常开启的服务器和工作站连接的相应端口应显示为绿色；如果站点已启动而相应交换机端口状态为橙色或未亮状态，请按以下顺序测试

5、以便定位问题：A）换到该交换机另一端口；B）更换以太跳线；C）检查该站点的以太网口。四、存储及服务器除核心交换机外，网络中最重要的部分还有IP-SAN存储及主备域服务器。1、IP-SAN存储阵列检查 本系统中使用的存储阵列主要负责提供整个网络的数据存储空间。日常检查内容如下： 1.1、查看IP-SAN磁盘阵列上的所有指示灯，包括：硬盘状态灯（状态灯为绿色，有数据交互时为蓝色）、IO模块状态灯、电源状态灯；显示绿色为正常。（小液晶面板显示的为蓝色灯，有数据交互时BUSY灯会闪烁白色）如有某个硬盘指示灯为红色或未亮，请立即使用IP方式或超级终端，登录到IP-SAN盘阵进行进一步检测。1.2、内部参

6、数检查（该环节并非日常巡检内容，在此处提及主要是提醒网管人员一定要做好记录并保存，以备日后核对）通常，我们使用IP方式或超级终端登录到IP-SAN盘阵。（当共享存储卷发生故障时，才需要进行此操作）1.2.1、查看磁盘卷识别情况，网卡IP情况。Logs日志情况；1.2.2、对IP-SAN盘阵，查看磁盘在线情况，如果有硬盘掉线或Failed，请立即确认热备盘是否已开始Replace。如未正常开始，请手动选择启动Replace。Replace开始后，并联系大洋公司售后人员，以进一步处理问题。 1.2.3、如未发现磁盘掉线故障，请查看host luns表是否Mapping正常，若不正常请立即联系大洋公

7、司售后人员，以进一步处理问题。 2、SQL、MDC服务器 本系统中的SQL、MDC服务器兼做Windows域存储；本节检查内容是针对SQL、MDC服务器本身的工作状态的。SQL、MDC日常检查内容如下：2.1、查看SQL、MDC服务器上的所有指示灯，包括：系统状态灯、硬盘状态灯、网卡状态灯；显示绿色为正常。如有某个灯为橙色或未亮，请立即联系大洋公司售后人员，以进一步处理问题。 2.2、查看SQL 、MDC的系统卷C盘空间。C盘已使用量在11GB以下为正常。如过高，请按以下顺序测试以便定位问题：A）请检查是否新安装程序；B）可能是由于病毒导致。请立即联系大洋公司售后人员，以进一步处理问题。 2.

8、3、打开事件查看器，查看是否有新产生的报错，如有不明“错误”类信息；请立即联系大洋公司售后人员，以进一步处理问题。五、日常检查内容 本系统中使用单服务器实现SQL数据库及MDC功能。如资源状态异常，请记录并立即联系大洋公司售后人员。1、MDC系统部分使用服务器打开SANergy管理软件，对全部IP-SAN共享卷进行测速。在没有其它站点使用的状况下，（尽量在没有其它站点使用情况下测试）测速数据结果在60MB以上为正常；如测速结果在60MB以下，请按照下面环节检查磁盘剩余空间。若剩余空间不足，请立即着手清理空间。共享存储卷空间容量日常检查内容（请按下面MDC共享存储卷空间-安全阀值表标准检查） 卷

9、名称格式化后容量安全阀值（80%以下）UTBTBVTBTBWTBTB2、数据库系统部分 2.1、在线数据库日常检查内容 2.1.1、在服务器上打开任务管理器，查看CPU，内存信息；CPU占用率在55%以下，物理内存占用在1750MB以下均为正常，但要注意内存是否主要被sqlservr进程占用。（SQL为了提高服务访问调用速度，比较占内存，sqlservr进程所占用内存一般不低于内存占用总量的60）如CPU占用过高，可能是由于病毒导致。请立即使用第三方线程查看工具，检查当前线程启用情况；并立即联系大洋公司售后人员，以进一步处理问题。2.1.2、查看共享盘（包括数据库空间盘，如S：盘）上的空间使用

10、情况；如：SQL盘为465GB，已用空间应小于总空间的85，即小于372GB为正常。如有如果空间使用过多，请立即联系大洋公司售后人员，以进一步处理问题。2.1.3、在在线SQL服务器上打开企业管理器，检查SQL数据库中每个库的工作状态，如出现质疑等错误；请立即联系大洋公司售后人员，以进一步处理问题。2.2、数据库备份日常检查内容本系统数据库采用每天自动备份一次的方式，备份数据库文件。针对备份检查如下：2.2.1、在服务器上，检查E：盘中按时备份出的数据库备份文件时间是否为当天的。如遇数据库问题，应第一时间将其手动拷贝一份到其它地方保留。（建议按星期建立七个文件夹，并以一星期为周期，每天手动拷贝

11、五个数据库备份文件到对应星期文件夹中，第二周覆盖第一周，周而复始）2.2.2、检查保存备份文件的磁盘，确保磁盘有足够的空间。六、系统日常巡检记录表参考XXX台大洋IP-SAN制作网系统日常巡检记录表填表单位淮北矿区电视台技术制作中心填表日期填表人序号类别科目结果备注1机房环境机房温度检查；空调工作状态；UPS状态2基础网络检查以太交换机的状况3存储阵列检查IP-SAN的状况4SQL/MDC域服务器检查服务器的状况6数据库系统检查数据库服务的状况8检查数据库存储空间的使用状况9检查每个表状态与表空间的使用状况10MDC系统检查MDC中Sanergy服务的状况11检查MDC及共享服务的所属及运行状

12、况12检查共享存储卷空间容量的使用状况13定期（如每周末）对共享存储卷执行Chkdsk /F 14后台服务检查操作系统日志状况15检查FTP服务或服务器的硬件及操作系统状况16检查数据库备份服务的运行状况XXX台网络故障及排查方法本网络系统主要由基础网络及IP-SAN存储、MDC/SQL服务器构成。这里就以各个构件为单位，分类介绍各种故障及排除方法。1、基础网络故障基础网络是由综合布线系统以及各类交换机构成。1.1 核心交换机故障 系统中的核心以太网络交换机，常见故障类型分为2类，具体如下： 1.1.1、以太交换机故障当核心以太交换机出现故障时：（第一步）应首先关闭所有安装了SANergy管理

13、软件的服务器及客户端工作站；（第二步）关闭IP-SAN存储；（第三步）断电并重新启动核心交换机，让交换机重新自举；（第四步）等交换机自检完成，再根据主控设备启动顺序，逐个开启IP-SAN存储及相关服务器，并在SQL、MDC服务器上分别进行数据库及带宽测试。（第五步）服务器测试通过后，逐台启动已关闭的所有工作站，启动后逐台测速确认带宽正常；1.1.2、以太交换机端口故障当以太交换机的某个端口出现故障时，应首先判断当前在线服务器是否链接到该故障端口。（若是连接在IP-SAN存储的4个端口，则需全网关闭，剔除故障交换端口）1.1.2.1、如果该故障端口正巧链接到在线服务器，则：（第一步）首先应关闭所

14、有客户端工作站；（第二步）关闭在线服务器（即链接到故障交换机端口的服务器），更换到任一正常以太交换机端口，再次开启该服务器并确定已执行MDC服务及SQL资源；（第三步）逐台重新启动所有客户端工作站，启动后逐台测速确认带宽正常。 1.1.2.2、如果该故障端口链接的不是在线服务器，则：（第一步）应关闭故障端口链接的工作站；（第二步）将链接到该故障端口的工作站的双绞链接线缆转移到以太交换机上的任一正常端口；（第三步）重新启动已关闭的该工作站即可。 1.2综合布线线路故障 系统中的综合布线线路为六类双绞线；一般情况下，六类双绞线出现故障的几率极低。若某条六类双绞线缆出现故障时，应首先判断该条双绞线缆

15、是否链接到在线服务器。1.2.1、如果在线服务器正巧使用该条故障双绞线缆，则：（第一步）应首先关闭所有客户端工作站；（第二步）关闭故障服务器，（即有链接故障的服务器）所有资源将自动接管到备服务器上；（第三步），更换该条双绞线缆，再次开启该服务器并执行MDC服务及SQL资源。（第四步）逐台重新启动所有客户端工作站，启动后逐台测速确认带宽正常。1.2.2、如果该条故障双绞线缆链接的不是在线服务器，则：（第一步）应关闭故障双绞线缆链接的工作站；（第二步）更换备用双绞线缆；（第三步）重新启动已关闭的该工作站即可。 2、存储系统及MDC故障 一般意义上，存储系统是由IP-SAN、服务器构成。这里我们将这

16、两部分放到一起说明：2.1、 IP-SAN故障 由于IP-SAN为系统核心素材数据存储设备。故任何异常均需高度关注，网络管理人员一旦发现IP-SAN出现任何异常迹象，均应第一时间与大洋公司售后技术人员取得联系，共同定位；如在大洋公司售后技术人员指导下，定位故障是情节严重的，应启动本维护规范紧急重大故障处理流程。 IP-SAN常见故障类型分为3类，具体如下： 2.1.1、IP-SAN故障 当IP-SAN整体瘫痪，不能提供数据访问时；应立即逐台修改客户端工作站上对数据库的本地指向，即可应急使用本地备份数据盘中的素材，恢复正常的节目生产工作。 2.1.2、IP-SAN存储故障 当IP-SAN存储发生

17、故障时，则：（第一步）应首先关闭所有服务器及客户端工作站；（第二步）登录查看IP-SAN存储当前状态，确认可检查到所有共享存储卷，并查看LUN Mapping状态是否正常；（第三步）启动SQL、MDC服务器，测试确认带宽正常；（第四步）逐台重新启动所有安装了SANergy管理软件的客户端工作站，启动后逐台测速确认带宽正常即可。 2.1.3、IP-SAN 阵列Disk故障 当IP-SAN阵列中某块Disk发生故障时，IP-SAN阵列会立即使用在线热备盘替换并重建故障磁盘，将故障Disk的数据替换到热备盘上。 用户只需等重建完成后，在线替换故障磁盘即可。（重建过程带宽稍受影响，但仍可满足节目制作需

18、求）2.2、MDC故障 MDC常见故障分为2类，具体如下： 2.2.1、MDC卷索引信息异常 当MDC服务器中的卷索引信息异常时（卷中部分文件夹或文件不能访问），则：（第一步）应首先关闭客户端工作站；（第二步）在在线MDC服务器上打开命令符执行界面（在运行栏输入CMD），执行Chkdsk /F命令；（第三步）执行完毕后，逐台启动所有安装了SANergy管理软件的客户端工作站，启动后逐台测速确认带宽正常即可。重要提示：因为IP-SAN中的素材数据为多站点并发共享使用，故卷索引信息检索的例行维护工作非常重要。请网络管理人员按照日常检查与维护工作的要求，严格执行磁盘索引信息检索的例行维护工作。在正常

19、执行维护工作的前提下，一般不会发生卷索引信息异常的情况。 2.2.2、其它软硬件及设置故障2.2.2.1、当MDC系统或硬件出现故障，立即关闭服务器。注：调整MDC时，网络中的客户端工作站必须全部关闭，只有MDC正常运行后，客户端工作站才能开启。 2.2.2.2、磁盘空间限制 通过检查大洋网管软件的磁盘配额，如果发现接近安全限额，必须通知相关人员清理素材，保证安全余量。（切记！）3、数据库故障 数据库系统为本系统元数据存储中心，故任何异常均需高度关注，网络管理人员一旦发现数据库系统出现任何异常迹象，均应第一时间与大洋公司售后技术人员取得联系，在指导下处理；如在大洋公司售后技术人员指导下，定位故

20、障是情节严重的，应启动本维护规范紧急重大故障处理流程。 数据库常见故障类型分为2类，具体如下： 3.1、数据库服务器故障 数据库服务器出现故障时，尝试手动启动数据库服务。若数据库服务恢复正常；客户端重新启动各大洋应用软件，即可重新恢复正常节目生产。 3.2、在线数据库某个或多个大洋数据库表项丢失或停止 在线数据库某个或多个大洋数据库表项丢失或停止，可能造成的原因有多种；如：IP-SAN盘阵数据库盘写满、大洋数据库表项异常中断等。无论何种原因，只要表现为工作站非编系统都不能正常启动，即应紧急采取如下处理：（第一步）在服务器上验证SQL服务正常工作，验证数据库的最新数据备份为当天早晨最新恢复；（第

21、二步）恢复故障数据库表项；（第三步）重新启动各大洋应用软件，即可恢复正常节目生产。 重要提示：由于该恢复操作的耗时是与数据库大小相关，故可能耗时约1小时甚至以上。一旦事故发生，恢复过程可能将会延长至2小时甚至以上。（可能需要提前考虑启用单机紧急预警方案）主控部分启动关闭操作说明主控部分为整个IP-SAN网络的核心组成部分，原则上主控部分需要定期通过关机重启来自检自身硬件及服务正常情况。一般建议服务器每一至三个月关闭重启一次；存储、盘阵每三到六个月重启一次；每半年重启一次交换机。A启动顺序：（如未特殊说明，必须逐项依次完成）1、启动以太交换机。直接插上交换机电源通电，启动交换机。（交换机可以优先

22、或和第一项同时启动，以节约时间。）检测表相视交换机而定，（如先交换机所有端口频闪，然后逐个检索）整个启动过程约需3到4分钟。2、启动磁盘阵列。打开磁盘背后的电源开关（双电源、双开关，同时打开）启动阵列，待阵列前端液晶屏上显示“Ready”字样，表示启动完成。3、启动服务器：启动服务器（日常提供SQL和MDC服务的服务器）到登录界面，并登录。（此时可观察盘阵液晶面板的BUSY灯状态，若出现白色灯频繁闪烁，说明磁盘正在被识别，稍等片刻）查看所有资源和服务都正常启动。进行常规核查后，锁定服务器！（主控部分启动完成，可开启工作站使用了）B关机顺序：（如未特殊说明，必须严格逐项依次完成）1、关闭服务器。

23、关闭之前确保所有工作站已关机！等完全关闭后，再继续下一步。2、关闭磁盘阵列。关闭磁盘背后的电源开关。（双电源、双开关，同时关闭）3、关闭以太交换机。断开交换机电源关闭。（交换机无需经常关闭）特别注意：再次提醒开启和关闭服务器主控部分前，请确保所有工作站都处于关闭状态。沁园春雪北国风光， 千里冰封， 万里雪飘。望长城内外，惟余莽莽；大河上下，顿失滔滔。山舞银蛇， 原驰蜡象， 欲与天公试比高。须晴日， 看红装素裹，分外妖娆。江山如此多娇， 引无数英雄竞折腰。惜秦皇汉武，略输文采；唐宗宋祖，稍逊风骚。一代天骄，成吉思汗，只识弯弓射大雕。俱往矣，数风流人物， 还看今朝。 三字经人之初，性本善。性相近，

24、习相远。苟不教，性乃迁。教之道，贵以专。昔孟母，择邻处。子不学，断机杼。窦燕山，有义方。教五子，名俱扬。养不教，父之过。教不严，师之惰。子不学，非所宜。幼不学，老何为。玉不琢，不成器。人不学，不知义。为人子，方少时。亲师友，习礼仪。香九龄，能温席。孝于亲，所当执。融四岁，能让梨。弟于长，宜先知。首孝悌，次见闻。知某数，识某文。一而十，十而百。百而千，千而万。三才者，天地人。三光者，日月星。三纲者，君臣义。父子亲，夫妇顺。曰春夏，曰秋冬。此四时，运不穷。曰南北，曰西东。此四方，应乎中。曰水火，木金土。此五行，本乎数。十干者，甲至癸。十二支，子至亥。曰黄道，日所躔。曰赤道，当中权。赤道下，温暖极。我中华，在东北。曰江河，曰淮济。此四渎，水之纪。曰岱华，嵩恒衡。此五岳，山之名。曰士农，曰工商。此四民，国之良。曰仁义，礼智信。此五常，不容紊。