NetApp存储日常维护手册.docx

1、NetApp存储日常维护手册 Company Document number：WTUT-WT88Y-W8BBGB-BWYTT-19998NetApp存储日常维护手册1 目标NetApp 解决方案能够助客户有效地简化运作，同时最大限度地降低风险，为那些不断经历变化的企业提供更高的性能和可扩展性。借助于产品、技术和合作伙伴的良好组合，NetApp 解决方案有助于解决最为迫切的IT 和业务问题，同时最大限度地提高投资回报率。本指南是为初次使用NetApp存储系统的人员编写的基本管理知识，目标是指导维护人员如何进行每天的健康检查。2硬件设备说明 NetApp FAS3200系列前端：描述指示灯Powe

2、rFaultActivity AActivity B系统正常绿灯亮橙灯灭绿灯亮或闪烁绿灯亮或闪烁（AE系列B灯不亮）系统不正常任何指示灯显示不符合上述情况，请联系NETAPP客户支持后端：端口名称端口用途及描述0a、0b3Gb或6Gb SAS接口 用于连接NetApp存储后端SAS或SATA磁盘柜c0a、c0b8Gb 或10Gb 心跳线接口 用于连接NetApp存储内部心跳0c、0d4Gb 光纤接口 用于接NetApp存储后端FC磁盘柜或接前端主机或接前端FC交换机或接磁带库e0a、e0b1Gb 网络接口 用于接前端交换机或前端主机e0M、SP100Mb 网络接口 其中e0M口用于远程网络管理

3、端口；SP口为远程串口e0P100Mb 网络接口 用于管理NetApp内部磁盘柜solt1solt6扩展槽位，用于接10Mb/100Mb/1000Mb/10Gb以太网卡网卡（10Gb以太网卡支持FCoE）、2Gb/4Gb/8Gb光纤卡、3Gb/6Gb SAS卡、256GB/512GB/1TB PAM II卡、或者SCSI卡；存储系统后部电源指示灯：橙色灯和绿色灯IconPort typeLED typeStatus indicatorDescriptionNVMEMBattery Blinking greenNVMEM is in battery-backed standby mode.Off

4、(power on)The system is running normally, and NVMEM is armed if Data ONTAP is running.Off(power off)The system is shut down, NVMEM is not armed, and the battery is not enabled.Controller module fault ACTAmber Controller is starting up, Data ONTAP is initializing, the controller is in Maintenance mod

5、e, or a controller module fault is detected.OffController module is functioning properly. 机架/电源/磁盘描述指示灯PowerWarningActivity系统正常绿灯亮橙灯灭绿灯亮或闪烁系统不正常任何指示灯显示不符合上述情况，请联系NETAPP客户支持描述指示灯PSU status normalAC missing for this PSUFan faultOutput voltage, current, temperature fault系统正常指示灯亮指示灯灭指示灯灭指示灯灭电源问题指示灯灭指示灯灭

6、指示灯灭指示灯亮风扇问题指示灯灭指示灯灭指示灯亮指示灯灭没有电源输入指示灯灭指示灯亮指示灯灭指示灯亮描述LED 1 (绿色)LED 2 (橙色)正常绿灯亮或闪烁指示灯灭No drive installed指示灯灭指示灯灭SES device identification set指示灯灭指示灯一秒亮一秒灭SES device fault bit set 指示灯灭绿灯亮Disk port isolated (either port) 指示灯灭指示灯三秒亮一秒灭3 设备管理3.1System Manager 图形管理接口 System Manager是NetApp提供的图形管理接口，可以方便地实现对

7、NetApp的存储设备的管理。默认安装完成后点击桌面NetApp OnCommand System Manager 您需要确认以下几点:1、Adobe Flash Player 或更高版本；2、Java Runtime 或更高版本；3、及以下存储端的配置： legacy on on snmp community: public4、通过System Manager您可以完成几乎所有的管理任务。 点击login图标进入SYSTEM MANAGER管理界面，输入用户名和密码。（缺省管理员为root,密码在初始安装时可以设定）以下为常用菜单功能说明：分类操作实现路径备注Storage管理卷管理Stor

8、age-VolumesCIFS共享协议管理Storage -SharesNFS共享协议管理Storage -ExportsLun管理Storage -LunsQtree管理Storage -QtreesQuota管理Storage -Quotas磁盘管理Storage -Disks存储池管理Storage -AggregatesSnapMirror管理Storage -SnapMirrorConfiguration用户及组管理Configuration -Local Users and Groups以太网管理Configuration-Network协议管理Configuration -Pro

9、tocols安全设置管理Configuration -Security系统工具Configuration -System ToolsDiagnosticsCIFS诊断Diagnostics -CIFS会话记录Diagnostics -Session系统健康管理Diagnostics -System HealthLog管理Diagnostics -LogsHA ConfigHa 诊断Ha config 3.2命令行(CLI) 您可以用CONSOLE口 (将PC机的串口与NetApp随机带的console线连在filer的CONSOLE口, 打开windows里的hyperterminal或其它仿

10、真终端，波特率设置为default: 9600波特率, 8位,无校验,1位停止位)和telnet 登入filer的命令行窗口.缺省管理员账号为root,密码一般在安装时设置，可以使用passwd命令修改。输入或者help可以看到全部命令。 FAS3240A1 fsecurity options smtape acpadmin ftp orouted snap aggr halt partner snaplock arp help passwd snapmirror autosupport hostname ping snapvaul backup httpstat ping6 snmp bmc

11、 ic pktt software cdpd ifconfig portset source cf fgrp priority sp charmap ifstat priv stats cifs igroup qtree storage clone ipsec quota sysconfig config ipspace radius sysstat date iscsi rdate system dcb key_manager rdfile timezone df keymgr reallocate traceroute disk license reboot traceroute6 dis

12、k_fw_update lock restore ups dns logger revert_to uptime download logout rlm useradmin du lun route version dump man routed vfiler echo maxfiles rshstat vlan ems mt sasadmin vmservices environment nbtstat sasstat vol exportfs ndmpcopy savecore vscan fcadmin ndmpd sectrace wcc fcnic ndp secureadmin w

13、rfile fcp netdiag setup ypcat fcstat netstat sftp ypgroup file nfs shelfchk ypmatch flexcache nfsstat sis ypwhich fpolicy nis FAS3240A1命令的详细使用方法可以通过help得到，例如：FAS3240A1help voldisplay or change characteristics of volumesThe following commands are available; for more informationtype help vol add destr

14、oy online sizeclone lang options splitcontainer media_scrub rename statuscopy mirror restrict verifycreate offline scrub3.3设备正常开关机顺序开机顺序：1、按照磁盘柜的Shelf ID号依次开启磁盘柜的电源，大概20秒后再开启存储控制器；2、开启接有NetApp存储的以太网交换机或者光纤交换机；3、开启有挂载NetApp存储空间的服务器或者磁带库；关机顺序：1、确认所有连接的应用程序已经关闭（包括通过FCP或ISCSI连接到存储的Oracle Server等服务，和通过NA

15、S连接到存储的应用）；2、确认连接到存储的服务器已关闭（通过FCP或ISCSI连接的服务器）；3、通过串口或SSH以root用户或者其它管理员账户登陆到系统；4、分别对两个机头输入halt -f命令,并且回到CFE状态；5、先关控制器电源，在依次倒着按照Shelf ID 号关闭磁盘柜电源。4 NetApp 设备日常操作4.1 System Manager 图形界面操作4.1.1登陆方式1、双击桌面System Manager2、双击FAS3240A或者FAS3240B进入配置页面3、输入用户名：root，密码：*，进入界面4、需要配置哪个控制器则点那个控制器，该文档除了HA config 测试

16、，其余所有动作均在FAS3240A控制器中操作4.1.2创建存储池（Aggregate）1、点击Aggregate,接着点击Create，创建新的Aggr，此操作在扩容时候用的上，一般有PSE或者代理工程师完成此步操作；2、给新建aggr 起名为aggr_test，raidtype选择为 Raid_dp，3、选择添加磁盘加磁盘类型，4、选择添加多少颗磁盘到aggr_test存储池中，注意：添加磁盘至同一个aggregate（存储池）时，必须选择同样类型、大小和转速的磁盘，否则将于转速最慢，大小最小的磁盘类型为上限；当然，不可以将SATA磁盘加入到SAS 磁盘的Aggr中，反之一样也不行。5、点

17、击 “Select Disk”选择磁盘，并将RaidSize 设置为16，注明：FC /SAS磁盘的RaidSize 默认为16 6、点击完成7、点击create ，完成存储池创建到此，存储池已经创建好，可以开始新建卷了； 创建灵活卷（Flex Volume）1、创建Flex volume，点击volume菜单，在点击右手边的create 按钮进行flex volume的创建2、将 cifs_test 卷放在新建的aggr_test存储池中，选择其为“NAS”或“SAN”共享方式，并调整cifs_test的大小，设置快照预留空间等操作（快照预留Snapshot Reserves可以灵活调整，0

18、为不预留）；3、点击 “Storage Efficient”，选择是否开启a-sis（重复数据删除功能），是否开启重复数据删除功能具体需要看前端应用，比如前端业务为虚拟桌面、或者邮件系统，则建议开启重复数据删除功能，起到存储最优使用效率；完成cifs_test卷创建；到此步骤，Volume卷创建完成；我们可以正式开始配置NAS（CIFS或NFS）和SAN（IP SAN 或FC SAN）的空间规划配置； 创建NAS 共享（CIFS/NFS）1、创建CIFS 方式文件共享A)点击 Shares B) 点击 “Create”按钮，新建一个CIFS 共享C)选择共享volume ，设置共享名，并对其进

19、行描述，以便日后更方便识别；D)点击完成，完成CIFS 共享创建；E) 权限设置选择cifs_test共享路径，点击“Edit”进行共享权限设置；NetApp存储中权限设置只有三种：full control、read and write、read only；点击“Permission”，设置用户权限；选择“add”并添加”administrators”组用户，选择“remove”则是删除某个用户或组的使用权限；设置”Permission”的权限访问；点击“options”进行高级options设置;可设置是否允许共享文件夹的内外部超级链接，以及结合内部病毒服务器进行设置病毒扫描；点击“save

20、 and close”完成CIFS 共享的权限设置。注意：若将NetApp 存储加入Windows的域环境中，那么其权限设置操作则可以完全通过Windows AD 的Administrator 来管理设置；F) Windows 主机端操作选择映射网络驱动器，输入存储IP地址及共享名，并勾上“登陆时重新连接”第一次连接需要输入用户名密码，选择记住密码，下次登陆时候将可直接连接到共享空间；若不是当前用户可点击different username，以指定的用户名口令登陆（和当前windows用户不同）2、创建NFS 方式文件共享A)点击“exports”B)点击右下方“Unix”文件夹图标，之后再选

21、中“edit”C)选中“Eidt”点击完成；D) Linux 主机端操作 Snapshot配置管理NetApp 存储的快照可对aggregate 和volume两个层面而言，适用最小对象为volume，当然平时用户使用最多的基于volume层面的快照备份及恢复；以下是对vol_test卷创建快照的实例：A) 创建快照备份策略B) 设置快照大小、快照保留份数以及快照备份时间点系统默认快照保留大小为该快照卷的20%，默认显示快照路径，默认保留6份hourly的快照和2份nightly的快照；C) 快照恢复点击SnapShot Copies选择需要具体恢复到哪一个时间点。注意：这个恢复是针对整个vo

22、lume而言，而不是针对单个文件；当然也可以用命令针对某单个文件进行恢复（filersnap restore -t file -s test /vol/vol1/test/） 。点击“Restore”，提示是否确认将该volume的数据恢复到拍快照的那个时间点，点确认，则恢复到快照备份时间点，若放弃则不恢复； 目录配额配置管理1、 点击Quota2、 点击Create来创建针对某个volume的配额3、点击Next选择配置配额的volume或者qtree，配额类型有3中，即分别可对qtree、user或group 进行做配额Hard Limit 设置为1g ，soft limit 800MB，

23、Threshold 750MB， 分别是指所有用户最大可用到1G ，用到750MB时候会有告警提示，用到时候800MB 会提示用户已经无可用空间，但此时还能继续用知道数据存放到1GB为止；File Count 中的 Hard limit 和soft Limit，分别是指该共享路径下面最多包含1000001000个文件，用到80001000个时候会提示文件个数已经用完；点击Next点击完成，完成quota的配置 创建SAN 共享（如果没有FCP或ISCSI的license，无法使用）1、 点击LUN 2、 选择create 点击Next，新建lun 名字，lun 类型及大小；选择lun存储在的v

24、olume，点击next；因之前没有新建过igroup ，故此次没有新的igroup出现，需要手动新建igroup，点击next；核对我们新建lun的配置信息；点击next，完成lun的创建；点击finish，完成；3、 创建Igroup，点击initiator groups，点击create 填写igroup 名字及选择前端操作系统类型，已经传输协议，注意：若选择FC/FCoE，在无特殊条件下建议开启ALUA功能；点击 Initiators，选择对应的IQN号或者wwpn号，若此次没有显示，也可以通过手工的方式将IQN号或者wwpn号输入；点击完成，创建完igroup4、 lun map选择

25、lun ，点击Edit点击Initiator igroups ，选择win_igroup 并且把LUN ID设置为1（注意：LUN ID 为0255，同一个igroup中不能重复）点击 save and closed5、Windows 主机端操作，安装Iscsi initiator 软件下一步，选择Initiator service和Software Initiator下一步，选择同意进行安装；安装完成后，桌面会生成一个Iscsi initiator的图标，双击它进行配置参看iqn号：发现initiator端，并添加存储端IP 地址在target端把新挂载过来的盘进行log on主机上扫描新增

26、加磁盘4.2 CLI 命令行操作 登陆方式用SecureCRT Putty等工具，使用ssh或者Telnet协议，ssh /telnet存储e0M口远程管理地址，其登陆用户名为：root，密码为：xxxxxx，也可以用ssh/telnet 存储SP口远程串口地址，具备串口一样功能， 其登陆用户名为:naroot 密码为跟root的密码一致；因密码属于私密内容，此文档不便提供明文。（NetApp存储默认telnet协议是关闭状态） 创建存储池（Aggregate）Data 以后，根据不同的硬件型号，最大的Aggregate可用容量可以达到100TB。1、新创建Aggr:Aggr create a

27、ggr_name r 16 -B 64 t raid_dp 32#创建一个64位系统的Aggregate，raidsize为16，raid类型为raid_dp,共包括32个磁盘；例如：创建一个名为aggr_test的32位的存储池（Aggregate），里面含有8颗FCAL的磁盘，raidsize为14，raidtype为Raid_dp；参看创建成功后存储池情况：2、为现有的Aggregate增加磁盘:aggr options raidsize #设置合适的raidsize (14+2)aggr add or aggr add -d . . sysconfig r 察看结果例如：往aggr_t

28、est存储池中添加2颗磁盘；3、修改Aggregate快照保留Snap reserve A 0 #关闭aggregate级snap shot的空间预留Snap sched A 0 0 0 #关闭aggregate级的snap shot例如：关闭aggr_test的快照功能，并且取消策略；参看默认情况：调整后情况：4、修改Aggregate名称 Aggr rename aggr0 aggr_new1例如：将aggr_test名改为aggr1 5、修改aggr的raid group的大小(针对以后的aggr_name，对之前raidsize的不做影响) aggr options aggr_name

29、 raidsize 18例如：将aggr_test的raidsize调整为12 创建灵活卷（Flex Volume）1、参看现有卷使用情况：2、创建vol ： vol create volmane aggrname size 例如：在aggr_test上创建一个1g的vol3卷.3、调整volsize vol size volname size 例如：将vol3 大小调整为2g4、删除快照snap delete 【-a】 volname 【snapshot_name】 例如：删除vol_test中所有快照;5、删除vol：vol offline volname 和vol destroy volname例如：把vol_test卷删除； 创建NAS共享（CIFS/NFS）1、参看CIFS 共享目录权限 cifs shares例如：参看vol_test是否开启CIFS方式共享，全是是否为Administrator Full Control；答案为，vol_test 已经共享，并且具备administrator rwx权限；2、添加CIFS共享 cifs shares -add sharename /vol/volname 例如：将vol3共享设置为everyone有只读权限，共享名为vol3_readonly; ”F)Windows 端主机操作”章节；4、参看NFS共享目录权