EMC DMX / VMAX 维护学习笔记
VMAX 学习笔记
VMAX系列
CN开头序列号VMAX1
CK开头序列号VMAX2
部件解释
engine：引擎，引擎越多性能越高
BE：负责硬盘通信的模块
FE：负责主机通信的模块
Management Module：管理通信
SIB：两个柜的有SIB卡，数据流传输
硬盘型号
VMAX 600GB硬盘故障率奇高，经常一下坏6、7块盘，如果有不建议用的盘，维保是大坑。
DMX不建议用的盘：101-000-111/112 （101-000-326 101-000-052）
VMAX不能用到的盘：005049031/005049033/005049032/
VMAX可以用的盘：005051000 /005048950/005051002/005051004
更换environmetal 中的备件
VMAX换电源模块，有风险，拔掉一个电源有可能导致一个DAE drop
Director如果DD，90%不需要换，需要通过environmetal 的check检查。
如果Director全都没了，是需要换Director。
Director从前面拔，注意新的备件Director不带内存，需要用原来的内存。
诊断流程
1. symmwin中inline中执行9b,a
2. 运行health check2. 如果有坏盘，会出现在bad FRUs ，其中suspected是怀疑为故障
点中报错一行右报错右边的replace，会启动更换脚本。
主机管理软件Solution Enable
symdisk -sid xxx -failed list 查看是否有坏盘
symevent -sid xxx -all list 查看所有报错，电源电池
DMX 学习笔记
远程管理
使用EMC remote可以远程连接到控制台
可以关闭防火强 private把勾去掉，关掉防火墙，然后可以连接SP控制台后面的网口，连接外网的网线
主机管理软件Solution Enable （SE）
symdisk -sid xxx -failed list 查看是否有坏盘
symevent -sid xxx -all list 查看所有报错，电源电池
对于DMAX主机划盘 使用symmask、对VMAX主机使用symaccess
主机查看fc端口命令
symcfg -sid xxx list -dir all -port 查看FA的WWN (DMX3/4)
symmask -sid xxx list login dmx (DMX3/4)
symaccess -sid xxx list login (VMAX)
PowerPath命令
powermt display
powermt display dev=allpowermt watch
powermt display every=1分析流程
登陆symmwin
在inline 里执行9B,A
然后跑个health check 菜单：procedures菜单->procedure Wizards->RTS/CEs serivice -> Key to seccess查看备件号 environmetal --> VPD
procedures菜单中 environmetal tools，运行run health check按钮，能看到电源、风扇、卡、SPS灯状态，看不到硬盘，如果检查硬盘需要health check改bin思路
symmwin中，file菜单，先IMPL form ....，再save bin file，用改bin的工具修改，然后再通过symmwin的脚本procedure Wizards导入bin 配置
维护注意
1.DMX、VMAX要经常主动检查
2.常见故障Driector卡，一定要检查针脚，否则顶坏了针脚，更换背板需要停机并且非常复杂。更换时需要上下同步进入。
3. Driector1是安装slot0上，Driector2安装在slot1，DA1和和DA16是一对，满足17法则
3.system bay里风险最高的是XCM，XCM坏2个，或者换的有问题，会导致存储无法使用，更换时需要注意
4.更换DAE的power supply需要注意，有可能会更换1个时，导致1个电源也掉电，导致下面15个盘离线
5. 更换控制台服务器，需要用以前的硬盘，然后做些修正
6.KVM的UPS故障会亮红灯，换078-000-053、但不影响使用，开的时候多按几秒钟
7.SPS在后面看A是右边，B是左边
8.遇到loop issue ，在E7里看到盘全都drop掉了，需要用inline command去手动一个个拉起来
9.电池60斤，更换时注意安全
性能慢、链路检查
最近有没有什么变化，例如数据库、拓扑
存储端SymmWin里跑个health check博科光纤交换机检查光强：sfpshow 3 -f |grep Power，以及porterrshow然后portstatsclear <?>清除错误，查看有没有积累
思科交换机检查光强
主机检查光纤链路： powermt display 系统日志：AIX查看errpt，linux 查看/var/adm/syslog/syslog.log
存储inline检查9b,a ，端口错误回有大量XX3E报错，FC,BKAD,STAT检查光强
产品系列区别
DMX3硬盘通道速率是2GB，system bay的电池078-000-054
DMX4硬盘通道速率是4GB，system bay的电池078-000-050
DMX3、DMX4的storage bay的电池都是078-000-050/086
DMX-1500,2500,3500,4500区别在于DA卡的数量，最大支持硬盘数量、内存大小等，1500是1对DA卡，2500是2对DA卡。。。。。
DMX-950 FEBE卡集成了FA卡和DA卡的BA（back adapter）功能，而DMX3、DMX4的FA、DA的back adapter都是独立的。1&2 or 15&16如果都是DD（DEAD），那么应该是FEBE卡坏了。
有些备件需要监控，
用户名权限
PSE权限最高failed一个bad FRU
PE权限
CE权限最低，换热备盘
部件
后端卡（Back Adapter，设备背面，包含FA、DA、XCM）
FA：FC adapter（更换时选脚本的replace director...）
针对FA的操作：f0,ce,0 （FA enable）、f0,ce,0f （FA disable），Disable后显示为=
DA：disk adapter，DA的端口ABCD是从下向上，连到LCC上 (更换时选脚本的replace a director..._)
前端卡（Director Adapte，设备正面）
设备前面对应FA的DA的是前端卡：Director Adapter，有时前端卡会死掉，前面LED任何不显示了，需要更换。更换前端卡时需要按照流程严格完成一系列复杂操作。
XCM：内部通讯卡，控制和通讯所有部件，相当于设备的Switch，有2个冗余
DAE PS：更换电源后2分钟要插回去，不要插反了
SPS：更换电池时，按开关时，眼睛里电池远一点，使用菜单Add/replace power/SPS
LCC：Link control card，可以最多接15块盘
如果显示DD，90%不需要更换前端卡，可能时LCC或者多块硬盘故障，一般完全故障的情况时直接看不到了前端卡。
数据流向：主机->FA->内存(read miss, read hit, write hit, wirte miss)->DA-LCC-硬盘
名词
BCV 同步，原卷和目标卷的同步，raid5一般是目标卷
先化分mirror，再建立meta（条带化）
SRDF 远程存储之间的复制功能
./syscfg discover 和 ./symcfg list 查看本地存储和远程存储
INLINE检查
DMX3、4的inline命令
检查全部：9b,a
检查硬盘：A7,nrwd；A7,hots，EB, E7
9b,a 检查总体状态，其中下面显示内容解释
0473 坏盘，使用A7,NRWD和A7,HOTS，选中director后：eb, e7
4780 电源故障
282C 内存数据和硬盘数据不一致，就很难搞定了，尽早发现硬盘故障可以避免
报错颜色代表时间不同
如果XX3E、XX2F大量错误，说明系统不健康
如果大量出现红色和紫色的错误，需要关注，紫色和红色满屏都是就有故障
双击报错，点亮报错后，敲入F8查看解释
检查硬盘
A7,NRWD、A7,hots，输出正常是...，如果有坏盘就.x.或者x..。有x的一列，最后会显示x坏盘的位置，比如C/08
有坏盘的时候，后面invaild 的M1和M2 invaled trcak有数字属于正常，M3显示0是正常的
查看raid5的坏盘是用a7,d5,ab
其中A7,NRWD；A7,hots输出中，看到DV（Device Volume），比如1E、20、2A之类的，其中拿一个20举例可以看成硬盘146GB 切分成20片，然后在跟别的盘的20片，第20个片做mirror，然后这个镜像后的DV名是20
换盘
在inline中，选中DA后输入EB,2F,,,0311 可以看到报错时间
a7,d5,<4b0> 其中4b0是EB,2F,,,0311最后一列的内容
a7,d,<4b0>
a7,开头的命令查看热备盘是不是已经完全顶上去了， invoke dynamic spare --> invaild track =0，执行replace disk drive（需要hot spare已经顶上去了）
如果0311执行invoke dynamic spare
如果坏的盘事hot spare，则执行replace spare disk
phsical view可以查找硬盘的物理位置
DMX不建议用的盘：101-000-111/112 （101-000-326 101-000-052）