EMC VMAX 定位故障硬盘物理位置

EMC VMAX– 定位故障硬盘物理位置

https://blog.csdn.net/weixin_30911809/article/details/102243288

为了充分理解本文，我建议您先阅读"EMC VMAX – 20/40K 后端连接性"。

通过"Unisphere"完成 VMAX“健康检查”后，已提示某块硬盘发生故障：

运行命令 symdisk list -failed 将显示故障磁盘的详细信息（-v 可获取更详细信息）：

您还可以通过执行命令 symdisk list -isspare 检查故障磁盘是否已被备用盘替换：

根据提供的信息确定硬盘位置：

‘Ident/Symb' = '9B' 标识了 Director 以及硬盘在后端连接的 MOD。因此，在此阶段我们可以得知该硬盘连接到 Director 9 (Engine5)。
在 Engine5(9&10) 的两个 Director 上，每个 Director 都有两个后端 IO 模块（MOD0 & MOD1），其中 MOD0 具有连接 A0,A1,B0,B1，而 MOD1 具有连接 C0,C1,D0,D1。偶数和奇数 Director 上的 MOD0 都连接到 DAE's 9,13,10,14，而两个 Director 上的 MOD1 则连接到 DAE's 11,15,12,16。Engine5 上的 8 条冗余环路连接如下：
DAE9=LOOP0 (A0)
DAE10=LOOP2 (B0)
DAE11=LOOP4 (C0)
DAE12=LOOP6 (D0)
DAE13=LOOP1 (A1)
DAE14=LOOP3 (B1)
DAE15=LOOP5 (C1)
DAE16=LOOP7 (D1)

‘Int' = 'C' 代表接口，这是 MOD 上使用的端口。
C = Port 0
D = Port 1
到目前为止，我们可以确定该硬盘位于 LOOP2 (9B 0)。

'TID' = '1' 指的是目标 ID，即环路上的磁盘位置。

从所有这些信息中，我们可以确定故障硬盘（'9B 0 1'）的位置为'Drive Bay-1A, DAE-10, Disk-01'：

如果您可以访问 SymmWin，则可以切换磁盘 LED：

https://davidring.ie/2013/12/12/emc-vmax-2040k-back-end-connectivity/

EMC VMAX – 20/40K BACK-END CONNECTIVITY

每个引擎有两个 Director，每个 Director 包含两个后端光纤通道 I/O 模块（标记为 MOD0 & MOD1）。这些模块（也称为 DA – Disk Adapters）为硬盘提供光纤通道连接性。如您从下图所见，后端 IO 模块上只有一个物理端口，该单端口为四端口 SFP 端口（QSFP）。连接电缆具有单个铜质 QSFP 收发器连接器，由 4 条聚合到单个 QSFP 端口的光纤通道电缆组成。而在硬盘盒一侧，这 4 条光纤通道电缆分支出来作为独立连接，连接到链路控制卡（LCC），稍后将看到。每个 DAE 包含两张 LCC 卡（LCCA & LCCB）。

下图中的引擎图提供了引擎上的端口布局，如您所见，下侧的控制器是奇数控制器，上侧的控制器是偶数控制器。在两个控制器上，每个控制器都有两个后端 IO 模块（MOD0 和 MOD1），后端 IO 模块 MOD0 具有连接 A0、A1、B0、B1，而 MOD1 具有连接 C0、C1、D0、D1。

以下是标准 VMAX 存储柜配置（完全填充，8 个引擎）且包含 10 个存储柜的示例，视图如同从 VMAX 正面观察。在此完全填充的配置中，您有四个直连存储柜（Bay 1's）和六个级联存储柜（2's & 3's）。每个象限代表来自单个引擎（2 个控制器）的连接性。

为了简化此示例，我将专注于 VMAX 中的第一个引擎，即 Engine 4。理解一个引擎如何连接到后端将有助于理解其余的后端连接性，因为相同的规则适用。下面是'Disk Bay 1A'（后部），其中 DAE 1-8 已填充，这些是 Engine4 直接连接的 DAE：

Engine 4 后端 IO 模块和 QSFP 电缆：这是引擎上的四个切片（MOD's），每个切片提供 4x4Gig FC 链路（环路）

我们可以从下图中标签看到，Engine4 的偶数控制器（DIR8）连接到 LCCB，奇数控制器（DIR7）连接到 LCCA。偶数和奇数控制器上的 MOD0 都连接到 DAE 1,5,2,6，而两个控制器上的 MOD1 都连接到 DAE 3,7,4,8。

检查 DAE 1 的连接性，您可以看到来自偶数控制器（Dir8）的 MOD0 连接到 LCCB 的主端口，来自奇数控制器（Dir7）的 MOD0 连接到 LCCA 的主端口。请注意，所有来自偶数控制器的连接都连接到 LCCB，所有奇数控制器都连接到 LCCA 卡。在环路配置中，您可以看到 DAE1 位于 Loop0。引擎总共有 8 个冗余环路：
DAE1=LOOP0 (A0(P1))
DAE2=LOOP2 (B0(P3))
DAE3=LOOP4 (C0(P1))
DAE4=LOOP6 (D0(P3))
DAE5=LOOP1 (A1(P2))
DAE6=LOOP3 (B1(P4))
DAE7=LOOP5 (C1(P2))
DAE8=LOOP7 (D1(P4))

这是 Engine 4 的完整连接图：同时注意以下转换关系，MOD0 的 A0=P1、A1=P2、B0=P3、B1=P4，同样地，MOD1 的 C0=P1、C1=P2、D0=P3、D1=P4

至此完成了 Engine 4 直连后端布线的示例。添加更多引擎时适用相同的规则。由于这种设计，后端布线为每个驱动器提供了跨控制器的双重访问，消除了任何单点故障（8 个冗余环路）。

总结：
• 8 个冗余环路 – A0,A1,B0,B1,C0,C1,D0,D1
• LCCA 连接到奇数编号的控制器
• LCCB 连接到偶数编号的控制器
• 每个引擎支持一个独立的八分区（octant）
• 每个 Slic（MOD）具有 4x4Gig FC 链路（每个引擎 16 个后端 FC 链路）

注意：请参考 EMC 文档以获取与您特定配置相关的更详细信息。根据引擎数量和直连/级联配置的不同，您的布线扩展方式可能会有所不同。