构建高可用、高性能的 GPFS 集群

核心提示： 我们最后采用的方案是 , 增加一台配置较低，但可用性较高的服务器，构建高可用、高性能的 GPFS 集群(6)，并使用这第五台服务器上的一个 Raid 1 磁盘作为第三个 Failure Group 磁盘，总共 5 个节点采用 Node Quorum 方式，通过组合逻辑磁盘设备创建 GPFS

我们最后采用的方案是 , 增加一台配置较低，但可用性较高的服务器，并使用这第五台服务器上的一个 Raid 1 磁盘作为第三个 Failure Group 磁盘。总共 5 个节点采用 Node Quorum 方式。可以支持任意两台的服务器同时离线，任意一台存储的离线。

本项目的解决方案

通过以上的原理与可靠性分析，我们最终的设计方案如下。

硬件结构

硬件结构分三层，如下图（图 2）所示。

存储层： 采用 2 台 DS4700 存储，保证数据的完全的冗余备份。每台 DS4700 有两个控制器，保证了控制器的冗余以及链路的冗余。

SAN 存储网络层： 两台 SAN 交换机，保证 SAN 存储链路设备的完全冗余。

服务器层： 增加一台配置较低的服务器 , 对性能没有要求 , 但需要是可靠性较高的配置，一共 5 台服务器以实现 2N+1 的冗余。从新增加的服务器中划分出一个磁盘 ( 比如 lv)，设置为 Desc Only 的磁盘，以实现磁盘组的 2N+1 的冗余。每台服务器都有 2 个 HBA 卡，以及多个网卡，以保证链路冗余。

图 2 硬件框架图

本 GPFS 方案系统逻辑结构

GPFS 的逻辑结构如下图（图 3 ）所示。也基本分为三层。

GPFS 逻辑磁盘设备 ，由物理磁盘创建而成，按保存数据类型分为，meta-data，data，meta-data and data，Desc only 4 种。两个存储节点分别是 Failure Goup1 和 Failure Group2。用来存放数据文件。而 Disk5 只用来保存 GPFS 文件系统描述信息。

GPFS 文件系统设备 ，通过组合逻辑磁盘设备创建 GPFS 文件系统设备。此设备在 Linux 操作系统中相当于一个格式化好的硬盘分区，可以将其挂载到文件系统中。