一、系統(tǒng)準(zhǔn)備

1.?環(huán)境要求

• 操作系統(tǒng)：
  • RHEL 7.4/7.5/7.6/8.x、SUSE Linux Enterprise Server 12/15 等。
  • 所有節(jié)點(diǎn)需保持相同內(nèi)核版本（uname -r檢查）。
• 硬件：
  • 至少 3 個(gè)節(jié)點(diǎn)（1 個(gè)管理節(jié)點(diǎn) + 2 個(gè)數(shù)據(jù)節(jié)點(diǎn)）。
  • 每節(jié)點(diǎn)至少 2 塊磁盤(pán)（1 塊系統(tǒng)盤(pán)，1 塊用于 GPFS 數(shù)據(jù)）。
  • 雙網(wǎng)卡（管理網(wǎng)絡(luò)：192.168.1.0/24，數(shù)據(jù)網(wǎng)絡(luò)：10.0.0.0/24）。

2.?基礎(chǔ)配置

# 1. 關(guān)閉防火墻和SELinux  
systemctl disable --now firewalld  
sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config  # 2. 配置主機(jī)名解析（所有節(jié)點(diǎn)）  
cat >> /etc/hosts << EOF  
192.168.1.101  node1.mygpfs.com node1  
192.168.1.102  node2.mygpfs.com node2  
192.168.1.103  node3.mygpfs.com node3  
EOF  # 3. 配置NTP時(shí)間同步（所有節(jié)點(diǎn)）  
yum install ntp -y  
systemctl enable --now ntpd  
ntpdate time.nist.gov  

二、GPFS 軟件安裝

1.?上傳并解壓安裝包

# 以GPFS 5.1.3為例  
mkdir /opt/gpfs && cd /opt/gpfs  
tar -zxvf Spectrum_Scale_Advanced-5.1.3.0-x86_64-Linux-install.tar.gz  
cd Spectrum_Scale_Advanced-5.1.3.0-x86_64-Linux-install  

2.?預(yù)檢查與安裝

# 1. 預(yù)檢查（所有節(jié)點(diǎn)）  
./prep-gpfs -a -n node1,node2,node3  # 2. 安裝服務(wù)器組件（管理節(jié)點(diǎn)和數(shù)據(jù)節(jié)點(diǎn)）  
./install-gpfs -a -n node1,node2,node3  # 3. 安裝客戶端組件（僅客戶端節(jié)點(diǎn)）  
./install-gpfs -c -n client1,client2  

三、集群初始化與配置

1.?創(chuàng)建集群配置文件

# 在管理節(jié)點(diǎn)（node1）創(chuàng)建cluster.conf  
cat > /tmp/cluster.conf << EOF  
cluster {  clusterName="mygpfs"  node {  nodeName=node1  quorumNode=1  adminNode=1  nsServerNode=1  nodeAddr=192.168.1.101  nodeId=1  interface {  interfaceName=eth0  ipAddr=192.168.1.101  subnetMask=255.255.255.0  }  interface {  interfaceName=eth1  ipAddr=10.0.0.101  subnetMask=255.255.255.0  }  }  # 重復(fù)配置node2和node3（修改nodeName、nodeAddr、nodeId等）  
}  
EOF  

2.?初始化集群

# 在管理節(jié)點(diǎn)執(zhí)行  
mmcrcluster -c /tmp/cluster.conf -N node1,node2,node3  
mmstartup -a  # 啟動(dòng)所有節(jié)點(diǎn)的GPFS服務(wù)  
mmgetstate -a  # 檢查節(jié)點(diǎn)狀態(tài)  

四、存儲(chǔ)配置與文件系統(tǒng)創(chuàng)建

1.?定義存儲(chǔ)池和設(shè)備

# 假設(shè)每節(jié)點(diǎn)有/data1磁盤(pán)分區(qū)  
mmcrpool gpfsfstest-data -N all  
mmcrdev -v yes -P gpfsfstest-data /dev/sdb 

2.?創(chuàng)建并掛載文件系統(tǒng)

# 創(chuàng)建文件系統(tǒng)（RAID-0，條帶大小256KB）  
mmcrfs gpfsfstest -F -A yes -Q yes \  -r 0 -R 0 -s 256K -m 2 -M 2 \  -B 4K -T /gpfs/gpfsfstest  # 掛載文件系統(tǒng)（所有節(jié)點(diǎn)）  
mmmount gpfsfstest -a  

五、驗(yàn)證與測(cè)試

# 1. 檢查文件系統(tǒng)狀態(tài)  
mmlsmount gpfsfstest -L  # 2. 創(chuàng)建測(cè)試文件  
echo "Hello GPFS" > /gpfs/gpfsfstest/test.txt  # 3. 驗(yàn)證數(shù)據(jù)冗余（如使用RAID-1）  
mmrepquorum gpfsfstest 

六、客戶端訪問(wèn)配置

# 1. 客戶端節(jié)點(diǎn)安裝GPFS客戶端  
yum install gpfs.gskit gpfs.clients -y  # 2. 配置自動(dòng)掛載（/etc/fstab）  
node1:/gpfs/gpfsfstest /mnt/gpfs nfs4 defaults 0 0  # 3. 掛載文件系統(tǒng)  
mount /mnt/gpfs

七、高級(jí)配置建議

1. 性能優(yōu)化

# 調(diào)整條帶參數(shù)（根據(jù)應(yīng)用IO特性）  
mmchfs gpfsfstest -B 8K  # 塊大小8KB 

? ? 2.數(shù)據(jù)備份

# 定期創(chuàng)建文件系統(tǒng)快照  
mmcrsnapshot gpfsfstest daily_snap 

3.監(jiān)控與維護(hù)

# 查看系統(tǒng)健康狀態(tài)  
mmhealth node show

八、常見(jiàn)問(wèn)題排查

1. 節(jié)點(diǎn)無(wú)法加入集群：

   • 檢查 SSH 密鑰是否正確分發(fā)（mmkeyserv status）。
   • 確認(rèn)防火墻規(guī)則（開(kāi)放 TCP 10111-10120 端口）。

2. 文件系統(tǒng)掛載失敗：

   • 檢查mmgetstate狀態(tài)，確保所有節(jié)點(diǎn)正常。
   • 查看/var/adm/ras/mmfs.log.latest日志。

3. 性能問(wèn)題：

   • 使用mmperfmon工具分析 IO 模式。
   • 調(diào)整mmchfs參數(shù)優(yōu)化條帶策略。

?

?