在Linux上配置高可用集群文件系统指南

高可用集群文件系统可以确保在节点故障时仍能提供持续的文件访问服务。以下是几种主流解决方案的配置方法：

1. DRBD + Pacemaker + Corosync (传统方案)

步骤概述：

1. 安装必要软件包：

   # 在Ubuntu/Debian上
   sudo apt-get install drbd8-utils pacemaker corosync
   
   # 在RHEL/CentOS上
   sudo yum install drbd kmod-drbd84 pacemaker corosync
   

2. 配置DRBD：

   • 编辑/etc/drbd.conf： conf resource r0 { protocol C; on node1 { device /dev/drbd0; disk /dev/sdb1; address 192.168.1.1:7788; meta-disk internal; } on node2 { device /dev/drbd0; disk /dev/sdb1; address 192.168.1.2:7788; meta-disk internal; } }

3. 初始化并启动DRBD：

   sudo drbdadm create-md r0
   sudo drbdadm up r0
   sudo drbdadm primary --force r0
   sudo mkfs.ext4 /dev/drbd0
   

4. 配置Pacemaker/Corosync：

   • 编辑/etc/corosync/corosync.conf
   • 使用crm或pcs配置资源

2. GlusterFS (分布式方案)

配置步骤：

1. 安装GlusterFS：

   # Ubuntu/Debian
   sudo apt-get install glusterfs-server
   
   # RHEL/CentOS
   sudo yum install centos-release-gluster
   sudo yum install glusterfs-server
   

2. 启动服务：

   sudo systemctl start glusterd
   sudo systemctl enable glusterd
   

3. 配置信任池：

   sudo gluster peer probe node2
   

4. 创建卷：

   sudo gluster volume create gv0 replica 2 node1:/data/brick1 node2:/data/brick1
   sudo gluster volume start gv0
   

5. 挂载使用：

   mount -t glusterfs node1:/gv0 /mnt
   

3. Ceph (企业级分布式方案)

基本配置：

1. 安装Ceph：

   sudo apt-get install ceph ceph-mds ceph-common
   

2. 初始化集群：

   ceph-deploy new node1 node2 node3
   

3. 安装OSD：

   ceph-deploy osd create node1:/dev/sdb node2:/dev/sdb node3:/dev/sdb
   

4. 部署MDS：

   ceph-deploy mds create node1
   

5. 创建文件系统：

   ceph osd pool create cephfs_data 128
   ceph osd pool create cephfs_metadata 128
   ceph fs new cephfs cephfs_metadata cephfs_data
   

4. GFS2 + CLVM (红帽方案)

配置步骤：

1. 安装软件包：

   sudo yum install gfs2-utils lvm2-cluster
   

2. 配置集群LVM：

   sudo lvmconf --enable-cluster
   

3. 创建共享卷组：

   sudo vgcreate --clustered y shared_vg /dev/sdb
   

4. 创建GFS2文件系统：

   sudo mkfs.gfs2 -p lock_dlm -t cluster:gfs2 -j 3 /dev/shared_vg/lv1
   

高可用配置建议

1. 网络配置：

   • 使用专用网络进行集群通信
   • 配置多路径网络以防单点故障

2. 监控：

   • 实现集群健康监控
   • 设置自动告警机制

3. 测试：

   • 定期进行故障转移测试
   • 验证数据一致性

4. 备份：

   • 即使有高可用也要定期备份
   • 考虑异地备份方案

根据您的具体需求(性能、容量、预算等)选择合适的方案。对于大多数企业环境，Ceph或GlusterFS是较好的选择，而传统企业可能更倾向于GFS2或DRBD方案。