在centos系統上搭建高可用hdfs集群，需要仔細規劃和配置多個關鍵組件。以下步驟概述了搭建過程：

1. Java環境準備: 所有節點必須安裝并配置相同版本的Java運行環境。

2. hadoop環境部署: 下載Hadoop發行版，解壓到指定目錄，并設置必要的環境變量，例如HADOOP_HOME。

3. 核心hdfs配置文件配置: 正確配置以下關鍵文件：

   • core-site.xml: 定義HDFS默認文件系統以及JournalNode的地址。
   • hdfs-site.xml: 此文件包含HDFS高可用性設置，例如：dfs.replication (數據塊副本數), dfs.namenode.rpc-address (NameNode rpc地址), dfs.namenode.http-address (NameNode http地址), dfs.namenode.shared.edits.dir (共享編輯日志目錄), dfs.client.failover.proxy.provider (客戶端故障轉移代理提供者) 等。 這些參數需要根據實際集群環境進行調整。

4. zookeeper集群搭建: ZooKeeper作為NameNode狀態監控和故障轉移協調器，需要在所有節點上安裝并配置一個ZooKeeper集群。

5. NameNode初始化: 在主NameNode節點上執行hdfs namenode –format命令進行格式化。隨后，啟動主NameNode和備用NameNode (Standby NameNode)。

6. HDFS集群啟動: 使用start-dfs.sh腳本啟動整個HDFS集群。

7. 高可用性驗證: 通過訪問NameNode的Web ui或使用命令行工具驗證集群是否正常運行以及高可用性是否生效。 檢查NameNode的角色切換是否正常。

8. 重要注意事項:

   • 保證所有節點的配置文件完全一致。
   • 配置ssh免密登錄，方便節點間無縫通信。
   • 任何配置更改后，務必同步到所有節點。

免責聲明: 以上步驟提供了一個通用的指導框架。具體的配置細節可能因Hadoop和ZooKeeper版本以及您的特定環境而異。 請務必參考您所使用的Hadoop和ZooKeeper版本的官方文檔，以確保配置的準確性和兼容性。 不正確的配置可能導致數據丟失或集群不穩定。