在centos上監控hdfs并設置告警可以通過多種工具和方法實現。以下是一些常用的監控工具以及配置告警的方法：

常用監控工具

• Ganglia：這是一個開源的分布式監控系統，適用于大規模節點監控和實時性能分析。
• Prometheus：一個開源的監控和告警系統，結合grafana可以提供強大的時間序列數據監控和可視化功能。
• zabbix：一個企業級的開源監控解決方案，支持對hdfs集群的各種關鍵性能指標進行監控。
• Datadog：一個商業監控和分析平臺，提供全面的監控功能，包括應用性能監控、基礎設施監控和日志管理。
• Ambari：由apache開源的hadoop集群管理工具，提供集群配置、部署、監控和管理等功能。

告警配置示例

1. 通過CM（cloudera Manager）配置告警：

• 在CM平臺中配置“Mail Server”以進行郵件告警。
• 配置郵件服務器信息，如協議、主機名、用戶名、密碼、收件人等。
• 發送測試警報以驗證配置是否正常。
• 通過模擬agent故障來驗證郵件告警功能。

2. 使用Hadoop Exporter和Prometheus進行監控和告警：

• 安裝Hadoop Exporter以暴露Hadoop的JMX指標。
• 配置prometheus以抓取Hadoop相關指標。
• 使用Grafana創建儀表盤，并設置告警規則。

3. 配置HDFS文件數和目錄條目數量告警：

• 在fusioninsight Manager中配置監控項，如HDFS文件數和目錄條目數量。
• 設置告警閾值和通知方式，如郵件或短信。

4. 監控DataNode非堆內存使用率：

• 配置DataNode的jvm參數以監控非堆內存使用率。
• 設置告警閾值，當內存使用率超過閾值時觸發告警。

通過上述工具和配置方法，可以有效地監控centos下HDFS的運行狀態，并在出現異常時及時收到告警，從而快速響應和處理問題，確保系統的穩定性和高效性。