在centos系統上監控hdfs（hadoop分布式文件系統）狀態有多種途徑。本文將介紹幾種常用方法，助您選擇最合適的方案。
1. 利用hadoop自帶的Web ui
Hadoop自帶的Web界面提供集群狀態監控功能。
步驟：
- 確保Hadoop集群已啟動并運行。
- 訪問Web UI： 在瀏覽器中輸入http://
:50070（Hadoop 2.x）或http:// :9870（Hadoop 3.x）。默認用戶名和密碼通常為hdfs/hdfs。
2. 命令行工具監控
常用命令：
- 查看NameNode狀態： 使用hdfs dfsadmin -report命令，獲取集群整體狀態，包括DataNode數量、容量使用情況等信息。
- NameNode健康狀況檢查： hdfs dfsadmin -report -health命令可顯示NameNode的健康狀態。
- DataNode狀態及損壞塊檢測： hdfs dfsadmin -report –listCorruptFileBlocks命令列出損壞的文件塊。
3. 第三方監控工具
許多第三方監控工具，如Prometheus、grafana、Nagios等，也能有效監控HDFS集群。
prometheus和Grafana示例：
- 安裝Prometheus： 下載并解壓Prometheus，運行./prometheus –config.file=prometheus.yml啟動服務。
- 配置Prometheus監控HDFS： 編輯prometheus.yml，添加HDFS監控配置，例如：
scrape_configs: - job_name: 'hdfs' static_configs: - targets: ['<namenode-host>:50070']
- 安裝Grafana： 下載并解壓Grafana，運行./bin/grafana-server啟動服務。
- Grafana配置： 訪問http://
:3000，使用默認用戶名密碼admin/admin登錄，添加Prometheus數據源，并創建儀表盤監控HDFS狀態。
4. 利用Hadoop JMX接口
Hadoop組件（NameNode、DataNode等）提供JMX接口，可通過JMX客戶端工具（jconsole、VisualVM等）監控。
jconsole示例：
- 啟動jconsole： 運行jconsole命令。
- 連接Hadoop進程： 在jconsole中選擇要監控的Hadoop進程（NameNode或DataNode），查看相關的MBean信息。
選擇以上方法中適合您需求的方案，即可有效監控centos系統上的HDFS集群狀態。
