驗證方式就很簡單了,首先我們先來執(zhí)行一個HDFS格式的命令,這個在上一篇我們已經(jīng)分析過了,因為,咱們這里改成完全分布式的集群,所以這里需要重新格式。
bin/hadoop namenode -format
首先,我們來驗證一下整個集群的HDFS是否正??捎?。
啟動整個集群的HDFS,在Master機器上面,用hadoop用戶操作,命令如下:
start-dfs.sh

我們通過瀏覽器來查看整個集群的HDFS狀態(tài),地址為:http://192.168.1.50:50070/dfshealth.html#tab-overview

可以看到,當(dāng)前我們的Hadoop集群的HDFS集群已經(jīng)成功啟動,然后我們來看整個集群的存儲和節(jié)點數(shù);

從上面的截圖我們可以看到,當(dāng)前的集群存在四個DataNode節(jié)點,就是剛才我們配置的Slave文件的IP.這說明我們配置的集群HDFS能夠正常運行。
然后,我們來驗證一下整個集群的YARN分布式計算框架是否正??捎?。
同樣的方式,我們首先來啟動Yarn.腳本如下:
start-yarn.sh

我們通過瀏覽器來查看整個集群的Hadoop集群狀態(tài),地址為:http://192.168.1.50:8088/

可以看到,當(dāng)前的Hadoop集群已經(jīng)存在四個正在運行的節(jié)點,而且跑的很Happy.后面的文章我將跟大家分析如何使用這個Hadoop集群。
結(jié)語
此篇先到此吧,關(guān)于Hadoop大數(shù)據(jù)集群的搭建后續(xù)依次介紹,比如利用Zookeeper搭建Hadoop高可用平臺、Map-Reducer層序的開發(fā)、Hive產(chǎn)品的數(shù)據(jù)分析、Spark的應(yīng)用程序的開發(fā)、Hue的集群壞境的集成和運維、Sqoop2的數(shù)據(jù)抽取等,有興趣的童鞋可以提前關(guān)注。
本篇主要介紹了搭建一個完全分布式的Hadoop集群,后面我們會逐漸完善它,我會教你如何一步步的使用完全分布式的Hadoop集群,然后教你如何使用它,騷年...不要捉急...讓思維飛一會...
有問題可以留言或者私信,隨時恭候有興趣的童鞋加大數(shù)據(jù)平臺深入研究。共同學(xué)習(xí),一起進步。
文章的最后給出上一篇的基礎(chǔ)篇:
大數(shù)據(jù)系列(1)——Hadoop集群壞境搭建配置
大數(shù)據(jù)系列(2)——Hadoop集群壞境CentOS安裝
如果您看了本篇博客,覺得對您有所收獲,請不要吝嗇您的“ 推薦 ”。