Hadoop集群部署有幾種模式？Hadoop集群部署方法介紹

Hadoop集群的部署方式方式分為三種，分別是獨(dú)立模式（Standalone mode）、偽分布式模式（Pseudo-Distributed mode）、完全分布式模式（Cluster mode），具體介紹如下。

（1）獨(dú)立模式：又稱為單機(jī)模式，在該模式下，無需運(yùn)行任何守護(hù)進(jìn)程，所有的程序都在單個(gè)JVM上執(zhí)行。獨(dú)立模式下調(diào)試Hadoop集群的MapReduce程序非常方便，所以一般情況下，該模式在學(xué)習(xí)或者開發(fā)階段調(diào)試使用。

（2）偽分布式模式：Hadoop程序的守護(hù)進(jìn)程運(yùn)行在一臺節(jié)點(diǎn)上，通常使用偽分布式模式用來調(diào)試Hadoop分布式程序的代碼，以及程序執(zhí)行是否正確，偽分布式模式是完全分布式模式的一個(gè)特例。

（3）完全分布式模式：Hadoop的守護(hù)進(jìn)程分別運(yùn)行在由多個(gè)主機(jī)搭建的集群上，不同節(jié)點(diǎn)擔(dān)任不同的角色，在實(shí)際工作應(yīng)用開發(fā)中，通常使用該模式構(gòu)建企業(yè)級Hadoop系統(tǒng)。

在Hadoop環(huán)境中，所有服務(wù)器節(jié)點(diǎn)僅劃分為兩種角色，分別是master（主節(jié)點(diǎn)，1個(gè)）和slave（從節(jié)點(diǎn)，多個(gè)）。因此，偽分布模式是集群模式的特例，只是將主節(jié)點(diǎn)和從節(jié)點(diǎn)合二為一罷了。

接下來，本書將以前面安裝的三臺虛擬機(jī)為例，闡述完全分布模式Hadoop集群的安裝與配置方法，具體集群規(guī)劃如圖1所示。

圖1 Hadoop集群規(guī)劃

從圖1可以看出，當(dāng)前規(guī)劃的Hadoop集群包含一臺master節(jié)點(diǎn)和兩臺slave節(jié)點(diǎn)。這里，將前面安裝的Hadoop01作為Master節(jié)點(diǎn)，Hadoop02和Hadoop03作為Slave節(jié)點(diǎn)。

猜你喜歡：

Redis集群方案怎么做？Redis集群有哪些方案?

Hadoop集群如何通過UI界面實(shí)現(xiàn)管理和查看

Hadoop有幾種運(yùn)行模式？各種模式都有哪些特性？    

黑馬程序員Python+大數(shù)據(jù)培訓(xùn)