歡迎來到Linux教程網
Linux教程網
Linux教程網
Linux教程網
Linux教程網 >> Linux基礎 >> Linux教程 >> Ubuntu上搭建Hadoop環境(附實例)

Ubuntu上搭建Hadoop環境(附實例)

日期:2017/2/28 16:01:48   编辑:Linux教程

我們對Hadoop有所了解了,特別是昨天對MapReduce的部分源碼進行了分析,知道了MapReduce是怎麼運作的,是不是手癢了,很想自己安裝Hadoop吧(其實是我自己手癢了...)?那我們今天就先不分析源碼,我們就來安裝Hadoop(單機集群模式)。以下所有操作均在Ubuntu 11.04下完成。

安裝前要做一件事——添加一個名為hadoop到系統用戶,專門用來做Hadoop測試。

~$ sudo addgroup hadoop

~$ sudo adduser --ingroup hadoop hadoop

現在只是添加了一個用戶hadoop,它並不具備管理員權限,因此我們需要將用戶hadoop添加到管理員組:

~$ sudo usermod -aG admin hadoop

好了,現在可以開始安裝 :-)

1.安裝ssh

由於Hadoop用ssh通信,作為一個安全通信協議,使用時需要密碼,因此我們要設置成免密碼登錄(除非你的手真的非常癢,每次都喜歡輸入密碼,一兩台機器還可以,要是幾十上百台呢?沒密碼擔心安全問題?自己去看openssh吧,記得要弄懂裡面的加密算法哦。)

~$ sudo apt-get install openssh-server

生成私鑰和公鑰:

[email protected]:~$ ssh-keygen -t rsa -P ""

Copyright © Linux教程網 All Rights Reserved