成人午夜视频全免费观看高清-秋霞福利视频一区二区三区-国产精品久久久久电影小说-亚洲不卡区三一区三区一区

linux下hadoop的安裝和配置過程

這篇文章主要講解了“l(fā)inux下hadoop的安裝和配置過程”,文中的講解內(nèi)容簡單清晰,易于學(xué)習(xí)與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學(xué)習(xí)“l(fā)inux下hadoop的安裝和配置過程”吧!

成都創(chuàng)新互聯(lián)-專業(yè)網(wǎng)站定制、快速模板網(wǎng)站建設(shè)、高性價比湯旺網(wǎng)站開發(fā)、企業(yè)建站全套包干低至880元,成熟完善的模板庫,直接使用。一站式湯旺網(wǎng)站制作公司更省心,省錢,快速模板網(wǎng)站建設(shè)找我們,業(yè)務(wù)覆蓋湯旺地區(qū)。費用合理售后完善,10年實體公司更值得信賴。

1,安裝linux
本文假設(shè)從裸機開始,所以要先裝linux。本人是ubuntu對支持者,所以裝的是ubuntu,廢話沒有,很容易就裝好了。在安裝過程中,要注意所有節(jié)點對主機名應(yīng)該有規(guī)律,比如node0, node1, node2 ...
2,準備
下面對軟件對安裝,全都使用了apt,這個軟件需要互聯(lián)網(wǎng)鏈接,如果你對網(wǎng)速極慢,或者根本鏈接不到外部網(wǎng)絡(luò)(這個現(xiàn)象在教育網(wǎng)內(nèi)很常見),可以從一個能上網(wǎng)對ubuntu電腦上的/var/cache/apt/archives文件夾里deb文件出來安裝(什么?你問我這個文件夾里為什么沒有想要的包,這個文件夾是apt對緩存文件夾,想要里面有你想要對東西,不用我提醒你應(yīng)該怎么辦了吧)。
ubuntu默認已經(jīng)裝好了openssh-client,需要安裝openssh-server。命令如下:

代碼如下:


sudo apt-get install openssh-server


然后是jdk:

代碼如下:


sudo apt-get install default-jdk



3,配置網(wǎng)絡(luò)
如果你的節(jié)點們可以通過dhcp服務(wù)器獲得ip,我個人建議,這樣做,原因是簡單,不用怎么配置就搞定了?;蛘呖梢允褂渺o態(tài)ip,作為一個牛b的linux大牛,應(yīng)該可以通過一行命令來設(shè)置靜態(tài)ip,但是我不會。我通常都是在gnome提供的網(wǎng)絡(luò)管理器來設(shè)ip對。如果你用對linux里沒有圖形界面,那樣請google。
設(shè)置好了ip地址之后,記憶在/etc/hosts文件中給每個節(jié)點起個名字,最好就是各自對主機名,這樣有利于下面對配置和管理。
hadoop要求各節(jié)點間可以不需要輸入密碼就能用ssh互相登錄。我使用了比官方方法簡單一點方法來設(shè)置,但是據(jù)說安全性有點兒問題。下面是方法:
在某個節(jié)點上執(zhí)行如下命令:

代碼如下:


rm -rf ~/.ssh

代碼如下:


ssh-keygen -t rsa


這個命令之后需要多按幾次回車,知道再次出現(xiàn)命令提示符。當然,這個做法也不是很安全,里面有個輸入key的地方,官方的建議是,輸入一首歌的歌詞,呵呵,這個建議很搞笑。當然在我的步驟中,這個key就是空值了。

代碼如下:


cat ~/.ssh/id_rsa.pub >> authorized_keys


然后把整個.ssh文件夾考到所有對節(jié)點上,具體方法可以使用scp命令,具體命令由于和具體環(huán)境有關(guān),下面不寫。

這樣網(wǎng)絡(luò)就設(shè)置對差不多了。
4,安裝hadoop
解壓,這個比較簡單,命令不寫。解壓對位置最好每個hadoop都一樣,不一樣有什么后果,我沒試過。
之后要進行一些配置,首先進入解壓后目錄對conf文件夾,要修改對配置文件包括hadoop-env.sh hadoop-site.xml masters slaves
hadoop-env.sh中要uncomment下面一行:

代碼如下:


export JAVA_HOME=/home/hadoop/jdk1.6.0_16/


當然具體的值,也要根據(jù)具體情況進行更改。
接下來是hadoop-site.xml,下面是我的文件內(nèi)容。

代碼如下:


<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://node0:6000</value>
</property>
<property>
<name>mapred.job.tracker</name>
<value>node0:6001</value>
</property>
</configuratiron>


這個例子很直白,不解釋。

masters里面是jobtracker和namenode所在節(jié)點的主機名或者ip地址,我的masters文件里只有一行,當然如果你想要設(shè)置多個節(jié)點作為主節(jié)點,也可以。
slaves里面是所有tasktracker和datanode對主機名或ip地址。
5,運行
先進入hadoop安裝文件夾。然后依次運行如下命令:

代碼如下:


bin/hadoop namenode -format
bin/start-all.sh


不出意外的話,現(xiàn)在hadoop就可以使用了。

感謝各位的閱讀,以上就是“l(fā)inux下hadoop的安裝和配置過程”的內(nèi)容了,經(jīng)過本文的學(xué)習(xí)后,相信大家對linux下hadoop的安裝和配置過程這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是創(chuàng)新互聯(lián),小編將為大家推送更多相關(guān)知識點的文章,歡迎關(guān)注!

網(wǎng)站題目:linux下hadoop的安裝和配置過程
URL鏈接:http://jinyejixie.com/article46/gcegeg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供微信公眾號網(wǎng)站內(nèi)鏈、App設(shè)計網(wǎng)站設(shè)計公司、小程序開發(fā)定制開發(fā)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

小程序開發(fā)
呼图壁县| 信阳市| 博客| 文水县| 杭锦旗| 陈巴尔虎旗| 荃湾区| 邵阳市| 常山县| 芷江| 湘乡市| 高淳县| 民和| 梁山县| 岳池县| 鄂伦春自治旗| 新干县| 合作市| 浦江县| 大理市| 乌拉特前旗| 高尔夫| 海安县| 渝中区| 墨玉县| 辛集市| 文安县| 读书| 深水埗区| 临汾市| 柏乡县| 博野县| 化德县| 泸西县| 尖扎县| 武穴市| 五常市| 隆德县| 龙山县| 黑龙江省| 阳曲县|