新聞中心
這篇文章將為大家詳細(xì)講解有關(guān)Hadoop 2.x HDFS和YARN的啟動(dòng)方式有哪些,小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。
成都創(chuàng)新互聯(lián)一直在為企業(yè)提供服務(wù),多年的磨煉,使我們?cè)趧?chuàng)意設(shè)計(jì),網(wǎng)絡(luò)營(yíng)銷推廣到技術(shù)研發(fā)擁有了開發(fā)經(jīng)驗(yàn)。我們擅長(zhǎng)傾聽企業(yè)需求,挖掘用戶對(duì)產(chǎn)品需求服務(wù)價(jià)值,為企業(yè)制作有用的創(chuàng)意設(shè)計(jì)體驗(yàn)。核心團(tuán)隊(duì)擁有超過十余年以上行業(yè)經(jīng)驗(yàn),涵蓋創(chuàng)意,策化,開發(fā)等專業(yè)領(lǐng)域,公司涉及領(lǐng)域有基礎(chǔ)互聯(lián)網(wǎng)服務(wù)成都棕樹機(jī)房、app軟件定制開發(fā)、手機(jī)移動(dòng)建站、網(wǎng)頁設(shè)計(jì)、網(wǎng)絡(luò)整合營(yíng)銷。
一.三種啟動(dòng)方式介紹
方式一:逐一啟動(dòng)(實(shí)際生產(chǎn)環(huán)境中的啟動(dòng)方式)
hadoop-daemon.sh start|stop namenode|datanode| journalnode yarn-daemon.sh start |stop resourcemanager|nodemanager
方式二:分開啟動(dòng)
start-dfs.sh start-yarn.sh
方式三:一起啟動(dòng)
start-all.sh
二.腳本解讀
start-dfs.sh腳本:
(1) 通過命令bin/hdfs getconf –namenodes查看namenode在那些節(jié)點(diǎn)上
(2) 通過ssh方式登錄到遠(yuǎn)程主機(jī),啟動(dòng)hadoop-deamons.sh腳本
(3) hadoop-deamon.sh腳本啟動(dòng)slaves.sh腳本
(4) slaves.sh腳本啟動(dòng)hadoop-deamon.sh腳本,再逐一啟動(dòng)
start-all.sh腳本:
說明:start-all.sh實(shí)際上是調(diào)用sbin/start-dfs.sh腳本和sbin/start-yarn.sh腳本
三.三種啟動(dòng)方式的關(guān)系
start-all.sh其實(shí)調(diào)用start-dfs.sh和start-yarn.sh
start-dfs.sh調(diào)用hadoop-deamon.sh
start-yarn.sh調(diào)用yarn-deamon.sh
如下圖:
四.為什么要設(shè)置ssh協(xié)議
當(dāng)執(zhí)行start-dfs.sh腳本時(shí),會(huì)調(diào)用slaves.sh腳本,通過ssh協(xié)議無密碼登陸到其他節(jié)點(diǎn)去啟動(dòng)進(jìn)程。
為了能自動(dòng)啟動(dòng)遠(yuǎn)程節(jié)點(diǎn)的進(jìn)程,需要進(jìn)行免密碼登錄。
五.采用第二種啟動(dòng)方式
上面已經(jīng)配置好了ssh公鑰登錄,接下來用第二種啟動(dòng)方式啟動(dòng)
Step1:先停止所以進(jìn)程(如果已經(jīng)啟動(dòng))
[hadoop@hadoop-yarn hadoop-2.2.0]$sbin/yarn-daemon.sh stop nodemanager [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/yarn-daemon.sh stop resourcemanager [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/hadoop-daemon.sh stop datanode [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/hadoop-daemon.sh stop secondarynamenode [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/hadoop-daemon.sh stop namenode
Step2:啟動(dòng)所以進(jìn)程
[hadoop@hadoop-yarn hadoop-2.2.0]$sbin/start-dfs.sh [hadoop@hadoop-yarn hadoop-2.2.0]$ sbin/start-yarn.sh
Step3:查看管理界面
YARN: http://hadoop-yarn.dragon.org:8088/
HDFS: http://hadoop-yarn.dragon.org:50070/
關(guān)于“Hadoop 2.x HDFS和YARN的啟動(dòng)方式有哪些”這篇文章就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,使各位可以學(xué)到更多知識(shí),如果覺得文章不錯(cuò),請(qǐng)把它分享出去讓更多的人看到。
當(dāng)前名稱:Hadoop2.xHDFS和YARN的啟動(dòng)方式有哪些
分享網(wǎng)址:http://www.dlmjj.cn/article/pjjodj.html