那曲檬骨新材料有限公司

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

虛擬機:Hadoop集群的測試

如意 ? 來源:百家號 ? 作者: 程序員陌然 ? 2020-07-01 13:03 ? 次閱讀

一、格式化文件系統(tǒng)

通過前面的學習,此時還不能直接啟動集群,因為在初次啟動HDFS集群時,編寫對主節(jié)點進行格式化處理,具體指令如下:

hdfs namenode -format(只需要在主節(jié)點運行即可或hadoop namenode -format)

執(zhí)行以上任意一條命令若出現(xiàn)“successfully formatted”文字表示格式化成功,然后就可以啟動集群了。

二、啟動和關閉Hadoop集群

1.單個節(jié)點逐個啟動和關閉

a.在主節(jié)點運行namenode進程

hadoop-daemon.sh start namenode

b.在每個從節(jié)點運行datanode進程

hadoop-daemon.sh start datanode

c.在主節(jié)點運行yarn resourcemanger進程

yarn-daemon.sh start resourcemanager

d.在每個從節(jié)點運行yarn nodemanger進程

yarn-daemon.sh start nodemanager

e.在規(guī)劃節(jié)點hadoop02使用以下指令啟動secondarynamenode進程

hadoop-daemon.sh start secondarynamenode

運行完成以上進程命令,如何判斷是否成功?需要jps命令查看當前虛擬機進程,hadoop01是四個進程hadoop02是三個進程hadoop03是兩個進程

2.腳本一鍵啟動和關閉

(1)在主節(jié)點hadoop01上使用以下指令啟動所有HDFS服務進程:

start-dfs.sh

(2)在主節(jié)點hadoop01上使用以下指令啟動所有YARN服務進程:

start-yarn.sh

如果需要停止相關服務進程,只需要將start改為stop即可(即stop-dfs.sh和stop-yarn.sh)

hadoop01 192.168.21.164

通過訪問以上IP+端口地址(50070 8088兩個端口)

http:192.168.21.164:50070http:192.168.21.164:8088

如果沒有關閉防火墻,可能導致無法訪問,則使用以下命令關閉防火墻:

systemctl stop firewalld(三臺機器都要關閉)

如果以主機名來訪問二大集群

http://hadoop01:50070http://hadoop01:8088

則必須配置宿主機hosts文件在C:\Windows\System32\drivers\etc填寫如下內(nèi)容:

192.168.21.164 hadoop01192.168.21.165 hadoop02192.168.21.166 hadoop03

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 集群
    +關注

    關注

    0

    文章

    88

    瀏覽量

    17208
  • 虛擬機
    +關注

    關注

    1

    文章

    937

    瀏覽量

    28426
  • Hadoop
    +關注

    關注

    1

    文章

    90

    瀏覽量

    16034
收藏 人收藏

    評論

    相關推薦

    什么是虛擬機虛擬機真的那么好用嗎?

    在日新月異的科技世界中,虛擬化技術如同一座橋梁,連接著現(xiàn)實與數(shù)字的鴻溝,為我們打開了全新的計算維度。虛擬機,這一概念,自其誕生以來,就以其獨特的魅力和強大的功能,深深地影響了軟件開發(fā)、系統(tǒng)測試和云
    的頭像 發(fā)表于 07-06 08:05 ?463次閱讀
    什么是<b class='flag-5'>虛擬機</b>?<b class='flag-5'>虛擬機</b>真的那么好用嗎?

    hadoop需要什么基礎

    :⑦ 需要掌握虛擬機;⑧ 需要安裝linux操作系統(tǒng)⑨ 需要配置虛擬機網(wǎng)絡除了上述這幾個方面,我們還需要了解hadoop的單機模式、偽分布模式和分布式模式的搭建方式。了解MapReduce分布式計算
    發(fā)表于 09-20 16:00

    Hadoop集群環(huán)境部署說明

    Hadoop集群環(huán)境搭建是很多學習hadoop學習者或者是使用者都必然要面對的一個問題,網(wǎng)上關于hadoop集群環(huán)境搭建的博文教程也蠻多的。
    發(fā)表于 10-12 15:51

    超詳細Dkhadoop虛擬機圖文安裝步驟

    時經(jīng)驗為基礎,給大家整理分享虛擬機的安裝、操作系統(tǒng)安裝、服務器操作系統(tǒng)配置、DKH系統(tǒng)安裝等相關內(nèi)容。文章篇幅可能會比較長,所以每篇就只分享一到兩個點。本篇給大家分享DKHadoop虛擬機的環(huán)境安裝
    發(fā)表于 01-07 15:57

    hadoop集群的NameNod

    hadoop集群部署
    發(fā)表于 08-20 14:33

    hadoop集群配置方法

    hadoop集群配置
    發(fā)表于 09-30 14:16

    hadoop集群搭建的準備

    hadoop集群搭建系列(step01:集群搭建準備)
    發(fā)表于 03-31 09:47

    求一種基于集群的技術和基于虛擬機重啟的技術

    什么是IBM Power Systems的地理分散彈性?災難恢復和高可用性(HA)解決方案主要基于兩種技術:基于集群的技術和基于虛擬機重啟的技術。 群集高可用性和災難恢復解決方案通常會部署冗余的硬件
    發(fā)表于 12-29 06:23

    如何搭建hadoop平臺_hadoop平臺搭建步驟

    如何搭建hadoop平臺如下所示,一、虛擬機及系統(tǒng)安裝二、在虛擬機中配置JAVA環(huán)境三、修改hosts...
    發(fā)表于 01-02 09:29 ?9217次閱讀

    云環(huán)境下虛擬機集群系統(tǒng)動態(tài)負載均衡機制

    針對傳統(tǒng)的物理集群系統(tǒng)無法靈活應對大型互聯(lián)網(wǎng)應用的問題,提出一種云環(huán)境下虛擬機集群的綜合負載均衡機制。該方法首先定期地采集集群虛擬機節(jié)點的
    發(fā)表于 01-24 15:13 ?0次下載

    你會用VMware虛擬機安裝Linux系統(tǒng)?

    由于要搭建Oracle RAC集群需要模擬環(huán)境,所以需要利用VMware虛擬機安裝集群節(jié)點環(huán)境,本章節(jié)介紹如何利用VWware虛擬機安裝centos系統(tǒng)(Linux)。
    發(fā)表于 05-13 10:27 ?2704次閱讀
    你會用VMware<b class='flag-5'>虛擬機</b>安裝Linux系統(tǒng)?

    虛擬機:Linux如何測試 DBUS Daemon

    虛擬機:Linux如何測試 DBUS Daemon
    的頭像 發(fā)表于 06-22 16:35 ?4390次閱讀
    <b class='flag-5'>虛擬機</b>:Linux如何<b class='flag-5'>測試</b> DBUS Daemon

    虛擬機Hadoop集群的搭建

    虛擬機Hadoop集群的搭建
    的頭像 發(fā)表于 07-01 13:03 ?3239次閱讀
    <b class='flag-5'>虛擬機</b>:<b class='flag-5'>Hadoop</b><b class='flag-5'>集群</b>的搭建

    虛擬機Hadoop集群的配置

    虛擬機Hadoop集群的配置
    的頭像 發(fā)表于 07-01 14:14 ?2834次閱讀

    怎么安裝linux虛擬機

    在計算機領域,虛擬機是一種軟件程序,它允許在主操作系統(tǒng)上運行多個虛擬操作系統(tǒng)。Linux虛擬機在開發(fā)、測試和學習等環(huán)境中得到廣泛應用。本文將詳細介紹如何安裝Linux
    的頭像 發(fā)表于 11-23 10:50 ?1155次閱讀
    大发888娱乐城加速器| 大发888娱乐游戏注册| 娱乐城新用户送彩金| 百家乐官网洗码全讯网| 德州扑克总督| 百家乐官网轮盘怎么玩| 百家乐游戏规则介绍| 大发888出纳| 澳门百家乐官网心得玩博| 真人百家乐在线玩| 澳门顶级赌场手机在线链接| 网上百家乐官网是假| 百家乐有不有作弊| bet365备用主页| 百家乐官网双人操作分析仪| 百家乐桌布| 叶城县| 风水24山头| 大发888pt| 百家乐官网有送体验金| 赌神网百家乐官网2| 水果机万能遥控器| 网络百家乐官网游赌博| 百家乐正品地址| 车致| 波音百家乐现金网投注平台排名导航| bet365注册| 鼎尚百家乐官网的玩法技巧和规则 | 百家乐官网玩法及技巧| 圣淘沙百家乐娱乐城| 永利娱乐城提款| 缅甸百家乐官网赌城| 百家乐平台| 有百家乐官网的游戏平台| 皇室百家乐的玩法技巧和规则| 易胜博百家乐官网下载| 百家乐搏牌| 百家乐官网破解打法| 百家乐系统分析器| 广汉市| 百家乐高手的心得|