hadoop重新格式化HDFS步驟解析
了解Hadoop的同學(xué)都知道,Hadoop有兩個(gè)核心的組成部分,一個(gè)是HDFS,另一個(gè)則是MapReduce,HDFS作為Hadoop的數(shù)據(jù)存儲(chǔ)方案,MapReduce則提供計(jì)算服務(wù);同時(shí),HDFS作為一種分布式文件系統(tǒng),它的安裝也是需要相應(yīng)的格式化操作的,如果安裝失敗或者我們需要重新安裝的時(shí)候,那我們就需要對(duì)HDFS重新進(jìn)行格式化,這篇文章就和大家一起討論下如何進(jìn)行HDFS的重新格式化。
重新格式化hdfs系統(tǒng)的方法:
1、打開hdfs-site.xml
我們打開Hadoop的hdfs-site.xml,基本配置如下所示:
<property> <name>dfs.name.dir</name> <value>/usr/local/hadoop/hdfs/name</value> </property> <property> <name>dfs.data.dir</name> <value>/usr/local/hadoop/hdsf/data</value> </property>
將 dfs.name.dir所指定的目錄刪除、dfs.data.dir所指定的目錄刪除,及我們需要?jiǎng)h除hdfs-site.xml中配置的存儲(chǔ)信息路徑。
2、刪除core-site.xml配置文件指定的相關(guān)目錄
<property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop/hadooptmp</value> </property>
將hadoop.tmp.dir所指定的目錄刪除,即刪除Hadoop的臨時(shí)文件路徑。
3、重新執(zhí)行命令:hadoop namenode -format
格式化完畢。
這種格式化HDFS的方式是需要把原來HDFS中的數(shù)據(jù)全部清空,然后再格式化并安裝一個(gè)全新的HDFS。
注:這種格式化方式需要將HDFS中的數(shù)據(jù)全部清空,以后我們探討不需刪除數(shù)據(jù)即可重新格式化的方法。
總結(jié)
以上就是本文關(guān)于hadoop重新格式化HDFS步驟解析的全部內(nèi)容,希望對(duì)大家有所幫助。感興趣的朋友可以繼續(xù)參閱:淺談七種常見的Hadoop和Spark項(xiàng)目案例等以及本站其他相關(guān)專題,如有不足之處,歡迎留言指出。感謝朋友們對(duì)本站的支持!
相關(guān)文章
MongoDB學(xué)習(xí)筆記(四) 用MongoDB的文檔結(jié)構(gòu)描述數(shù)據(jù)關(guān)系
MongoDB的集合(collection)可以看做關(guān)系型數(shù)據(jù)庫的表,文檔對(duì)象(document)可以看做關(guān)系型數(shù)據(jù)庫的一條記錄。但兩者并不完全對(duì)等2013-07-07
SVN使用教程_動(dòng)力節(jié)點(diǎn)Java學(xué)院整理
這篇文章主要為大家詳細(xì)介紹了SVN使用教程和注意事項(xiàng),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2017-08-08
jenkins 配置用戶角色權(quán)限的實(shí)現(xiàn)方法
這篇文章主要介紹了jenkins 配置用戶角色權(quán)限的實(shí)現(xiàn)方法,本文給大家介紹的非常詳細(xì),具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2019-05-05
基于BaseHTTPRequestHandler的HTTP服務(wù)器使用及實(shí)現(xiàn)方法
BaseHTTPRequestHandler是Python中的一個(gè)基類,屬于http.server模塊,用于處理HTTP請(qǐng)求的基本功能,下面詳細(xì)介紹BaseHTTPRequestHandler的主要特點(diǎn)和使用方法,感興趣的朋友一起看看吧2023-10-10
Centos7使用docker搭建gitlab服務(wù)器
這篇文章主要為大家詳細(xì)介紹了Centos7使用docker搭建gitlab服務(wù)器,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2018-04-04
Ubuntu通過Netplan配置網(wǎng)絡(luò)教程
這篇文章主要為大家介紹了Ubuntu通過Netplan配置網(wǎng)絡(luò)教程,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-10-10

