hadoop重新格式化HDFS步驟解析
了解Hadoop的同學(xué)都知道,Hadoop有兩個核心的組成部分,一個是HDFS,另一個則是MapReduce,HDFS作為Hadoop的數(shù)據(jù)存儲方案,MapReduce則提供計(jì)算服務(wù);同時,HDFS作為一種分布式文件系統(tǒng),它的安裝也是需要相應(yīng)的格式化操作的,如果安裝失敗或者我們需要重新安裝的時候,那我們就需要對HDFS重新進(jìn)行格式化,這篇文章就和大家一起討論下如何進(jìn)行HDFS的重新格式化。
重新格式化hdfs系統(tǒng)的方法:
1、打開hdfs-site.xml
我們打開Hadoop的hdfs-site.xml,基本配置如下所示:
<property> <name>dfs.name.dir</name> <value>/usr/local/hadoop/hdfs/name</value> </property> <property> <name>dfs.data.dir</name> <value>/usr/local/hadoop/hdsf/data</value> </property>
將 dfs.name.dir所指定的目錄刪除、dfs.data.dir所指定的目錄刪除,及我們需要刪除hdfs-site.xml中配置的存儲信息路徑。
2、刪除core-site.xml配置文件指定的相關(guān)目錄
<property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop/hadooptmp</value> </property>
將hadoop.tmp.dir所指定的目錄刪除,即刪除Hadoop的臨時文件路徑。
3、重新執(zhí)行命令:hadoop namenode -format
格式化完畢。
這種格式化HDFS的方式是需要把原來HDFS中的數(shù)據(jù)全部清空,然后再格式化并安裝一個全新的HDFS。
注:這種格式化方式需要將HDFS中的數(shù)據(jù)全部清空,以后我們探討不需刪除數(shù)據(jù)即可重新格式化的方法。
總結(jié)
以上就是本文關(guān)于hadoop重新格式化HDFS步驟解析的全部內(nèi)容,希望對大家有所幫助。感興趣的朋友可以繼續(xù)參閱:淺談七種常見的Hadoop和Spark項(xiàng)目案例等以及本站其他相關(guān)專題,如有不足之處,歡迎留言指出。感謝朋友們對本站的支持!
相關(guān)文章
N點(diǎn)主機(jī)管理系統(tǒng)重置密碼方法(在線修改密碼)
這篇文章主要介紹了N點(diǎn)主機(jī)管理系統(tǒng)重置密碼方法(在線修改密碼),需要的朋友可以參考下2015-10-10https證書選擇之DV型、OV型、EV型證書的主要區(qū)別
這篇文章主要介紹了https證書選擇之DV型、OV型、EV型證書的主要區(qū)別,需要的朋友可以參考下2017-09-09生產(chǎn)級K8S基礎(chǔ)環(huán)境部署配置流程
這篇文章主要為大家介紹了生產(chǎn)級K8S入門之基礎(chǔ)環(huán)境的部署過程,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多2022-03-03如何從Steam社區(qū)屏蔽分析繞過方法及ASF安全部署
這篇文章主要介紹了從Steam社區(qū)屏蔽分析繞過方法及ASF安全部署,本文主要記錄在Ubuntu(Linux)服務(wù)器上的部署教程,但對于沒有用過ASF并不熟悉Nginx的萌新來說,還是建議在Windows上調(diào)試成功后再轉(zhuǎn)到云服務(wù)器上,需要的朋友可以參考下2024-05-05