linux下搭建hadoop環(huán)境步驟分享
1、下載hadoop包
wget http://apache.freelamp.com/hadoop/core/stable/hadoop-0.20.2.tar.gz
2、tar xvzf hadoop-0.20.2.tar.gz
3、安裝JDK，從oracle網(wǎng)站上直接下載JDK，地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html
4、chmod +x jdk-6u21-linux-i586.bin;./jdk-6u21-linux-i586.bin,當(dāng)前目錄下出現(xiàn)了jdk1.6.0_21目錄
5、配置java環(huán)境變量 vi /etc/profile
export JAVA_HOME=/root/src/hadoop/jdk1.6.0_21
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$PATH:$JAVA_HOME/bin
在終端下執(zhí)行 source /etc/profile 使配置生效
6、可以用以下命令查看
顯示JAVA版本 java -vesion
echo $JAVA_HOME
which java
echo $PATH
echo $CLASSPATH
如果java -version沒有顯示你的JDK的版本，請(qǐng)檢查你的path的設(shè)置。
7、配置hadoop環(huán)境變量 vi /etc/profile
export HADOOP_INSTALL=/root/src/hadoop/hadoop-0.20.2
export PATH=$PATH:$HADOOP_INSTALL/bin
source /etc/profile 使配置生效
8、測(cè)試環(huán)境
hadoop version 顯示
Hadoop 0.20.2
Subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.20 -r 911707
Compiled by chrisdo on Fri Feb 19 08:07:34 UTC 2010
9、配置
hadoop每一個(gè)組件都使用一個(gè)XML文件配置，核心屬性在core-site.xml中，HDFS屬性在hdfs-site.xml中，MapReduce屬性在mapred-site.xml中。這些文件都在conf子目錄下。
hadoop有本地模式、偽分布模式和完全分布模式三種，默認(rèn)配置為本地模式，沒有守護(hù)進(jìn)程，一切都運(yùn)行在單個(gè)JVM上。
相關(guān)文章
CentOS7.4下MySQL5.7.28二進(jìn)制方式安裝的方法步驟
這篇文章主要介紹了CentOS7.4下MySQL5.7.28二進(jìn)制方式安裝的方法步驟，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-11-11
本篇文章主要介紹了詳解centos7配置本地yum源的方法，小編覺得挺不錯(cuò)的，現(xiàn)在分享給大家，也給大家做個(gè)參考。一起跟隨小編過來看看吧。2017-03-03
下面小編就為大家?guī)硪黄赗HEL 6.5上使用yum更新/安裝軟件的操作方法。小編覺得挺不錯(cuò)的，現(xiàn)在就分享給大家，也給大家做個(gè)參考。一起跟隨小編過來看看吧2016-12-12
Linux NFS服務(wù)器的安裝與配置方法(圖文詳解)
這篇文章主要介紹了Linux NFS服務(wù)器的安裝與配置方法(圖文詳解),需要的朋友可以參考下2015-11-11
這篇文章主要介紹了Apache設(shè)置反向代理的方法，小編覺得挺不錯(cuò)的，現(xiàn)在分享給大家，也給大家做個(gè)參考。一起跟隨小編過來看看吧2018-08-08
本篇文章主要介紹了NodeJs在Linux下使用的各種問題解決，可以解決各種問題，具有一定的參考價(jià)值，有興趣的可以了解一下。2017-01-01
本篇文章給大家詳細(xì)分析了BT5不能使用apt-get命令的解決方法，對(duì)此有需求的朋友可以參考下。2018-02-02
linux驅(qū)動(dòng)開發(fā)中常用函數(shù)copy_from_user open read write詳解
本文解說了inux驅(qū)動(dòng)開發(fā)函數(shù)copy_from_user ,open ,read write幾個(gè)常用函數(shù)，現(xiàn)在一起來學(xué)習(xí)他們的使用過程吧2021-08-08
這篇文章主要為大家詳細(xì)介紹了CentOS6如何實(shí)現(xiàn)路由器功能，CentOS6環(huán)境下搭建路由器的方法，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2017-08-08
本篇文章主要介紹了Linux搭建python環(huán)境詳解，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下。2016-12-12