linux下搭建hadoop環(huán)境步驟分享
1、下載hadoop包
wget http://apache.freelamp.com/hadoop/core/stable/hadoop-0.20.2.tar.gz
2、tar xvzf hadoop-0.20.2.tar.gz
3、安裝JDK，從oracle網(wǎng)站上直接下載JDK，地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html
4、chmod +x jdk-6u21-linux-i586.bin;./jdk-6u21-linux-i586.bin,當(dāng)前目錄下出現(xiàn)了jdk1.6.0_21目錄
5、配置java環(huán)境變量 vi /etc/profile
export JAVA_HOME=/root/src/hadoop/jdk1.6.0_21
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$PATH:$JAVA_HOME/bin
在終端下執(zhí)行 source /etc/profile 使配置生效
6、可以用以下命令查看
顯示JAVA版本 java -vesion
echo $JAVA_HOME
which java
echo $PATH
echo $CLASSPATH
如果java -version沒有顯示你的JDK的版本，請(qǐng)檢查你的path的設(shè)置。
7、配置hadoop環(huán)境變量 vi /etc/profile
export HADOOP_INSTALL=/root/src/hadoop/hadoop-0.20.2
export PATH=$PATH:$HADOOP_INSTALL/bin
source /etc/profile 使配置生效
8、測(cè)試環(huán)境
hadoop version 顯示
Hadoop 0.20.2
Subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.20 -r 911707
Compiled by chrisdo on Fri Feb 19 08:07:34 UTC 2010
9、配置
hadoop每一個(gè)組件都使用一個(gè)XML文件配置，核心屬性在core-site.xml中，HDFS屬性在hdfs-site.xml中，MapReduce屬性在mapred-site.xml中。這些文件都在conf子目錄下。
hadoop有本地模式、偽分布模式和完全分布模式三種，默認(rèn)配置為本地模式，沒有守護(hù)進(jìn)程，一切都運(yùn)行在單個(gè)JVM上。
相關(guān)文章
這篇文章主要介紹了Linux netstat命令安裝方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-03-03
這篇文章主要介紹了linux下安裝golang的方法，本文給大家介紹的非常詳細(xì)，具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2019-09-09
這篇文章主要介紹了Linux中的安全配置技巧,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-02-02
Apache Shiro是一個(gè)強(qiáng)大易用的Java安全框架，提供了認(rèn)證、授權(quán)、加密和會(huì)話管理等功能，下文給大家?guī)砹薃pache Shiro 框架簡介，感興趣的朋友一起看看吧2017-09-09
winxp apache用php建本地虛擬主機(jī)的方法
windows xp用php建本地虛擬主機(jī)的方法(注：以下目錄是筆者系統(tǒng)目錄)2009-07-07
CentOS6.4安裝Apache+MySQL+PHP圖文教程
這篇文章主要介紹了CentOS6.4安裝Apache+MySQL+PHP圖文教程，需要的朋友可以參考下。2016-10-10
這篇文章主要介紹了Linux中復(fù)制文件和目錄的使用小技巧,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-02-02
Linux 配置SSH免密登錄 “ssh-keygen”的基本用法
SSH 是目前較可靠，專為遠(yuǎn)程登錄會(huì)話和其他網(wǎng)絡(luò)服務(wù)提供安全性的協(xié)議。利用 SSH 協(xié)議可以有效防止遠(yuǎn)程管理過程中的信息泄露問題，這篇文章主要介紹了Linux 配置SSH免密登錄 “ssh-keygen”的基本用法 ,需要的朋友可以參考下2019-06-06
本篇文章主要介紹了Linux中搭建常用服務(wù)器，主要包括telnet、DHCP、DNS、sendmail、FTP、web、samba有興趣的可以了解一下。2016-12-12
這篇文章主要介紹了CentOS環(huán)境下安裝PHPUnit的方法,結(jié)合實(shí)例形式分析了CentOS環(huán)境下安裝PHPUnit的步驟、相關(guān)問題與解決方法,需要的朋友可以參考下2018-05-05