课程总结:
1、安装JDK #apt-get install openjdk
2、设置环境变量 #vim /etc/profile
一.安装jdk
二.配置hadoop的配置文件
1.mapred-site.xml 配置文件
mapred.job.tracker mapred 访问路径
2.core-site.xml 配置文件 需要修改的
hadoop.tmp.dir 临时工作目录
dfs.name.dir 原数据目录
fs.default.name 文件系统地址和端口号
3.hdfs-site.xml
dfs.data.dir 存放文件块的一个目录
4.hadoop-env.sh
配置java_home的安装路径
三.格式化format
hadoop namenode -format
四.启动hadoop
start-satrt-all.sh
五.用命令jps查看进程
JpbTracker
Jps
SecondaryNameNode
NameNode
DataNode
TaskTracker
安装后配置hadoop文件
一、设置java目录和hadoop目录:
vi /etc/profile
JAVA_HOME=/etc/usr/java/jdk-1.8.1
JAR_HOME=$JAVA_HOME/jre
HADOOP_HOME=/etc/usr/hadoop-1.2.1
PATH=$JAVA_HOME/bin:$JAR_HOME/bin:$HADOOP_HOME/bin:$PAHT
二、修改四个配置文件
1、core-site.xml(haddop.temp.dir、dfs.name.dir、fs.default.name)
<configuration> <property> <name>hadoop.tmp.dir</name> <value>/hadoop</value> </property> <property> <name>dfs.name.dir</name> <value>/hadoop/name</value> </property> <property> <name>fs.default.name</name> <value>hdfs://imooc:9000</value> </property> </configuration>
2、修改mapred-site.xml(mapred.job.tracker)
<configuration> <property> <name>mapred.job.tracker</name> <value>imooc:9001</value> </property> </configuration>
3、修改hsfs-site.xml,设置dfs.data.dir
<property> <name>dfs.data.dir</name> <value>/hadoop/data</value> </property>
4、修改hadoop的环境变量文件hadoop-env.sh
JAVA_HOME=/etc/usr/java/jkd-1.8.1
三、对hadoop进行格式化已经启动:
hadoop namenode -format
start-all.sh
jps=》查看hadoop是否安装成功
hadoop环境变量配置
dfs.data.dir文件块的存放目录