ubuntu单机伪分布式下hadoop安装.doc

ubuntu单机伪分布式下hadoop安装1更新 deb 软件包列表 $ sudo apt-get update2安装jdk：$sudo apt-get install sun-java6-jdk /如果出错，参照我博客上的一篇文章安装jdk遇到的问题及解决办法3设置 CLASSPATH和JAVA_HOME，系统环境变量 $ sudo gedit /etc/environment 添加以下两行内容: CLASSPATH=.:/usr/lib/jvm/java-6-sun/lib JAVA_HOME=/usr/lib/jvm/java-6-sun 4下载 hadoop-*.tar.gz 至 /home/shiep205/shiep205是用户名 $ cd / 选择默认路径 $ sudo tar xzf hadoop-0.20.0.tar.gz / 解压至当前路径 $ mv hadoop-0.20.0 hadoop / 重命名为 hadoop $ sudo chown -R shiep205:shiep205 hadoop /赋予shiep205权限5 更新 hadoop 环境变量 $ gedit hadoop/conf/hadoop-env.sh 将 #export JAVA_HOME=/usr/lib/jvm/java-6-sun 改为export JAVA_HOME=/usr/lib/jvm/java-6-sun / 即export JAVA_HOME=*/*，*处改为自己的路径6 配置 SSH /此步不需要改动，一步步输入终端即可 $ sudo apt-get install ssh $ sudo apt-get install rsync /远程同步, 可能已经安装了最新版本 $ ssh-keygen -t dsa -P -f /.ssh/id_dsa $ cat /.ssh/id_dsa.pub /.ssh/authorized_keys $ ssh localhost / 验证配置成功与否7 伪分布运行模式是在运行在单个机器之上, 每一个 hadoop 的守护进程为一个单独的 java 进程。(一) 配置三个文件首先进入你存的hadoop文件夹里的conf文件夹(本例将hadoop安装在shiep205/hadoop文件夹里) $cd $cdhadoop/conf$nano core-site.xml即进入conf/core-site.xml: （按下面逐个修改配置文件）修改conf/core-site.xml:文件： hdfs:/localhost:9000 修改conf/hdfs-site.xml: 文件： dfs.replication 1 修改 conf/mapred-site.xml: 文件： mapred.job.tracker localhost:9001 （二）格式化HDFS进入hadoop主目录的bin目录下 $cd hadoop/bin $./hadoop namenode -format /格式化hadoop namenode，很多时候namenode启动不起来可以试试格式化一下，会好使。 $./start-all.sh /启动hadoop的各个监护进程可以通过http:/localhost:50070和h