Hadoop安装并运行

安装并运行Hadoop，主要运行单机模式以及伪分布式模式

方法/步骤

一、检查安装JDK 

1、执行 java -version查看jdk版本。

       如果未安装执行sudo apt-get install sun-java6-jdk自动安装jdk；

       如果已经安装显示java版本。

2、查看自动安装jdk路径

      执行 update-alternatives --config java

3、修改环境变量

      vim /etc/profile

       打开文件再最下面添加下面三行

      export JAVA_HOME=/usr/lib/jvm/java-8-oracle      export CLASSPATH=.:$JAVA_HOME/lib/tools.jar      export PATH=$JAVA_HOME/bin:$PATH

二、安装Hadoop

1、下载Hadoop

2、配置环境变量

3、修改xml文件

三、安装SSH

1、通过下列命令创建一对OpenSSL密钥对

      ssh-keygen

2、使用下列命令将新生成的公钥复制至已授权密钥列表

      cp .ssh/id_rsa.pub .ssh/authorized_keys

3、链接本地主机

      ssh localhost

显示：

      hadoop@Master:~$ ssh localhost      Welcome to Ubuntu 14.04.3 LTS (GNU/Linux 3.19.0-25-generic i686)      * Documentation:  https://help.ubuntu.com/      255 packages can be updated.      131 updates are security updates.       Last login: Sun Jan 24 16:47:17 2016 from localhost      hadoop@Master:~$

四、实践：使用Hadoop计算圆周率

     1、进入安装目录执行：格式化Namenode   bin/hadoop namenode -format

     2、启动Hadoop:

           执行sbin/start-dfs.sh

           执行jps查看进程，显示namenode和datanode

              hadoop@Master:~/hadoop$ jps  

            4945 Jps 

             4834 SecondaryNameNode 

             4629 DataNode 

             4506 NameNode

          执行sbin/start-yarn.sh

          执行jps查看进程

           hadoop@Master:~/hadoop$ jps          

           4834 SecondaryNameNode 

          5010 ResourceManager

           4629 DataNode 

          4506 NameNode 

          5434 Jps 

          5135 NodeManager