基础环境搭建(三)-Hadoop环境搭建

《基础环境搭建(三)-Hadoop环境搭建》 金菊

《菊花》

秋丛绕舍似陶家,遍绕篱边日渐斜。 

不是花中偏爱菊,此花开尽更无花

说明:此系列文章是为了记录本人学习Hadoop过程,以此来加深对Hadoop的理解,本系列教程完全是入门系列,希望无意阅读到的道友莫要嘲讽!!!

基础环境搭建主要分为三部分说明:

一、Linux系统安装

二、VMware与Linux环境配置

三、Hadoop环境搭建

三、Hadoop环境搭建

说明:经过前面两步的努力,现在可以通过我们创建的Linux系统部署我们想要发布的任何服务,接下来就让我们一起进入Hadoop环境的搭建吧!!!

>> 创建Hadoop用户

        1.为了避免ROOT用户删库跑路事件,我们首先创建独立用户hadoop(注:此步骤非必需)

        登录ROOT用户后执行如下命令:useradd hadoop

《基础环境搭建(三)-Hadoop环境搭建》 添加用户-1

        2.设置新建用户hadoop密码-执行如下命令:passwd hadoop

《基础环境搭建(三)-Hadoop环境搭建》 设置密码-2

        3.设置新建用户hadoop执行权限-执行如下命令:

《基础环境搭建(三)-Hadoop环境搭建》 命令-3

        说明:此处修改文件是通过VI命令,不熟悉的道友请自行百度

《基础环境搭建(三)-Hadoop环境搭建》 修改权限-4

        4.切换Hadoop用户-执行如下命令:

             >> su hadoop  — 切换hadoop用户

             >> cd  — 进入hadoop用户家目录

《基础环境搭建(三)-Hadoop环境搭建》 切换Hadoop用户-5

        5.创建Hadoop安装目录-执行如下命令:

                >> mkdir my_install_software

《基础环境搭建(三)-Hadoop环境搭建》 创建安装目录-6

        6.配置JDK环境-执行如下命令:

            >> 下载JDK : JDK下载地址 可以执行命令:wget http://download.oracle.com/otn-pub/java/jdk/8u181-b13/96a7b8442fe848ef90c96a2fad6ed6d1/jdk-8u181-linux-x64.tar.gz?AuthParam=1532349899_0dee65e7970f1e0829d9ec59ec20798d

《基础环境搭建(三)-Hadoop环境搭建》 JDK下载-7

            >> 解压JDK压缩包-执行如下命令 :tar -zxvf jdk-8u162-linux-x64.tar.gz

《基础环境搭建(三)-Hadoop环境搭建》 JDK解压-8


            >> 配置JAVA环境变量并刷新配置文件-执行如下命令 :

《基础环境搭建(三)-Hadoop环境搭建》 配置JAVA环境变量-9

            >> 安装SSH客户端-执行如下命令 :

《基础环境搭建(三)-Hadoop环境搭建》 安装SSH客户端-10

            >> Hadoop环境配置-执行如下命令 :

               6.1.下载Hadoop安装包: Hadoop下载地址 可以通过命令 wget http://archive.apache.org/dist/hadoop/common/hadoop-2.8.3/hadoop-2.8.3.tar.gz

《基础环境搭建(三)-Hadoop环境搭建》 Hadoop下载-11

                6.2.解压Hadoop压缩包-命令:tar -zxvf hadoop-2.8.3/hadoop-2.8.3.tar.gz

《基础环境搭建(三)-Hadoop环境搭建》 Hadoop解压-12

                6.3.Hadoop配置文件- hadoop-env.sh -JAVA_HOME  修改:

                        >> cd /home/hadoop/my_install_software/hadoop-2.8.3/etc/hadoop  — Hadoop配置文件目录

                        >> vi hadoop-env.sh

《基础环境搭建(三)-Hadoop环境搭建》 Hadoop-JAVA_HOME-13

                6.4.Hadoop配置文件- core-site.xml – 修改:vi core-site.xml

《基础环境搭建(三)-Hadoop环境搭建》 core-site-14

                6.5.Hadoop配置文件- hdfs-site.xml – 修改:vi hdfs-site.xml

《基础环境搭建(三)-Hadoop环境搭建》 hdfs-site-15

                6.6.Hadoop配置文件- mapred-site.xml – 修改:vi mapred-site.xml

                    说明:由于 mapred-site.xml 默认是不存在的我们需要执行如下命令创建

《基础环境搭建(三)-Hadoop环境搭建》 创建mapred-site-17
《基础环境搭建(三)-Hadoop环境搭建》 mapred-site-18

                    6.7.Hadoop配置文件- yarn-site.xml – 修改:vi yarn-site.xml

《基础环境搭建(三)-Hadoop环境搭建》  yarn-site-19

        7.格式化Hadoop环境-执行如下命令:

《基础环境搭建(三)-Hadoop环境搭建》 Hadoop格式化-20

        8.启动Hadoop-执行如下命令:

《基础环境搭建(三)-Hadoop环境搭建》 启动Hadoop-21

       9.查看Hadoop是否启动成功-执行如下命令:JPS 

                说明:如果出现如下五个服务即表示启动成功

《基础环境搭建(三)-Hadoop环境搭建》 启动验证-22

        10.Hadoop服务验证:访问 192.168.2.14:8088 如果出现如下界面表示服务启动成功 

《基础环境搭建(三)-Hadoop环境搭建》 Hadoop服务访问

点赞