大数据环境搭建-之-hadoop2.x分布式部署-集群配置


1、 下载hadoop 并解压

创新互联专注于右玉网站建设服务及定制,我们拥有丰富的企业做网站经验。 热诚为您提供右玉营销型网站建设,右玉网站制作、右玉网页设计、右玉网站官网定制、微信小程序开发服务,打造右玉网络公司原创品牌,更为您提供右玉网站排名全网营销落地服务。

2、为 hadoop 文件分配角色

      chown -R hadoop:hadoop hadoop

                       组名:角色名    文件名

3、ls -l 查看详细信息  角色分配是否成功

4、创建hadoop 需要的文件目录

     mkdir -p /data/dfs/name

     mkdir -p /data/dfs/data

     mkdir -p /data/tmp

5、 分配角色 权限给自己的用户目录,如hadoop用户

     chown -R hadoop:hadoop hadoop/data

 6、 ls -l 查看是否分配成功

 7、修改hadoop 配置文件

       a、 core-site.xml

       b、hdfs-site.xml

       c、mapred-site.xml

       d、slave

 8、配置hadoop 环境变量

        HADOOP_HOME=/usr/java/hadoop

        PATH=$HADOOP_HOME/bin:$PATH

        export HADOOP_HOME PATH

 9、格式化hadoop    bin/hadoop namenode -format

10 、启动hadoop     sbin/start-all.sh

11、jps  查看进程是否启动

        NodeManager

        ResourceManager

        Jps

        DataNode

        NameNode

        SecondaryNameNode

12、hdfs 创建目录

        bin/hadoop  fs -mkdir /dajiangtai

13、hdfs 的dajiangtai目录添加文件

        hadoop fs -put /usr/java/hadoop/djt.txt /dajiangtai            

14、验证地址

    http://cjqlinux:8088/cluster/apps

    http://cjqlinux:50070

标题名称:大数据环境搭建-之-hadoop2.x分布式部署-集群配置
转载源于:https://www.cdcxhl.com/article24/joopje.html

成都网站建设公司_创新互联,为您提供微信小程序手机网站建设移动网站建设网站设计公司自适应网站

广告

声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联

成都定制网站网页设计