ubantu16.4下Hadoop完全分布式搭建实战教程-创新互联

前言

成都创新互联长期为近1000家客户提供的网站建设服务，团队从业经验10年，关注不同地域、不同群体，并针对不同对象提供差异化的产品和服务；打造开放共赢平台，与合作伙伴共同营造健康的互联网生态环境。为柳林企业提供专业的成都网站制作、做网站，柳林网站改版等技术服务。拥有十载丰富建站经验和众多成功案例,为您定制开发。

本文主要介绍了关于ubantu 16.4 Hadoop完全分布式搭建的相关内容，分享出来供大家参考学习，下面话不多说了，来一起看看详细的介绍吧

一个虚拟机

1.以  NAT网卡模式   装载虚拟机

2.最好将几个用到的虚拟机修改主机名，静态IP     /etc/network/interface，这里 是 s101 s102  s103 三台主机 ubantu，改/etc/hostname文件

3.安装ssh

　在第一台主机那里s101 创建公私密匙

　　  ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa

　　  >cd .ssh

　　  >cp id_rsa.pub >authorized_keys 　创建密匙库

　　  将id_rsa.pub传到其他主机上，到.ssh目录下

　　        通过  服务端  nc -l 8888 >~/.ssh/authorized_keys

　　        客户端  nc s102 8888 <id_rsa.pub

开始安装Hadoop/jdk

1、安装VM-tools  方便从win 10 拖拉文件到ubantu

2、创建目录   /soft

3、改变组  chown ubantu:ubantu /soft  方便传输文件有权限

4、将文件放入到/soft   （可以从桌面cp/mv src dst）

      tar -zxvf jdk或hadoop 自动创建解压目录

      配置安装环境 （/etc/environment）

            1.添加　　JAVA_HOME=/soft/jdk-...jdk目录

            2.添加 　　HADOOP_HOME=/soft/hadoop（Hadoop目录）

            3.在path里面加/soft/jdk-...jdk/bin:/soft/hadoop/bin/:/soft/hadoop/sbin

            4.通过  java -version   查看有版本号  成功

            5.hadoop version  有版本号  成功

开始配置HDFS四大文件   core-site.xml     hdfs-site.xml    mapred-site.xml   yarn-site.xml

core-site.xml

<configuration>
 <property>
 <name>fs.defaultFS</name>
 <value>hdfs://s101:9000</value>
 </property>

</configuration>

另外有需要云服务器可以了解下创新互联scvps.cn，海内外云服务器15元起步，三天无理由+7*72小时售后在线，公司持有idc许可证，提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案，具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势，专为企业上云打造定制，能够满足用户丰富、多元化的应用场景需求。

分享题目：ubantu16.4下Hadoop完全分布式搭建实战教程-创新互联
当前地址：https://www.cdcxhl.com/article8/dccsip.html

成都网站建设公司_创新互联，为您提供品牌网站设计、ChatGPT、建站公司、网站制作、网站建设、做网站

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 创新互联