独立模式的Hadoop环境搭建-创新互联

对于Hadoop来说,最主要的是两个方面,一个是分布式文件系统HDFS,另一个是MapReduce计算模型,搭建Hadoop的运行环境主要分为三种:独立模式环境、伪分布式环境、完全分布式环境。
    一、独立模式:也叫单机模式。这种模式在一台单机上运行,没有分布式文件系统,而是直接读写本地操作系统的文件系统,没有守护进程,所有程序都运行在同一个JVM中,利于调试和测试,主要用于开发环境。
    二、伪分布式:hadoop运行在单机上,但是模拟了一个小的集群,运行在不同的JVM中,用不同的Java进程模仿分布式运行中的各类结点。
(NameNode,DataNode,JobTracker,TaskTracker,SecondaryNameNode)
    三、完全分布式:hadoop运行在不同的主机上,也就是运行在一个主机的集群上面,实现了真正的分布式。

漾濞网站建设公司创新互联公司,漾濞网站设计制作,有大型网站制作公司丰富经验。已为漾濞千余家提供企业网站建设服务。企业网站搭建\外贸网站制作要多少钱,请找那个售后服务好的漾濞做网站的公司定做!

    下面我分享一下在centOS6.7上搭建独立模式Hadoop 环境的过程(本人亲测有效),另外两种模式的搭建后面逐步更新。
    第一步:安装rzsz命令
      独立模式的Hadoop环境搭建

    第二步:创建存放软件包目录
       独立模式的Hadoop环境搭建

    第三步:上传linux版本jdk软件包
       独立模式的Hadoop环境搭建

    第四步:安装jdk
      独立模式的Hadoop环境搭建

    第五步:配置java的环境变量
      独立模式的Hadoop环境搭建

      独立模式的Hadoop环境搭建

      独立模式的Hadoop环境搭建

    第六步:上传Hadoop安装软件包
      独立模式的Hadoop环境搭建

    第七步:解压hadoop安装软件并将目录移动到程序目录下
      独立模式的Hadoop环境搭建

      独立模式的Hadoop环境搭建

    第八步:配置hadoop环境变量
      独立模式的Hadoop环境搭建

    第九步:检测是否成功
      独立模式的Hadoop环境搭建

    如果你看到这个效果,证明你的hadoop已经安装成功。

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。

网页标题:独立模式的Hadoop环境搭建-创新互联
新闻来源:https://www.cdcxhl.com/article36/dschpg.html

成都网站建设公司_创新互联,为您提供网站内链网站改版微信公众号App设计品牌网站建设面包屑导航

广告

声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联

外贸网站建设