一·大数据概述
随着信息技术发展的巨大变革,企业和学术机构纷纷加大技术、资金和人员投入,加强对大数据关键技术的研发与运用。
大数据的发展历程总体上划分为三个重要阶段:萌芽期、成熟期和大规模应用期。
二.大数据概念
大数据的4个特点:数据量大、数据类型繁多、处理速度快和价值密度低。
三.大数据与云计算、物联网的关系
大数据为云计算机提供了用武之地,云计算为大数据提供了技术基础。
物联网是大数据的重要来源,大数据技术为物联网数据分析提供支撑。
云计算为物联网提供海量数据存储能力,物联网为云计算技术提供了广阔的应用空间。
四.大数据处理架构Hadoop
1.Hadoop简介
Hadoop是Apache旗下的一个开源分布式计算平台。是基于Java语言开发的,具有很好的跨平台性,并可以部署在一般的计算机集群中。Hadoop的核心是分布式文件系统HDFS和MapReduce。HDFS具有较高的读写速度、很好的容错性和可伸缩性,很好的保证了数据的安全性。
其中YARN是资源调动,MapReduce是计算框架。
2.Hadoop的特性
高可靠性、高效性、高扩展性、容错性、成本低、运行在Linux平台上、支持多种编程语言。
3.Hadoop生态圈
当前名称:为大家普及下大数据技术原理与运用知识
URL分享:https://www.cdcxhl.com/article44/cjojhe.html
成都网站建设公司_创新互联,为您提供网站营销、全网营销推广、网站维护、App设计、外贸建站、标签优化
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联