tft每日頭條

 > 生活

 > hadoop是什麼概述

hadoop是什麼概述

生活 更新时间:2024-12-27 03:25:34

提到大數據,就不能不提Hadoop,可以說,是大數據思想的出現,促使了Hadoop的研發與産生,而Hadoop的誕生與使用,也促進了大數據的發展。那麼,Hadoop是什麼呢?

hadoop是什麼概述(一篇文讓你了解Hadoop)1

其實Hadoop就是Apache的一個項目,是一個能夠對大量數據進行分布式處理的軟件框架,以便使用簡單的編程模型,跨計算器集群對龐大數據集(大數據)進行分布式處理。

hadoop是什麼概述(一篇文讓你了解Hadoop)2

Hadoop框架中最核心設計就是HDFSMapReduce,HDFS提供了海量數據的存儲,MapReduce提供了數據的計算。HDFS HDFS( Hadoop Distributed File System):是一個分布式文件系統,存儲Hadoop集群中所有存儲節點上的文件,它可以通過提供高吞吐率(high throughput)來訪問應用程序的數據,适合那些有着超大數據集的應用程序。

hadoop是什麼概述(一篇文讓你了解Hadoop)3

HDFS的高容錯性、高伸縮性等優點允許用戶将Hadoop部署在低廉的硬件上,形成分布式系統;MapReduce分布式編程模型允許用戶在不了解分布式系統底層細節的情況下開發并行應用程序。所以用戶可以利用Hadoop輕松地組織計算機資源,從而搭建自己的分布式計算平台,并且可以充分利用集群的計算和存儲能力,完成海量數據的處理。

hadoop是什麼概述(一篇文讓你了解Hadoop)4

自2006年,Hadoop之父Doug Cutting将Hadoop代碼從Nutch中剝離作為一個新的子項目開始,Hadoop才正式進入大衆的視線中,誰也沒有想到,短短十年時間,Hadoop迅速發展壯大,幾乎與大數據劃上了等号。

如今,Hadoop已被公認為是目前最流行的大數據處理平台,弗雷斯特調研公司的分析師Mike Gualtieri最近預測,在接下來幾年,“100%的大公司”會采用Hadoop。 Market Research的一份報告也預測,到2020年,Hadoop市場産值會超過10億美元。通過以上數據,我們有理由相信,Hadoop的未來必将會随着大數據的深入人心而獲得更大的發展空間,它的未來必定會更加光明。

文章來源:大數據科技視界(bigdata_horizon)

,

更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!

查看全部

相关生活资讯推荐

热门生活资讯推荐

网友关注

Copyright 2023-2024 - www.tftnews.com All Rights Reserved