Hadoop，Hadoop是一個實現(xiàn)了MapReduce模式的能夠對大量數(shù)據(jù)進行分布式處理的軟件框架，是以一種可靠、高效、可伸縮的方式進行處理的。

　　而MapReduce是Google提出的一種云計算的核心計算模式，是一種分布式運算技術，也是簡化的分布式編程模式，MapReduce模式的主要思想是將自動分割要執(zhí)行的問題（例如程序）拆解成map（映射）和reduce（化簡）的方式， 在數(shù)據(jù)被分割后通過Map 函數(shù)的程序將數(shù)據(jù)映射成不同的區(qū)塊，分配給計算機機群處理達到分布式運算的效果，在通過Reduce 函數(shù)的程序將結果匯整，從而輸出開發(fā)者需要的結果。

　　再來看看Hadoop的特性，第一，它是可靠的，因為它假設計算元素和存儲會失敗，因此它維護多個工作數(shù)據(jù)副本，確保能夠針對失敗的節(jié)點重新分布處理。其次，Hadoop 是高效的，因為它以并行的方式工作，通過并行處理加快處理速度。Hadoop 還是可伸縮的，能夠處理 PB 級數(shù)據(jù)。此外，Hadoop 依賴于社區(qū)服務器，因此它的成本比較低，任何人都可以使用。

　　你也可以這么理解Hadoop的構成，Hadoop=HDFS（文件系統(tǒng)，數(shù)據(jù)存儲技術相關）+HBase（數(shù)據(jù)庫）+MapReduce（數(shù)據(jù)處理）+……Others

　　Hadoop用到的一些技術如下：

　　HDFS: Hadoop分布式文件系統(tǒng)(Distributed File System) － HDFS (HadoopDistributed File System)

　　MapReduce：并行計算框架

　　HBase: 類似Google BigTable的分布式NoSQL列數(shù)據(jù)庫。

　　Hive：數(shù)據(jù)倉庫工具，由Facebook貢獻。

　　Zookeeper：分布式鎖設施，提供類似Google Chubby的功能，由Facebook貢獻。

　　Avro：新的數(shù)據(jù)序列化格式與傳輸工具，將逐步取代Hadoop原有的IPC機制。

　　Pig:大數(shù)據(jù)分析平臺，為用戶提供多種接口。

　　Ambari：Hadoop管理工具，可以快捷的監(jiān)控、部署、管理集群。

　　Sqoop：用于在Hadoop與傳統(tǒng)的數(shù)據(jù)庫間進行數(shù)據(jù)的傳遞。