park是一種分布式內(nèi)存計(jì)算模型hadoop是一種大數(shù)據(jù)分布式處理方案，數(shù)據(jù)源，mapreduce（分布式計(jì)算框架），yarn（資源調(diào)度系統(tǒng)）hive是基于hadoop的一個數(shù)據(jù)倉庫，spark是內(nèi)存計(jì)算框架，構(gòu)建成類似傳統(tǒng)關(guān)系型數(shù)據(jù)庫。但是計(jì)算結(jié)果。能夠用sql執(zhí)行mr任務(wù)spark與hadoop關(guān)系，意味著他主要是用來進(jìn)行計(jì)算，用來取代hadoop的mapreduce任務(wù)效率太低，包括hdfs（分布式存儲系統(tǒng)）