Hadoop生態(tài)系統(tǒng)組件有哪些

這篇文章將為大家詳細講解有關(guān)Hadoop生態(tài)系統(tǒng)組件有哪些,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。

創(chuàng)新互聯(lián)公司2013年成立,是專業(yè)互聯(lián)網(wǎng)技術(shù)服務(wù)公司,擁有項目成都網(wǎng)站建設(shè)、成都做網(wǎng)站網(wǎng)站策劃,項目實施與項目整合能力。我們以讓每一個夢想脫穎而出為使命,1280元卓資做網(wǎng)站,已為上家服務(wù),為卓資各地企業(yè)和個人服務(wù),聯(lián)系電話:028-86922220

Hadoop生態(tài)系統(tǒng)的組件包括:

  • HDFS:分布式文件系統(tǒng)

  • YARN:資源管理和調(diào)度

  • MapReduce:并行計算框架

  • HBase:可擴展的分布式NoSql數(shù)據(jù)庫

  • Hive:適合做ETL的大數(shù)據(jù)倉庫,支持SQL查詢語言,基于MapReduce

  • Impala:新型查詢系統(tǒng),提供交互式的SQL查詢

  • ZooKeeper:分布式應(yīng)用程序協(xié)調(diào)服務(wù)

  • Spark:分布式內(nèi)存計算引擎,支持ETL、機器學(xué)習(xí)、Streaming和圖計算

  • Flume:分布式日志收集、聚合系統(tǒng)

  • Pig:大規(guī)模數(shù)據(jù)分析平臺

  • PrestoDB:大數(shù)據(jù)的分布式 SQL 查詢引擎

  • Phoenix:是Hbase的 SQL 驅(qū)動

  • Drill :加快Hadoop數(shù)據(jù)查詢的工具

  • Hue 是運營和開發(fā)Hadoop應(yīng)用的圖形化用戶界面,功能及其強大

以服務(wù)體系劃分:

 計算云:虛擬主機/彈性計算/負載均衡QLB

  存儲云:GlusterFS/Swift/FastDFS/生產(chǎn)存儲/云盤

  服務(wù)云-數(shù)據(jù)庫:MySQL/Couchbase/redis/MongoDB

  服務(wù)云-分布式中間件:RPC/MQ/ZooKeeper

  服務(wù)云-Hadoop:HDFS/MR/Hive/HBase

  服務(wù)云-實時計算:Spark/Storm/實時日志收集分析

關(guān)于“Hadoop生態(tài)系統(tǒng)組件有哪些”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,使各位可以學(xué)到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。

當(dāng)前標(biāo)題:Hadoop生態(tài)系統(tǒng)組件有哪些
當(dāng)前路徑:http://muchs.cn/article16/gdsegg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站改版定制網(wǎng)站、手機網(wǎng)站建設(shè)、商城網(wǎng)站、品牌網(wǎng)站建設(shè)、網(wǎng)站策劃

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

網(wǎng)站優(yōu)化排名