大數(shù)據(jù)的一個時代的結束了,Hadoop還有學習的必要嗎?

2021-02-16    分類: 網(wǎng)站建設

Hadoop從誕生至今已經(jīng)十三年了。2006年誕生大數(shù)據(jù),2008年成為Apache的頂尖項目,成為國內(nèi)外互聯(lián)網(wǎng)大數(shù)據(jù)的標準配置之一。長久以來,想要入行大數(shù)據(jù)開發(fā)Hadoop也是必學。最近確對Hadoop哀聲一片,更多喊得是擁抱云計算,摒棄Hadoop。

目前有一個很悲觀的問題,Hadoop正在快速的失去原本屬于它的市場。

大數(shù)據(jù)的一個時代的結束了,Hadoop還值得你學習嗎?

該領域曾經(jīng)的領頭羊 Cloudera、Hortonworks 和 MapR 三家公司最近步履蹣跚,過去作為數(shù)據(jù)寵兒的他們可以籌措到源源不斷的巨額投資,英特爾公司就曾向 Cloudera 注入 7.66 億美元,這僅僅是一輪投資的數(shù)額,而有趣的是在去年年底Cloudera 和 Hortonworks 宣布合并,并且公告聲稱這將是“merger of equals(平等的合并)”(也可能是這兩家公司無法獨自存活了),然鵝MapR 成為了犧牲品,根據(jù) LinkedIn 的數(shù)據(jù),在過去兩年中,MapR 公司縮水了 29%,Cloudera的股價一下子暴跌40%。

之前的大數(shù)據(jù)領域過度炒作,泡沫破滅后歸于現(xiàn)實,Hadoop領頭羊步履蹣跚。MongoDB數(shù)據(jù)庫越來越受歡迎,與老牌數(shù)據(jù)庫MySQL和Oracle形成三足鼎立的姿態(tài)。與MongoDB相似的Elasticsearch分布式搜索和分析引擎背后的Elastic公司一個季度的收入激增70%,員工人數(shù)增加一倍??吹竭@里就納悶了,MongoDB和Elasticsearch等技術應該是無法撼動Hadoop的,但是現(xiàn)在確發(fā)展形式一片大好?

個體開發(fā)人員擁抱云

個體假發(fā)人員對云的追捧是一個原因。雖然Cloudera、Hortonworks和MapR拼命地從內(nèi)部部署產(chǎn)品發(fā)展而來,來自AWS、微軟Azure和谷歌的云原生方案都共同提供了“完全集成的產(chǎn)品,它們的購置成本更低,擴展起來費用更省?!盚adoop最主要的用途一直是廉價存儲。云存儲變得更便宜,加上S3+ EMR及其他服務的用戶體驗要好上百千倍。顯然,Hadoop可能是傳統(tǒng)專有數(shù)據(jù)倉庫的出色替代品,但遠不如像基于云的Snowflake這些更現(xiàn)代化的方法那么好。

大數(shù)據(jù)的一個時代的結束了,Hadoop還值得你學習嗎?

“沒有人知道這些 Hadoop 公司到底在做什么”。Hadoop 供應商爭先恐后地為他們的 Hadoop 產(chǎn)品添加各種開源插件(Impala、Pig、Hive、Flume),發(fā)明“解決方案技術?!保孒adoop產(chǎn)品更加的繁瑣和累贅,成本也越來越高。對比上云,MongoDB與Elasticsearch也是因為它們既能解決了Hadoop相同的問題,使用還比Hadoop簡單,簡單直接的方案和低廉的成本更適合個體開發(fā)人員。

如今,Cloudera 在其網(wǎng)站首頁以粗體字寫著:“我們?yōu)槿魏螖?shù)據(jù)提供企業(yè)數(shù)據(jù)云,從 Edge 到 AI ”(We deliver an Enterprise Data Cloud for any data, anywhere, from the Edge to AI)。不再是 Hadoop 和 CDH,不再是大數(shù)據(jù)。現(xiàn)在他們做企業(yè)云和人工智能。Hadoop現(xiàn)在真的很糟糕嗎?并沒有,Hadoop的過去十年是被炒的火熱的技術,非常多的企業(yè)在購買這個技術,甚至是一些創(chuàng)業(yè)公司也在購買并使用這個技術,“大數(shù)據(jù)”的炒作和泡沫告訴各個企業(yè),F(xiàn)acebook、LinkedIn、Google這些企業(yè)的成功是可以復制的,利用好大數(shù)據(jù)的力量你也可以達到這樣的規(guī)模,變得一樣成功??傊?,“大數(shù)據(jù)”在銷售的不是技術,而是在把IT巨頭的成功賣給這些傳統(tǒng)企業(yè)和創(chuàng)業(yè)公司。

一個十年的結束,一個十年的開始。

大數(shù)據(jù)的一個時代的結束了,Hadoop還值得你學習嗎?

大數(shù)據(jù)前十年處于一個飛速發(fā)展的時期,但是并不代表有些什么新的技術突破可以取代掉“大數(shù)據(jù)”,Hadoop依然是一種可行的技術,它的時代并沒有結束,真正結束的是“大數(shù)據(jù)”炒作的時代結束了?,F(xiàn)在的熱門趨勢是AI和機器學習,它們講再次循環(huán)一個十年,營銷人員不斷的推銷新軟件,還是以IT巨頭為代表,讓傳統(tǒng)行業(yè)為其買單,吹起下一個科技泡沫。而接下來的十年Hadoop該何去何從?它還值得你學習嗎?

Hadoop的時代并沒有結束

個體用戶會繼續(xù)追求簡單直接和低成本,大量的需求會出現(xiàn)越來越多的云廠商,這對Hadoop發(fā)展很不利,未來將面臨更多的挑戰(zhàn)。

很多企業(yè)的數(shù)據(jù)是遠遠談不上大數(shù)據(jù)的范疇的。但是企業(yè)只要還在運營,就一定能產(chǎn)生數(shù)據(jù),運營的時間越長久,規(guī)模越大就一定會遇到“大數(shù)據(jù)問題”,這是種必然的現(xiàn)象。大數(shù)據(jù)技術現(xiàn)在只有脫下光鮮亮麗的外衣,脫離聚光燈的照射慢慢沉淀,才會有更多機會的發(fā)展,Hadoop技術始終還是值得你學習的。

當前名稱:大數(shù)據(jù)的一個時代的結束了,Hadoop還有學習的必要嗎?
文章鏈接:http://www.muchs.cn/news/101295.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供App開發(fā)、網(wǎng)站建設、企業(yè)網(wǎng)站制作域名注冊、網(wǎng)頁設計公司、小程序開發(fā)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉載內(nèi)容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)

微信小程序開發(fā)