大數(shù)據(jù)技術(shù)的4個(gè)E-創(chuàng)新互聯(lián)

大數(shù)據(jù)技術(shù)的4個(gè)E

創(chuàng)新互聯(lián)是一家專(zhuān)注于網(wǎng)站設(shè)計(jì)、成都網(wǎng)站設(shè)計(jì)與策劃設(shè)計(jì),范縣網(wǎng)站建設(shè)哪家好?創(chuàng)新互聯(lián)做網(wǎng)站,專(zhuān)注于網(wǎng)站建設(shè)十多年,網(wǎng)設(shè)計(jì)領(lǐng)域的專(zhuān)業(yè)建站公司;建站業(yè)務(wù)涵蓋:范縣等地區(qū)。范縣做網(wǎng)站價(jià)格咨詢(xún):13518219792

大數(shù)據(jù)的4個(gè)V說(shuō)法在業(yè)界已經(jīng)盡人皆知,這是指的大數(shù)據(jù)本身的特征?,F(xiàn)在我們來(lái)考察一下用于處理大數(shù)據(jù)的技術(shù)應(yīng)該具有的特性。為方便記憶,類(lèi)似4個(gè)V,我們把這些特性總結(jié)成4個(gè)E,用戶(hù)在選擇大數(shù)據(jù)技術(shù)解決方案時(shí)可作為參考。

1. Easy 大數(shù)據(jù)技術(shù)要足夠簡(jiǎn)單易用

這個(gè)E很容易理解。

要進(jìn)行大數(shù)據(jù)處理的場(chǎng)景很多,涉及工作人員也是各種各樣的。如果技術(shù)的難度太大,那會(huì)導(dǎo)致只有少數(shù)人能應(yīng)用,而且實(shí)施復(fù)雜度較高,這樣大數(shù)據(jù)的應(yīng)用就會(huì)大打折扣了。

大數(shù)據(jù)領(lǐng)域這種例子并不少,Hadoop剛出來(lái)時(shí)只有MapReduce,相對(duì)于完全用Java硬寫(xiě),MapReduce已經(jīng)簡(jiǎn)單了很多,所以會(huì)積累出一批擁躉。但MapReduce的難度仍然不小,所以逐步被后來(lái)封裝出來(lái)的HIVE SQL替代。Spark上的Scala也風(fēng)靡過(guò)一陣,但難度仍然不少,目前也逐步歸于平靜,更多的人還是愿意使用更簡(jiǎn)單的Spark SQL。

2. Elastic 大數(shù)據(jù)技術(shù)要具有彈性擴(kuò)展能力

這個(gè)E也容易理解。

很多情況下,大數(shù)據(jù)并不是一下子就很大,而是逐步變大的。即使已經(jīng)較大的數(shù)據(jù),也還會(huì)進(jìn)一步變得更大。因此要求大數(shù)據(jù)處理技術(shù)有一定的彈性擴(kuò)展能力就是很自然的事情,這一點(diǎn)一般都不會(huì)被大數(shù)據(jù)技術(shù)提供商忽略掉。

當(dāng)然,任何技術(shù)都有局限性,面向一般規(guī)模和面向超大規(guī)模的技術(shù)相差是很大的,不大可能有一種技術(shù)能夠有效適應(yīng)數(shù)據(jù)規(guī)模從0到無(wú)窮大的各個(gè)階段(所謂有效適應(yīng)是在各個(gè)階段該技術(shù)都能達(dá)到相當(dāng)優(yōu)良的性能,而不只是可以處理),用戶(hù)在選擇技術(shù)時(shí)還要對(duì)自己的數(shù)據(jù)規(guī)模變化范圍有一個(gè)預(yù)估。

3. Embeddable 大數(shù)據(jù)技術(shù)應(yīng)可以被嵌入集成

這個(gè)E需要特別指出,常常不被重視。

大數(shù)據(jù)處理經(jīng)常并不是一件獨(dú)立的事情,它需要和具體的應(yīng)用配合工作才能發(fā)揮其業(yè)務(wù)價(jià)值,這些處理常常在應(yīng)用執(zhí)行到某個(gè)環(huán)節(jié)時(shí)就需要進(jìn)行,這樣就要求相應(yīng)的技術(shù)能夠被方便地嵌入集成到應(yīng)用程序中,隨時(shí)隨地被主程序調(diào)用。

特別地,大部分應(yīng)用程序建立在J2EE架構(gòu)上,因而對(duì)Java應(yīng)用的可集成性就是個(gè)特別重要的指標(biāo)。一般基于Java或SQL體系的大數(shù)據(jù)技術(shù)在集成方面都沒(méi)太大問(wèn)題,而其它技術(shù)體系的就難說(shuō)了。而且,大多數(shù)大數(shù)據(jù)技術(shù)常常需要獨(dú)立部署,即使其計(jì)算能力可以被集成,但必須依賴(lài)于外部的獨(dú)立進(jìn)程,不能被應(yīng)用完全控制,有時(shí)會(huì)顯得非常累贅。

4. Environment-friendly 大數(shù)據(jù)技術(shù)對(duì)數(shù)據(jù)環(huán)境要求盡量低

這個(gè)E是很多大數(shù)據(jù)技術(shù)不具有但卻很重要的。

目前的大數(shù)據(jù)技術(shù),如Hadoop和MPP等,都要求先把數(shù)據(jù)放進(jìn)該技術(shù)規(guī)定的某種存儲(chǔ)體系中。這樣當(dāng)然有意義,數(shù)據(jù)事先組織之后會(huì)獲得更高的性能。但是,經(jīng)常的情況是,我們需要處理的大數(shù)據(jù)事先并不在這些存儲(chǔ)體系中,而且把外部數(shù)據(jù)搬進(jìn)這些存儲(chǔ)體系本身也是一種大數(shù)據(jù)處理,這些場(chǎng)景下都無(wú)法利用這些大數(shù)據(jù)技術(shù)了。

更好的大數(shù)據(jù)技術(shù)應(yīng)當(dāng)能不挑數(shù)據(jù)源,隨便什么來(lái)源的數(shù)據(jù)都可以處理,只是有可能因?yàn)閿?shù)據(jù)源的限制而一定程度地降低性能,但并不要求必須先做好ETL才能處理。


其實(shí)最后那個(gè)特性用E并不是很貼切,但為了湊4個(gè)E就對(duì)付了。這個(gè)詞本來(lái)是環(huán)保的意思,開(kāi)放的大數(shù)據(jù)技術(shù)可以少?gòu)?fù)制一些數(shù)據(jù),少部署一些硬件,省點(diǎn)電,也算環(huán)保吧。

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無(wú)理由+7*72小時(shí)售后在線(xiàn),公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性?xún)r(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專(zhuān)為企業(yè)上云打造定制,能夠滿(mǎn)足用戶(hù)豐富、多元化的應(yīng)用場(chǎng)景需求。

新聞標(biāo)題:大數(shù)據(jù)技術(shù)的4個(gè)E-創(chuàng)新互聯(lián)
鏈接分享:http://www.muchs.cn/article2/dhjsoc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供全網(wǎng)營(yíng)銷(xiāo)推廣、微信公眾號(hào)、電子商務(wù)響應(yīng)式網(wǎng)站、網(wǎng)站設(shè)計(jì)公司、做網(wǎng)站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀(guān)點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話(huà):028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

商城網(wǎng)站建設(shè)