集算器(倉庫版)發(fā)布,黑科技獲得用戶好評-創(chuàng)新互聯(lián)

2018年5月16日,集算器(倉庫版)攜帶多項黑科技正式發(fā)布。

孫吳網(wǎng)站建設(shè)公司創(chuàng)新互聯(lián),孫吳網(wǎng)站設(shè)計制作,有大型網(wǎng)站制作公司豐富經(jīng)驗。已為孫吳上1000家提供企業(yè)網(wǎng)站建設(shè)服務(wù)。企業(yè)網(wǎng)站搭建\成都外貿(mào)網(wǎng)站建設(shè)公司要多少錢,請找那個售后服務(wù)好的孫吳做網(wǎng)站的公司定做!

集算器(倉庫版)發(fā)布,黑科技獲得用戶好評

在發(fā)布之前的應(yīng)用驗證中,倉庫版就已經(jīng)用實力贏得了用戶的好評。北京銀行用戶在評價倉庫版時表示:在數(shù)據(jù)分析實踐中,高并發(fā)訪問、大數(shù)據(jù)量計算造成的系統(tǒng)響應(yīng)時間過長的問題,始終沒有得到很好的解決。集算器(倉庫版)的出現(xiàn),徹底解決了這個難題!用集算器將高頻次熱點數(shù)據(jù)前置,構(gòu)建數(shù)據(jù)計算中間層,可以說是最佳解決方案,在很多場景下要優(yōu)于價值百萬的數(shù)據(jù)庫產(chǎn)品!

實際的測試也證明,集算器(倉庫版)確實表現(xiàn)優(yōu)異!以性能指標(biāo)為例,測試目標(biāo)是高頻熱點數(shù)據(jù),單日三千萬行。集算器和GreenPlum執(zhí)行同樣的條件查詢,集算器僅用2秒完成,GreenPlum執(zhí)行了5秒。GP測試環(huán)境是5個節(jié)點集群,每個節(jié)點是2*6核CPU,96G內(nèi)存的實體機(jī);而集算器所在的服務(wù)器僅是1*2核CPU,16G內(nèi)存的虛擬機(jī)。能夠大幅超越GP,足見黑科技的威力!

究竟是什么樣的黑科技能以如此優(yōu)異的表現(xiàn)贏得用戶的好評呢?下面,我們就一一道來:

黑科技之一:組表

組表又稱組合表,是集算器(倉庫版)數(shù)據(jù)存儲的基本方式。組表支持?jǐn)?shù)據(jù)的部分修改,支持更新恢復(fù),可以安全方便的從全量數(shù)據(jù)源中同步熱點數(shù)據(jù)。組表支持索引,而且數(shù)據(jù)本身就是有序存放的,常用的條件過濾計算不依賴索引也能保證高性能。索引在數(shù)據(jù)修改之后自動更新。

在上邊提到的測試中,采用的是列存硬盤存儲的方式。組表也可以采取行存和全內(nèi)存存儲數(shù)據(jù),支持內(nèi)存數(shù)據(jù)庫方式運行。

黑科技之二:可并行列存

組表采用的列存機(jī)制和常規(guī)列存是不同的。常規(guī)列存(比如parquet格式),只能分塊之后,再在塊內(nèi)列存,在做并行計算的時候是受限的。組表的可并行壓縮列存機(jī)制,采用倍增分段技術(shù),允許任意分段的并行計算,可以利用多CPU核的計算能力把硬盤的IO發(fā)揮到極致。

黑科技之三:集群組表

組表除了具備上述特性之外,還支持把數(shù)據(jù)分布在多臺機(jī)器上形成集群組表。集群組表可以利用多機(jī)并行來橫向擴(kuò)展計算能力和存儲容量。在用法上,集群組表和普通組表是基本相同的。也就是說,集群組表是透明集群,使用者無需關(guān)心多節(jié)點組表的細(xì)節(jié),可以當(dāng)成一個組表來用。

黑科技之四:主附表統(tǒng)一

有些數(shù)據(jù)表是同維(一對一)關(guān)系或者主子關(guān)系。比如:客戶表、VIP客戶表;用戶基本信息、家庭信息、教育經(jīng)歷、工作經(jīng)歷;訂單、訂單明細(xì)。

主附表統(tǒng)一是指將同維表或者主子表放到一個組表中,只存放一份主鍵。還可以省去這些表的連接(JOIN)計算,減小存儲空間,有效提高性能。

黑科技之五:序號鍵技術(shù)

外鍵關(guān)系的連接(JOIN)計算也比較常見,比如銷售記錄表通過“商品編號”和商品表關(guān)聯(lián)。序號鍵技術(shù)就是把銷售記錄中的商品編號都改成整數(shù),這個數(shù)就是該商品編號對應(yīng)的商品在商品表中的次序號。

序號鍵技術(shù)使得外鍵連接(JOIN)計算可以直接使用序號定位,不需要計算和比較HASH值,減少計算時間,提高性能。同時,使用序號鍵技術(shù)這種外鍵式連接技術(shù)方案,很容易把多個連接(JOIN)并行執(zhí)行。

黑科技之六:JDBC智能網(wǎng)關(guān)

集算器對外提供JDBC驅(qū)動和簡單SQL接口,具備可編程網(wǎng)關(guān)機(jī)制。通過編寫集算器內(nèi)置的新一代編程語言SPL代碼,可以自由的實現(xiàn)高頻次熱點數(shù)據(jù)的計算規(guī)則。

可以考慮的計算規(guī)則包括:分析前端傳入的SQL過濾條件中的日期參數(shù),如果命中集算器(倉庫版)已經(jīng)緩存的日期,則認(rèn)為是熱點數(shù)據(jù),直接訪問。沒有命中,則將SQL轉(zhuǎn)發(fā)給后臺傳統(tǒng)數(shù)據(jù)庫執(zhí)行。集算器還可以記錄訪問情況,用于分析熱點數(shù)據(jù)的時間和空間分布。


具備諸多黑科技的集算器(倉庫版)已經(jīng)可以與傳統(tǒng)數(shù)據(jù)庫、內(nèi)存數(shù)據(jù)庫等昂貴的產(chǎn)品一較高下,但是其價格卻又非常的實在和優(yōu)惠??梢灶A(yù)見,這款產(chǎn)品必將為您的軟件項目帶來新的價值和機(jī)遇?,F(xiàn)在,潤乾官網(wǎng)提供全功能的試用版本,立即下載體驗吧!

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。

網(wǎng)站欄目:集算器(倉庫版)發(fā)布,黑科技獲得用戶好評-創(chuàng)新互聯(lián)
轉(zhuǎn)載來源:http://muchs.cn/article6/dseeig.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站收錄、網(wǎng)站內(nèi)鏈、網(wǎng)站設(shè)計、做網(wǎng)站、關(guān)鍵詞優(yōu)化、網(wǎng)站排名

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

小程序開發(fā)