集算器(倉庫版)發(fā)布,黑科技獲得用戶好評(píng)-創(chuàng)新互聯(lián)

2018年5月16日,集算器(倉庫版)攜帶多項(xiàng)黑科技正式發(fā)布。

孫吳網(wǎng)站建設(shè)公司創(chuàng)新互聯(lián),孫吳網(wǎng)站設(shè)計(jì)制作,有大型網(wǎng)站制作公司豐富經(jīng)驗(yàn)。已為孫吳上1000家提供企業(yè)網(wǎng)站建設(shè)服務(wù)。企業(yè)網(wǎng)站搭建\成都外貿(mào)網(wǎng)站建設(shè)公司要多少錢,請(qǐng)找那個(gè)售后服務(wù)好的孫吳做網(wǎng)站的公司定做!

集算器(倉庫版)發(fā)布,黑科技獲得用戶好評(píng)

在發(fā)布之前的應(yīng)用驗(yàn)證中,倉庫版就已經(jīng)用實(shí)力贏得了用戶的好評(píng)。北京銀行用戶在評(píng)價(jià)倉庫版時(shí)表示:在數(shù)據(jù)分析實(shí)踐中,高并發(fā)訪問、大數(shù)據(jù)量計(jì)算造成的系統(tǒng)響應(yīng)時(shí)間過長的問題,始終沒有得到很好的解決。集算器(倉庫版)的出現(xiàn),徹底解決了這個(gè)難題!用集算器將高頻次熱點(diǎn)數(shù)據(jù)前置,構(gòu)建數(shù)據(jù)計(jì)算中間層,可以說是最佳解決方案,在很多場(chǎng)景下要優(yōu)于價(jià)值百萬的數(shù)據(jù)庫產(chǎn)品!

實(shí)際的測(cè)試也證明,集算器(倉庫版)確實(shí)表現(xiàn)優(yōu)異!以性能指標(biāo)為例,測(cè)試目標(biāo)是高頻熱點(diǎn)數(shù)據(jù),單日三千萬行。集算器和GreenPlum執(zhí)行同樣的條件查詢,集算器僅用2秒完成,GreenPlum執(zhí)行了5秒。GP測(cè)試環(huán)境是5個(gè)節(jié)點(diǎn)集群,每個(gè)節(jié)點(diǎn)是2*6核CPU,96G內(nèi)存的實(shí)體機(jī);而集算器所在的服務(wù)器僅是1*2核CPU,16G內(nèi)存的虛擬機(jī)。能夠大幅超越GP,足見黑科技的威力!

究竟是什么樣的黑科技能以如此優(yōu)異的表現(xiàn)贏得用戶的好評(píng)呢?下面,我們就一一道來:

黑科技之一:組表

組表又稱組合表,是集算器(倉庫版)數(shù)據(jù)存儲(chǔ)的基本方式。組表支持?jǐn)?shù)據(jù)的部分修改,支持更新恢復(fù),可以安全方便的從全量數(shù)據(jù)源中同步熱點(diǎn)數(shù)據(jù)。組表支持索引,而且數(shù)據(jù)本身就是有序存放的,常用的條件過濾計(jì)算不依賴索引也能保證高性能。索引在數(shù)據(jù)修改之后自動(dòng)更新。

在上邊提到的測(cè)試中,采用的是列存硬盤存儲(chǔ)的方式。組表也可以采取行存和全內(nèi)存存儲(chǔ)數(shù)據(jù),支持內(nèi)存數(shù)據(jù)庫方式運(yùn)行。

黑科技之二:可并行列存

組表采用的列存機(jī)制和常規(guī)列存是不同的。常規(guī)列存(比如parquet格式),只能分塊之后,再在塊內(nèi)列存,在做并行計(jì)算的時(shí)候是受限的。組表的可并行壓縮列存機(jī)制,采用倍增分段技術(shù),允許任意分段的并行計(jì)算,可以利用多CPU核的計(jì)算能力把硬盤的IO發(fā)揮到極致。

黑科技之三:集群組表

組表除了具備上述特性之外,還支持把數(shù)據(jù)分布在多臺(tái)機(jī)器上形成集群組表。集群組表可以利用多機(jī)并行來橫向擴(kuò)展計(jì)算能力和存儲(chǔ)容量。在用法上,集群組表和普通組表是基本相同的。也就是說,集群組表是透明集群,使用者無需關(guān)心多節(jié)點(diǎn)組表的細(xì)節(jié),可以當(dāng)成一個(gè)組表來用。

黑科技之四:主附表統(tǒng)一

有些數(shù)據(jù)表是同維(一對(duì)一)關(guān)系或者主子關(guān)系。比如:客戶表、VIP客戶表;用戶基本信息、家庭信息、教育經(jīng)歷、工作經(jīng)歷;訂單、訂單明細(xì)。

主附表統(tǒng)一是指將同維表或者主子表放到一個(gè)組表中,只存放一份主鍵。還可以省去這些表的連接(JOIN)計(jì)算,減小存儲(chǔ)空間,有效提高性能。

黑科技之五:序號(hào)鍵技術(shù)

外鍵關(guān)系的連接(JOIN)計(jì)算也比較常見,比如銷售記錄表通過“商品編號(hào)”和商品表關(guān)聯(lián)。序號(hào)鍵技術(shù)就是把銷售記錄中的商品編號(hào)都改成整數(shù),這個(gè)數(shù)就是該商品編號(hào)對(duì)應(yīng)的商品在商品表中的次序號(hào)。

序號(hào)鍵技術(shù)使得外鍵連接(JOIN)計(jì)算可以直接使用序號(hào)定位,不需要計(jì)算和比較HASH值,減少計(jì)算時(shí)間,提高性能。同時(shí),使用序號(hào)鍵技術(shù)這種外鍵式連接技術(shù)方案,很容易把多個(gè)連接(JOIN)并行執(zhí)行。

黑科技之六:JDBC智能網(wǎng)關(guān)

集算器對(duì)外提供JDBC驅(qū)動(dòng)和簡(jiǎn)單SQL接口,具備可編程網(wǎng)關(guān)機(jī)制。通過編寫集算器內(nèi)置的新一代編程語言SPL代碼,可以自由的實(shí)現(xiàn)高頻次熱點(diǎn)數(shù)據(jù)的計(jì)算規(guī)則。

可以考慮的計(jì)算規(guī)則包括:分析前端傳入的SQL過濾條件中的日期參數(shù),如果命中集算器(倉庫版)已經(jīng)緩存的日期,則認(rèn)為是熱點(diǎn)數(shù)據(jù),直接訪問。沒有命中,則將SQL轉(zhuǎn)發(fā)給后臺(tái)傳統(tǒng)數(shù)據(jù)庫執(zhí)行。集算器還可以記錄訪問情況,用于分析熱點(diǎn)數(shù)據(jù)的時(shí)間和空間分布。


具備諸多黑科技的集算器(倉庫版)已經(jīng)可以與傳統(tǒng)數(shù)據(jù)庫、內(nèi)存數(shù)據(jù)庫等昂貴的產(chǎn)品一較高下,但是其價(jià)格卻又非常的實(shí)在和優(yōu)惠。可以預(yù)見,這款產(chǎn)品必將為您的軟件項(xiàng)目帶來新的價(jià)值和機(jī)遇?,F(xiàn)在,潤乾官網(wǎng)提供全功能的試用版本,立即下載體驗(yàn)吧!

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

網(wǎng)站欄目:集算器(倉庫版)發(fā)布,黑科技獲得用戶好評(píng)-創(chuàng)新互聯(lián)
轉(zhuǎn)載來源:http://bm7419.com/article6/dseeig.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站收錄、網(wǎng)站內(nèi)鏈、網(wǎng)站設(shè)計(jì)、做網(wǎng)站、關(guān)鍵詞優(yōu)化網(wǎng)站排名

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

小程序開發(fā)