急用戶之所急，想用戶之所想——Smartbi V9新功能介紹（二）

　 域名預(yù)訂/競(jìng)價(jià)，好“米”不錯(cuò)過(guò)

一直以來(lái)，Smartbi回饋用戶的最好方式是提供更好的產(chǎn)品和更好的服務(wù)。V9作為Smartbi最新發(fā)布的版本，眾多實(shí)用功能就是從用戶的實(shí)際情況出發(fā)，急用戶之所急，想用戶之所想。從今天開始，小麥會(huì)用系列文章和大家一起分享。本期介紹V9在【數(shù)據(jù)準(zhǔn)備】方面的一些新功能亮點(diǎn)。

分批次和多線程并發(fā)，提高數(shù)據(jù)抽取效率

之前的Smartbi版本，數(shù)據(jù)抽取存在以下兩種情況：

1、一次性將所有數(shù)據(jù)從數(shù)據(jù)庫(kù)寫入到緩存庫(kù)中，在數(shù)據(jù)量較大的情況下，會(huì)出現(xiàn)占用內(nèi)存太大的問題。V9支持分批次將數(shù)據(jù)寫入到緩存庫(kù)中，既能保證查詢速度又避免占用太大內(nèi)存，達(dá)到最高效率;

2、當(dāng)抽取億級(jí)數(shù)據(jù)量時(shí)，如果為單線程抽取，容易出現(xiàn)抽取緩慢，抽取不成功甚至環(huán)境崩潰的情況。V9增加多線程并發(fā)抽取，在用戶抽取較大數(shù)據(jù)量時(shí)，可設(shè)置多線程并發(fā)抽取。以Smartbi從MPP抽取1億條數(shù)據(jù)為例，單線程抽取需要耗時(shí)2.5小時(shí)，設(shè)置10個(gè)線程進(jìn)行抽取時(shí)，僅需48分鐘，速度提升了3倍。

支持各種數(shù)據(jù)集的增量抽取，避免資源浪費(fèi)

之前的版本，只有自助數(shù)據(jù)集支持增量抽取。V9除了自助數(shù)據(jù)集，對(duì)可視化數(shù)據(jù)集、原生SQL數(shù)據(jù)集、SQL數(shù)據(jù)集、存儲(chǔ)過(guò)程數(shù)據(jù)集、Java數(shù)據(jù)集等也支持增量抽取。在“抽取設(shè)置界面”中的“增量抽取按時(shí)間戳”選項(xiàng)可進(jìn)行設(shè)置。

支持MPP集群抽取，適用性進(jìn)一步增強(qiáng)

當(dāng)高速緩存庫(kù)連接的驅(qū)動(dòng)程序類型是“SmartbiMPP”時(shí)，V9支持集群抽取。在“抽取設(shè)置”界面增加“高級(jí)設(shè)置”，對(duì)“分區(qū)字段”和“分區(qū)類型”進(jìn)行設(shè)置。其中，分區(qū)字段要求為日期類型。

支持自定義表名，查找更加直觀

之前的版本，數(shù)據(jù)集和即席查詢抽取保存在高速緩存庫(kù)的表，默認(rèn)以“數(shù)據(jù)集ID”作為表名稱，“數(shù)據(jù)集名稱”作為表別名，在數(shù)據(jù)庫(kù)查看表時(shí)，以數(shù)據(jù)集ID作為表名稱，不利于用戶直觀查找需要的表。V9支持?jǐn)?shù)據(jù)集和即席查詢抽取保存在高速緩存庫(kù)的表自定義表名。

時(shí)間管理增加維度，滿足各種統(tǒng)計(jì)周期

業(yè)務(wù)人員經(jīng)常需要做統(tǒng)計(jì)分析報(bào)表，如月匯報(bào)、周匯報(bào)等。為了滿足更多維度的統(tǒng)計(jì)分析，V9維度管理增加支持“半年”“旬”“周”。 其中，“半年”的顯示格式為：上半年、下半年;“旬”為：上、中、下;“周”為：Www(W不變，就是一個(gè)字母，ww標(biāo)識(shí)第幾周，如2019年第一周為：2019-W01。

提供標(biāo)準(zhǔn)函數(shù)檢驗(yàn)，減少數(shù)據(jù)抽取報(bào)錯(cuò)

之前的版本自助數(shù)據(jù)集計(jì)算字段支持的函數(shù)是根據(jù)其所屬數(shù)據(jù)庫(kù)類型決定的，這種方式會(huì)存在函數(shù)不兼容的問題，導(dǎo)致在抽取時(shí)報(bào)SQL錯(cuò)誤。針對(duì)這一弊端，也結(jié)合產(chǎn)品的使用，V9基于SQL92為標(biāo)準(zhǔn)，封裝一套Smartbi自身的函數(shù)語(yǔ)法，用于適配Smartbi所支持的數(shù)據(jù)庫(kù)，校驗(yàn)輸入的函數(shù)是否在提供的函數(shù)列表中。如果函數(shù)不在函數(shù)列表中，則會(huì)提示該函數(shù)不是標(biāo)準(zhǔn)函數(shù)庫(kù)語(yǔ)法，在其他數(shù)據(jù)庫(kù)可能無(wú)法使用。

除了以上介紹的新功能點(diǎn)，Smartbi V9在【數(shù)據(jù)準(zhǔn)備】方面還有很多小優(yōu)化。如自助數(shù)據(jù)集的數(shù)據(jù)來(lái)源為“hana數(shù)據(jù)源”時(shí)，自助數(shù)據(jù)集支持其所帶參數(shù);增加“多維數(shù)據(jù)集”作為自助數(shù)據(jù)集的數(shù)據(jù)來(lái)源;數(shù)據(jù)集的抽取日志采取分頁(yè)加載等等，大家有興趣可以登錄V9體驗(yàn)中心進(jìn)行試用，親自感受V9的全新UI、全新功能。

V9體驗(yàn)中心：PC登錄官網(wǎng)->體驗(yàn)中心

概括如下：

1、 分批次讀數(shù)據(jù)和多線程并發(fā)抽取

2、 支持各種數(shù)據(jù)集的增量抽取

3、 支持MPP集群抽取

4、 抽取支持自定義表名

5、 時(shí)間維度管理增加“半年”“旬”“周”

6、 提供標(biāo)準(zhǔn)函數(shù)檢驗(yàn)

申請(qǐng)創(chuàng)業(yè)報(bào)道，分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處，共同探討創(chuàng)業(yè)新機(jī)遇！