今年上半年，Gartner發(fā)布2021年度數(shù)據(jù)管理領(lǐng)域的成熟度模型報告—Hype Cycle，湖倉一體(Lakehouse)作為近兩年的新興技術(shù)熱點，成為了首次進入成熟度模型的五個新軍之一，備受業(yè)界關(guān)注。本篇文章，我們將介紹什么是湖倉一體，湖倉一體架構(gòu)的特點和技術(shù)優(yōu)勢。
湖倉一體，其含義是指將數(shù)據(jù)湖的語義靈活性與數(shù)據(jù)倉庫的生產(chǎn)優(yōu)化和交付相結(jié)合。它是一個融合的基礎(chǔ)設(shè)施環(huán)境，支持從原始數(shù)據(jù)到精煉數(shù)據(jù)的整個過程，并最終提供優(yōu)化后的數(shù)據(jù)以供消費。
湖倉一體將使業(yè)務(wù)從簡化的交付流程、數(shù)據(jù)的快速訪問中受益，同時滿足了用戶對于性能和易用性的更高要求，降低了大數(shù)據(jù)分析的技術(shù)復(fù)雜度和成本，同時滿足了用戶對性能和易用性的更高要求。通過構(gòu)建整合的數(shù)據(jù)管理平臺，服務(wù)于各種各樣的職能角色，包括專業(yè)的數(shù)據(jù)科學家、數(shù)據(jù)工程師和業(yè)務(wù)分析師等，甚至包括通過數(shù)據(jù)看板來使用數(shù)據(jù)的臨時用戶。湖倉一體本質(zhì)上為數(shù)據(jù)科學的創(chuàng)新提供了定義明確、可落地的發(fā)展途徑。
湖倉一體作為企業(yè)未來數(shù)據(jù)平臺的重要基礎(chǔ)架構(gòu)，需要一種強有力的分布式數(shù)據(jù)庫支撐其海量、多模、多態(tài)的數(shù)據(jù)。巨杉數(shù)據(jù)庫SequoiaDB基于100%自研的分布式數(shù)據(jù)庫內(nèi)核，提供了湖倉一體萬億級數(shù)據(jù)服務(wù)平臺，適用于歷史數(shù)據(jù)平臺、全量數(shù)據(jù)平臺、實時數(shù)據(jù)中臺等需要將海量多模數(shù)據(jù)用于對客服務(wù)的場景。
巨杉數(shù)據(jù)庫基于湖倉一體的架構(gòu)特性，構(gòu)建數(shù)據(jù)基礎(chǔ)設(shè)施平臺，整合結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一存儲與管理，為面向全量數(shù)據(jù)業(yè)務(wù)提供：SQL、NoSQL、Object等多種接口。此外，通過特有的跨引擎事務(wù)能力，可以有效簡化多團隊開發(fā)流程中對不同引擎、不同結(jié)構(gòu)的數(shù)據(jù)管理，打通ACID事務(wù)支持，提升業(yè)務(wù)開發(fā)、數(shù)據(jù)處理、運維管理能力，釋放全量數(shù)據(jù)價值，提升企業(yè)數(shù)據(jù)處理的“人效”及“能效”。
基于SequoiaDB分布式數(shù)據(jù)庫的湖倉一體平臺，除了具備多模能力，兼容多種數(shù)據(jù)引擎以外，還提供包括流式計算、高性能列存分析引擎等能力，適用于需構(gòu)建融合數(shù)據(jù)平臺及在保持事務(wù)一致性的基礎(chǔ)上，進行高性能實時分析的場景。通過SequoiaDB可打破數(shù)據(jù)湖與數(shù)據(jù)倉庫割裂的體系，為上層應(yīng)用提供一數(shù)一源的數(shù)據(jù)基礎(chǔ)設(shè)施，助力客戶實現(xiàn)提升數(shù)據(jù)管理水平、降低成本、提升運營效率、提升用戶體驗等目標。
目前，巨杉數(shù)據(jù)庫已經(jīng)在超過100家金融銀行客戶規(guī)?；暇€使用，覆蓋國有銀行、股份制銀行、省級農(nóng)信、城商行、保險、證券等金融客戶，已經(jīng)正式生產(chǎn)上線的系統(tǒng)中最大運行集群，數(shù)據(jù)量達1.2萬億行，容量達3PB，規(guī)模超過400臺服務(wù)器，積累了豐富的最佳實踐及案例，幫助客戶構(gòu)建起數(shù)據(jù)平臺最佳底座。
數(shù)據(jù)湖和數(shù)據(jù)倉庫，原本是大數(shù)據(jù)技術(shù)條件下構(gòu)建分布式系統(tǒng)的兩種數(shù)據(jù)架構(gòu)設(shè)計取向。而融合后的湖倉一體，為業(yè)界和用戶展現(xiàn)了一種湖與倉互相補充、協(xié)同工作的架構(gòu)。未來，巨杉數(shù)據(jù)庫將不斷優(yōu)化湖倉一體數(shù)據(jù)服務(wù)平臺，探索和嘗試更多湖倉一體解決方案，幫助企業(yè)釋放全量數(shù)據(jù)價值。
了解更多內(nèi)容可關(guān)注微信公眾號：巨杉數(shù)據(jù)庫
申請創(chuàng)業(yè)報道，分享創(chuàng)業(yè)好點子。點擊此處，共同探討創(chuàng)業(yè)新機遇！
隨著數(shù)字中國戰(zhàn)略的步步落實，大數(shù)據(jù)已經(jīng)成為錨定戰(zhàn)略定位、搶得市場先機的重要基礎(chǔ)元素。為彰顯行業(yè)發(fā)展現(xiàn)狀，遴選、推薦優(yōu)秀企業(yè)，長城戰(zhàn)略咨詢近日在2023中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會期間，重磅發(fā)布《中國大數(shù)據(jù)獨角獸企業(yè)榜單》，根據(jù)獨角獸企業(yè)國家推薦性標準，篩選出259家2022年中國大數(shù)據(jù)（潛在）獨角獸企業(yè)
2023年6月15日至18日，2023北京健康醫(yī)療大數(shù)據(jù)論壇、醫(yī)促會華夏健康數(shù)據(jù)與數(shù)字醫(yī)學高峰論壇、第三屆中華預(yù)防醫(yī)學會腎臟病預(yù)防與控制專業(yè)委員會學術(shù)會議將同期于北京舉行。論壇以“學術(shù)引領(lǐng)數(shù)智健康”為主題，著眼國家戰(zhàn)略需求，聚焦前沿科技在健康醫(yī)療領(lǐng)域的發(fā)展與實踐，薈萃全球頂尖學術(shù)觀點，促進多方跨界融
在今年的韌性新時代·新品發(fā)布會上，愛數(shù)正式發(fā)布了AnyBackupFamily8，從數(shù)據(jù)保護邁向業(yè)務(wù)數(shù)據(jù)生命周期管理的征途。針對備受組織關(guān)注的開發(fā)測試場景，愛數(shù)于4月20日下午舉辦“測試數(shù)據(jù)管理”神盾會（九），以創(chuàng)新方案和領(lǐng)先技術(shù)突破測試數(shù)據(jù)管理的重重枷鎖，助力組織釋放備份數(shù)據(jù)價值，以數(shù)據(jù)重塑生產(chǎn)力
2023年3月，全球領(lǐng)先的時間序列數(shù)據(jù)庫廠商DolphinDB與洲際交易所集團（IntercontinentalExchange,Inc.,NYSE:ICE）達成協(xié)議，將為高性能時間序列數(shù)據(jù)庫DolphinDB提供訪問ICEConsolidatedFeed和Tick級歷史數(shù)據(jù)服務(wù)接口。本次合作將為D
近日，由中國電子信息行業(yè)聯(lián)合會主辦的“首屆中國數(shù)據(jù)治理年會”在北京隆重召開。大會現(xiàn)場公布了2022年數(shù)據(jù)管理百項優(yōu)秀案例榜單，佰聆數(shù)據(jù)【基于大數(shù)據(jù)標簽的電力數(shù)據(jù)質(zhì)量優(yōu)化提升項目】成功入選。證書來源于官方本次年會主題為【貫徹“數(shù)據(jù)二十條”，做強做優(yōu)做大我國數(shù)字經(jīng)濟】，參會人員涉及工信部直屬單位、部分省
把脈中國數(shù)據(jù)智能化
2023年，幾乎可以被定義為中國互聯(lián)網(wǎng)公司的“大模型元年”。ChatGPT的全球爆紅，徹底點燃國內(nèi)的大模型賽道，曾經(jīng)的“創(chuàng)業(yè)英雄”、如今的商業(yè)領(lǐng)袖們親自下場，接連發(fā)布生成式人工智能產(chǎn)品與大模型布局。大模型火了，沉寂許久的互聯(lián)網(wǎng)行業(yè)又有了新的“戰(zhàn)事”。同時，大模型的快速發(fā)展也改變了云市場的現(xiàn)狀，企業(yè)對
近日，數(shù)字化市場研究咨詢機構(gòu)愛分析發(fā)布了《2022愛分析·數(shù)據(jù)智能廠商全景報告》，愛分析從技術(shù)研發(fā)能力、服務(wù)客戶數(shù)量、收入規(guī)模等維度對廠商進行了全面專業(yè)的評估
2022年11月18日,首個國家級大數(shù)據(jù)產(chǎn)業(yè)創(chuàng)新賽事——2022第一屆中國大數(shù)據(jù)大賽圓滿落幕。工業(yè)和信息化部信息技術(shù)發(fā)展司數(shù)字經(jīng)濟推進處處長張建倫,中國電子技術(shù)標準化研究院副院長孫文龍出席頒獎典禮并致辭
2022年11月17日，在廈門市工業(yè)和信息化局的指導(dǎo)下，以“數(shù)據(jù)確權(quán)”為主題的2022數(shù)據(jù)資產(chǎn)(廈門)論壇在廈門成功舉辦。本次論壇以“數(shù)據(jù)確權(quán)”為主題，由廈門市互聯(lián)網(wǎng)域名應(yīng)用服務(wù)產(chǎn)業(yè)協(xié)會和構(gòu)信網(wǎng)(公信.中國)聯(lián)合主辦
近日，國內(nèi)知名數(shù)字化市場研究咨詢機構(gòu)愛分析正式發(fā)布《2022愛分析·信創(chuàng)廠商全景報告》(以下簡稱“報告”)。報告綜合考慮企業(yè)關(guān)注度、行業(yè)落地進展等因素，遴選出在信創(chuàng)市場中具備成熟解決方案和落地能力的廠商。
10月31日下午,由數(shù)博會執(zhí)委會主辦、數(shù)據(jù)觀(北京)傳媒科技有限公司承辦、貴陽大數(shù)據(jù)交易所協(xié)辦的第四期數(shù)博思享會“實踐先行觀公共數(shù)據(jù)價值與應(yīng)用”活動成功舉辦。
近日，由中國國際數(shù)字經(jīng)濟博覽會組委會主辦，中國電子技術(shù)標準化研究院、河北省工業(yè)和信息化廳承辦的“第一屆中國大數(shù)據(jù)大賽”(簡稱大數(shù)據(jù)大賽)正式啟動。
廣州光點信息科技有限公司自主研發(fā)的數(shù)據(jù)中臺產(chǎn)品GI大數(shù)據(jù)中臺V2.0產(chǎn)品是國內(nèi)率先推出符合新創(chuàng)標準的中臺產(chǎn)品,基于“大數(shù)據(jù)+AI”等技術(shù)全新打造,集數(shù)據(jù)采集、融合、治理、服務(wù)、管理為一體的旗艦平臺。
廣州光點信息科技有限公司自主研發(fā)的數(shù)據(jù)中臺產(chǎn)品GI大數(shù)據(jù)中臺V2.0產(chǎn)品是國內(nèi)率先推出符合新創(chuàng)標準的中臺產(chǎn)品,基于“大數(shù)據(jù)+AI”等技術(shù)全新打造,集數(shù)據(jù)采集、融合、治理、服務(wù)、管理為一體的旗艦平臺
