2024年8月22~24日,由IT168聯(lián)合旗下ITPUB、ChinaUnix兩大技術(shù)社區(qū)主辦的第15屆中國數(shù)據(jù)庫技術(shù)大會(huì)(DTCC2024)在朗麗茲西山花園酒店隆重召開。
數(shù)字化創(chuàng)新浪潮洶涌澎湃,數(shù)據(jù)庫作為信息技術(shù)的核心基礎(chǔ)設(shè)施,正以前所未用的速度推動(dòng)各行各業(yè)的智能化升級。大會(huì)以“自研創(chuàng)新 數(shù)智未來”為主題,設(shè)置2大主會(huì)場,20+技術(shù)專場,重點(diǎn)圍繞向量數(shù)據(jù)庫與向量檢索技術(shù)實(shí)踐、數(shù)據(jù)治理與數(shù)據(jù)資產(chǎn)管理、云原生數(shù)據(jù)庫開發(fā)與實(shí)踐、特定場景下的數(shù)據(jù)庫管理與優(yōu)化、大數(shù)據(jù)平臺建設(shè)等內(nèi)容展開分享和探討。超百位行業(yè)專家傾情奉獻(xiàn),上千名嘉賓匯聚一堂,共享數(shù)據(jù)庫領(lǐng)域饕餮盛宴!
深化交流,共筑技術(shù)橋梁
大會(huì)首日的主會(huì)場,ITPUB總經(jīng)理、DTCC中國數(shù)據(jù)庫技術(shù)大會(huì)創(chuàng)辦人唐川,借大會(huì)開幕之際重點(diǎn)介紹了ITPUB私享會(huì),誠邀廣大技術(shù)專家加入,共赴數(shù)據(jù)技術(shù)創(chuàng)新之旅。
▲ITPUB總經(jīng)理、DTCC中國數(shù)據(jù)庫技術(shù)大會(huì)創(chuàng)辦人 唐川
自2009年起,ITPUB社區(qū)便與中國數(shù)據(jù)庫技術(shù)的發(fā)展同行,連續(xù)十四屆DTCC中國數(shù)據(jù)庫大會(huì),以及十八屆SACC中國系統(tǒng)架構(gòu)師大會(huì)的成功舉辦,見證了社區(qū)成長與蛻變。這背后,是超過3000位技術(shù)專家的智慧與汗水,是他們對技術(shù)的執(zhí)著追求,讓ITPUB有了今天的成就。
為了更好地服務(wù)于這些優(yōu)秀的技術(shù)老師, ITPUB私享會(huì)將再接再勵(lì),打造一個(gè)專屬于技術(shù)人的高端交流平臺。
ITPUB社區(qū)正在努力的方向,幾個(gè)重要城市的活動(dòng)可以證明。從北京的繁華到上海的現(xiàn)代,從廣州的開放到南京的深邃,ITPUB社區(qū)已經(jīng)在多個(gè)城市成功舉辦了多場專題研討會(huì),收獲了滿滿的熱情與無數(shù)正向反饋。而未來,ITPUB的步伐不會(huì)停歇,成都的悠然、西安的古韻、武漢的活力,都將成為新活動(dòng)的舞臺。
ITPUB私享會(huì),形式多樣,內(nèi)容豐富。既可以是十余人圍坐一堂的小型行業(yè)交流會(huì),也可以是集合多方智慧的專題研討會(huì)。同時(shí),它還能是親子同樂的戶外活動(dòng),讓技術(shù)與生活完美融合。今晚即將舉行的DB之夜晚宴,正是私享會(huì)特色活動(dòng)的一次精彩呈現(xiàn),期待與廣大技術(shù)專家深度交流與溝通。
另外,為了進(jìn)一步提升服務(wù)質(zhì)量,ITPUB正在組建一支由300名培訓(xùn)專家組成的“天團(tuán)”,以課程培訓(xùn)的方式深度覆蓋各個(gè)領(lǐng)域的技術(shù)難點(diǎn)。
未來,ITPUB社區(qū)將始終致力于搭建技術(shù)專家與企業(yè)用戶之間的橋梁。通過不斷的交流與合作,能夠?qū)崿F(xiàn)技術(shù)老師、ITPUB社區(qū)以及企業(yè)用戶之間的共贏。
自研創(chuàng)新,集中式與分布式一體化新型集群架構(gòu)探索
經(jīng)過幾十年的發(fā)展,達(dá)夢依托一套代碼根,已經(jīng)走出了一條中國數(shù)據(jù)庫自主發(fā)展之路。為滿足不同客戶對數(shù)據(jù)庫的需求,集中式與分布式一體化新型集群架構(gòu)的創(chuàng)新,可以說是為數(shù)據(jù)庫的自主研發(fā)帶來了“新范式”。
▲武漢達(dá)夢數(shù)據(jù)庫股份有限公司產(chǎn)品服務(wù)中心總經(jīng)理 黃海明
會(huì)議期間,武漢達(dá)夢數(shù)據(jù)庫股份有限公司產(chǎn)品服務(wù)中心總經(jīng)理黃海明,揭開了數(shù)據(jù)庫大會(huì)的首日精彩。
自2008年起,達(dá)夢不斷優(yōu)化架構(gòu),從單機(jī)到主從、主備,再到共享存儲(chǔ)集群,直至現(xiàn)在的分布式數(shù)據(jù)庫。特別是在國產(chǎn)芯片興起后,達(dá)夢推出了讀寫分離架構(gòu),能夠更有效地利用資源。
黃海明重點(diǎn)介紹了共享存儲(chǔ)集群與分布式數(shù)據(jù)庫。共享存儲(chǔ)集群方面,達(dá)夢歷經(jīng)多年研發(fā),解決了文件系統(tǒng)選擇、內(nèi)核改造等難題,最終實(shí)現(xiàn)了多個(gè)節(jié)點(diǎn)共享集群,并支持快速故障切換。在金融、電力等領(lǐng)域,達(dá)夢共享集群已廣泛應(yīng)用,如南方電網(wǎng)超大型ERP系統(tǒng)、梅州客商銀行核心業(yè)務(wù)等。
分布式數(shù)據(jù)庫方面,達(dá)夢從MPP架構(gòu)起步,逐步發(fā)展為存算分離的原生分布式架構(gòu),支持事務(wù)型應(yīng)用和HTAP。福建移動(dòng)大數(shù)據(jù)、全民醫(yī)療健康系統(tǒng)等案例,展現(xiàn)了達(dá)夢分布式數(shù)據(jù)庫的強(qiáng)大能力。
更為關(guān)鍵的是,達(dá)夢實(shí)現(xiàn)了集中式和分布式的一體化架構(gòu)。通過同一套代碼根(達(dá)夢DM8),可以靈活部署為集中式或分布式模式,提供統(tǒng)一的語法、編程接口及運(yùn)維管理。這種設(shè)計(jì)讓用戶可根據(jù)業(yè)務(wù)需求自由選擇,極大地提升了靈活性和便捷性。
達(dá)夢堅(jiān)持自主可控的研發(fā)路線,能夠快速響應(yīng)市場需求,不斷創(chuàng)新。近十年來,平均每年響應(yīng)超千項(xiàng)用戶需求,并持續(xù)推出新產(chǎn)品和解決方案。
數(shù)智躍升,從全場景規(guī)模復(fù)制到更優(yōu)數(shù)據(jù)底座
打造全場景工程化復(fù)制能力,很多國產(chǎn)數(shù)據(jù)庫企業(yè)都在走相同的道路。但從未來發(fā)展來看,擁有更可靠的運(yùn)行能力,需要從內(nèi)核角度不斷打磨,進(jìn)行更多層面的創(chuàng)新。
▲華為云數(shù)據(jù)庫業(yè)務(wù)CTO 蘇光牛
華為云數(shù)據(jù)庫業(yè)務(wù)CTO蘇光牛 在主題分享中,介紹了GaussDB最新進(jìn)展以及華為自身數(shù)據(jù)庫的替換歷程。面對7億行代碼挑戰(zhàn),華為在兩年內(nèi)實(shí)現(xiàn)了數(shù)據(jù)庫的成功替換,展現(xiàn)了強(qiáng)大的工程能力。在應(yīng)對流量洪峰、大數(shù)據(jù)量及長訂單處理過程中,GaussDB能夠?qū)崿F(xiàn)高效處理,支持高達(dá)24T單實(shí)例,并且實(shí)現(xiàn)了TP/AP分離,每秒處理超200兆日志。
在數(shù)智創(chuàng)新過程中,GaussDB與國內(nèi)大行聯(lián)創(chuàng),解決了復(fù)雜表關(guān)聯(lián)與存儲(chǔ)過程替換問題,并向城商、融信等關(guān)鍵信息基礎(chǔ)設(shè)施行業(yè)拓展,如醫(yī)保、人社等,均實(shí)現(xiàn)成功替換。
為實(shí)現(xiàn)平滑遷移,GaussDB提出三大方案:分布式架構(gòu)兼容集中式使用,降低遷移難度;單體分布式架構(gòu)支持多應(yīng)用共存,靈活資源分配;強(qiáng)大擴(kuò)展性應(yīng)對大數(shù)據(jù)量業(yè)務(wù)。
在實(shí)際業(yè)務(wù)場景中,GaussDB強(qiáng)調(diào)穩(wěn)定可靠與高性能并重,避免“單庫風(fēng)險(xiǎn)”,同時(shí)通過數(shù)據(jù)同步實(shí)現(xiàn)TP與AP分離,提升決策效率與業(yè)務(wù)智能化。目前,GaussDB已具備全場景覆蓋能力,助力企業(yè)實(shí)現(xiàn)數(shù)據(jù)庫替換與智能化轉(zhuǎn)型。
緊跟時(shí)代, 全棧自研助力企業(yè)數(shù)智化轉(zhuǎn)型
順應(yīng)企業(yè)數(shù)字化轉(zhuǎn)型及大模型技術(shù)發(fā)展,騰訊云數(shù)據(jù)庫緊跟時(shí)代,實(shí)現(xiàn)了從云數(shù)據(jù)庫到云原生數(shù)據(jù)庫的躍遷,從自研管控到內(nèi)核+管控全棧自研,使得騰訊云數(shù)據(jù)庫服務(wù)能夠不斷突破自我,獲得行業(yè)和客戶認(rèn)可。
▲騰訊云數(shù)據(jù)庫副總經(jīng)理 羅云
騰訊云數(shù)據(jù)庫副總經(jīng)理羅云,在主題分享中表示,自研體系對智能化和國產(chǎn)化至關(guān)重要,不管是關(guān)系型數(shù)據(jù)庫還是非關(guān)系型數(shù)據(jù),包括SaaS生態(tài)工具,只有具備全棧自研能力,才能在AI的浪潮中幫助用戶把數(shù)據(jù)用好,進(jìn)而實(shí)現(xiàn)智能化升級。
具體到騰訊云數(shù)據(jù)庫的全棧自研策略,大概可以概括為三個(gè)發(fā)展階段:從初期的開源數(shù)據(jù)庫云托管,到云體系內(nèi)自研數(shù)據(jù)庫的創(chuàng)新,再到如今的智能化與國產(chǎn)化雙輪驅(qū)動(dòng),一直在苦練技術(shù)內(nèi)功。
走到今天,全棧自研涵蓋關(guān)系型與非關(guān)系型數(shù)據(jù)庫產(chǎn)品線,如TDSQL-C云原生數(shù)據(jù)庫,以其存算分離架構(gòu)解決了傳統(tǒng)數(shù)據(jù)庫彈性與擴(kuò)容難題;TDSQL金融級數(shù)據(jù)庫,憑借高一致性與事務(wù)完整性,在金融領(lǐng)域廣泛應(yīng)用;以及為時(shí)序與KV場景定制的時(shí)序數(shù)據(jù)庫CTSDB與KV數(shù)據(jù)庫,均展現(xiàn)了騰訊云數(shù)據(jù)庫的專業(yè)與深度。
自研背后,是騰訊內(nèi)部復(fù)雜業(yè)務(wù)場景的持續(xù)打磨與流量驗(yàn)證,確保產(chǎn)品的穩(wěn)定性與成熟度。TDSQL解決了TP與AP流量的數(shù)據(jù)一致性與運(yùn)維成本問題,為金融等行業(yè)提供了高效解決方案。
此外,隨著AI與Serverless技術(shù)的發(fā)展,騰訊云推出了專為AI設(shè)計(jì)的向量數(shù)據(jù)庫與TDSQL-C Serverless云原生數(shù)據(jù)庫,通過AI賦能運(yùn)維與查詢優(yōu)化,進(jìn)一步降低存儲(chǔ)與計(jì)算成本,提升整體效能。
大體來看,騰訊云數(shù)據(jù)庫的全棧自研策略,以智能化與國產(chǎn)化為目標(biāo),通過不斷的技術(shù)創(chuàng)新與市場驗(yàn)證,助力企業(yè)在數(shù)字化轉(zhuǎn)型中抓住機(jī)遇,實(shí)現(xiàn)數(shù)據(jù)的最大化價(jià)值。
一站式數(shù)據(jù)管理 , Data+Al與云原生時(shí)代的 “剛需”
「Data+AI」已成為驅(qū)動(dòng)企業(yè)創(chuàng)新的核心力量,是釋放數(shù)據(jù)價(jià)值的關(guān)鍵。
▲阿里云數(shù)據(jù)庫產(chǎn)品管理與技術(shù)架構(gòu)部負(fù)責(zé)人、PolarDB開源社區(qū)技術(shù)委員會(huì)主席 王遠(yuǎn)
王遠(yuǎn)在大會(huì)分享中認(rèn)為,面對數(shù)據(jù)管理挑戰(zhàn)和機(jī)遇,只有提供更便捷、高效的一站式數(shù)據(jù)管理平臺,才能降低數(shù)據(jù)庫使用門檻,為業(yè)務(wù)創(chuàng)新帶來動(dòng)力引擎。
在阿里云瑤池?cái)?shù)據(jù)庫為用戶提供如同“搭積木”體驗(yàn)背后,其實(shí)是整個(gè)數(shù)據(jù)平臺的多層打磨,通過自研技術(shù)的不斷創(chuàng)新,滿足用戶多樣化需求。
阿里云瑤池?cái)?shù)據(jù)庫所做的自研功能基本上歸四類:一、能夠管理各式各樣的數(shù)據(jù)資源;二、可以挖掘各種各樣的數(shù)據(jù)內(nèi)容;三、通過一系列的AI技術(shù)能夠幫助用戶更好的去理解數(shù)據(jù),讓數(shù)據(jù)庫也能夠更好的去理解用戶的意圖;四、云上數(shù)據(jù)庫的數(shù)據(jù)安全和隱私。
而從智能時(shí)代數(shù)據(jù)平臺的整體架構(gòu)來看,最底層是基礎(chǔ)設(shè)施層,包括存儲(chǔ)和計(jì)算,這是傳統(tǒng)數(shù)據(jù)庫、云數(shù)據(jù)庫特別擅長的方向;最上層是端到端智能化的服務(wù),目前來講是以RAG服務(wù)為代表,主要面向用戶、面向開發(fā)者提供一些能力,提供包括模型、算法管理、向量檢索的能力,特別是把向量檢索基于SQL的檢索結(jié)合起來。
超越傳統(tǒng),云 數(shù)據(jù)庫 迎來高速發(fā)展期
國內(nèi)數(shù)據(jù)庫產(chǎn)業(yè)近年來蓬勃發(fā)展,得益于信息化與互聯(lián)網(wǎng)的快速發(fā)展。數(shù)據(jù)庫作為產(chǎn)品與服務(wù),要想更好地滿足用戶需求,需融入全球趨勢,并持續(xù)滿足用戶需求。
▲OceanBase首席科學(xué)家 陽振坤
陽振坤在演講中強(qiáng)調(diào),數(shù)據(jù)庫的擴(kuò)展性、應(yīng)用敏捷性及成本是三大核心需求。當(dāng)前,云數(shù)據(jù)庫已成為全球主流,云上數(shù)據(jù)庫市場份額超過60%,且增量貢獻(xiàn)超90%。谷歌、亞馬遜和微軟等云巨頭因云數(shù)據(jù)庫而顯著受益,而傳統(tǒng)數(shù)據(jù)庫廠商市場份額逐漸縮減。
云數(shù)據(jù)庫的優(yōu)勢在于其易用性、資源動(dòng)態(tài)伸縮、按需付費(fèi)及成本降低。云通過資源共享與復(fù)用,顯著提高了資源利用率與廠商盈利能力。在云環(huán)境中,數(shù)據(jù)庫需兼具擴(kuò)展性、敏捷性及成本效益,同時(shí)需向HTAP(混合事務(wù)與分析處理)方向發(fā)展,實(shí)現(xiàn)交易與分析的一體化處理,提升系統(tǒng)效率與資源復(fù)用。
然而,HTAP系統(tǒng)面臨行存與列存整合、存儲(chǔ)系統(tǒng)優(yōu)化及分布式數(shù)據(jù)庫敏捷性挑戰(zhàn)。云數(shù)據(jù)庫的發(fā)展需持續(xù)克服這些難題,提升系統(tǒng)的綜合性能與用戶體驗(yàn)。簡而言之,云數(shù)據(jù)庫以其易用性、成本效益及HTAP能力,正引領(lǐng)數(shù)據(jù)庫產(chǎn)業(yè)的未來發(fā)展。
高水平科技創(chuàng)新, 國產(chǎn)數(shù)據(jù)庫 保障行業(yè)高質(zhì)量發(fā)展
肩負(fù)振興國家基礎(chǔ)軟件重任,保障國家重點(diǎn)行業(yè)關(guān)鍵領(lǐng)域科技安全,國產(chǎn)數(shù)據(jù)庫必須勇?lián)?zé)任,肩負(fù)歷史使命。
▲金篆信科有限責(zé)任公司副總經(jīng)理 秦延濤
金篆信科有限責(zé)任公司副總經(jīng)理秦延濤,在主題分享中介紹了GoldenDB在核心關(guān)鍵業(yè)務(wù)分布式改造中所取得的成果。
金篆信科起源于中興通訊的“省錢”使命,致力于自主研發(fā)數(shù)據(jù)庫,降低對國際品牌的依賴。自2014年起,公司與中信銀行合作,成功實(shí)踐數(shù)據(jù)庫替代,并于2019年完成中信銀行信用卡核心系統(tǒng)分布式轉(zhuǎn)型,至今運(yùn)行穩(wěn)定,無生產(chǎn)事故。這一實(shí)踐推動(dòng)了金篆信科在金融、運(yùn)營商等行業(yè)的快速拓展。
在分布式改造中,金篆信科面臨硬件變化大、可靠性降低等挑戰(zhàn)。為此,公司聚焦強(qiáng)一致性、高性能、高可靠、高兼容、云原生及高效運(yùn)維六大關(guān)鍵點(diǎn)。通過技術(shù)創(chuàng)新,如分布式事務(wù)處理、高并發(fā)優(yōu)化、兩地三中心架構(gòu)等,確保系統(tǒng)穩(wěn)定可靠,滿足關(guān)鍵業(yè)務(wù)需求。
如今,金篆信科的產(chǎn)品在金融、運(yùn)營商等頭部行業(yè)得到廣泛應(yīng)用,包括中國銀行、建設(shè)銀行等。這些實(shí)踐不僅驗(yàn)證了金篆信科的技術(shù)實(shí)力,也全面推動(dòng)了信創(chuàng)和分布式改造進(jìn)程。
總結(jié):
為期三天的第十五屆中國數(shù)據(jù)庫技術(shù)大會(huì)(DTCC2024)正在火熱進(jìn)行,歷經(jīng)十多年的積累與沉淀,如今的DTCC已然成為國內(nèi)數(shù)據(jù)庫領(lǐng)域的技術(shù)風(fēng)向標(biāo),從人工智能到一站式數(shù)據(jù)平臺,再到向量數(shù)據(jù)庫,大會(huì)精彩內(nèi)容不斷,激發(fā)了對未來的無限憧憬。
展望未來,讓我們攜手并進(jìn),繼續(xù)在數(shù)智化創(chuàng)新的征途上勇往直前,共同開創(chuàng)一個(gè)更美好的時(shí)代。
申請創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!