近日,貴州易鯨捷信息技術有限公司(以下簡稱“貴州易鯨捷”)獲得了由美國商標專利局授權的關于“混合樂觀鎖和悲觀鎖的數(shù)據(jù)庫事務并發(fā)控制方法”的發(fā)明專利,此專利技術由貴州易鯨捷中國團隊自主研發(fā),并獲得了國際權威機構認可。
?
據(jù)悉,現(xiàn)有數(shù)據(jù)庫技術中,悲觀鎖和樂觀鎖是互斥的兩種并發(fā)控制技術,采用了悲觀鎖實現(xiàn)的數(shù)據(jù)庫,便不能同時使用樂觀鎖機制,反之亦然。而此次貴州易鯨捷獲得的這項專利,是基于樂觀鎖機制,融合了悲觀鎖功能,很大程度上解決了各種場景下并發(fā)控制的性能問題。
然而,在國際廠商把控全球數(shù)據(jù)庫市場份額的當下,以貴州易鯨捷等擁有自主可控核心技術的國內(nèi)數(shù)據(jù)庫廠商,通過布局分布式數(shù)據(jù)庫的新賽道努力追趕,打通我國關鍵行業(yè)分布式數(shù)據(jù)庫技術的最后一公里。
?
攻克重大技術難題
數(shù)據(jù)庫技術誕生于上世紀60年代,與中間件、操作系統(tǒng)并稱為全球三大基礎軟件技術。起初的數(shù)據(jù)庫技術是以垂直擴展為理念進行設計的集中式數(shù)據(jù)庫,而在集中式數(shù)據(jù)庫技術上,我國起步相對較晚,一直處于追趕狀態(tài),目前仍與國外頂級廠商存在巨大差距。
不過,在過去十多年互聯(lián)網(wǎng)和云計算的共同推動下,分布式技術得到了長足發(fā)展,為新一代分布式數(shù)據(jù)庫的發(fā)展提供了新的技術和應用場景支撐,而分布式數(shù)據(jù)庫作為未來數(shù)據(jù)庫技術發(fā)展的主賽道初露端倪。目前我國已涌現(xiàn)出一批極具研發(fā)實力的分布式數(shù)據(jù)庫廠商,而以貴州易鯨捷為代表的頭部廠商此次沒有輸在“起跑線”上。
貴州易鯨捷成立于2015年,是全球最早推出下一代融合型(HTAP)分布式數(shù)據(jù)庫的企業(yè)。雖然貴州易鯨捷成立的時間不長,但其核心研發(fā)團隊卻擁有30余年的技術沉淀與傳承,并在金融數(shù)據(jù)庫核心業(yè)務領域打造出了“易鯨捷模式”,上述發(fā)明專利便是貴州易鯨捷在銀行核心交易系統(tǒng)項目中不斷實踐與積累所獲得的重大技術突破。
具體來看,在數(shù)據(jù)庫中,當多個用戶/進程/線程同時進行操作,要保證事務的一致性、隔離性,以及最大程度的并發(fā)是數(shù)據(jù)庫開發(fā)者常常要考慮的難題,如果并發(fā)控制不善,將會導致數(shù)據(jù)的臟讀(讀到未提交的數(shù)據(jù))、幻讀,甚至造成數(shù)據(jù)更新丟失的情況。
據(jù)貴州易鯨捷銀行項目研發(fā)負責人介紹,樂觀鎖并發(fā)控制(即OCC,全稱Optimistic Concurrency Control)是一種解決寫寫沖突的無鎖并發(fā)控制技術,主要適用于低數(shù)據(jù)爭用的環(huán)境。但銀行核心業(yè)務是一種典型的高并發(fā)OLTP場景,根據(jù)銀行體量不同,TPS高峰期會在幾百幾千甚至更高級別。這意味著,在同一個時刻,銀行某個賬戶大概率會出現(xiàn)被多個并發(fā)同時訪問或更改,而銀行核心業(yè)務場景對交易的成功率一般要求為99.99%乃至更高,即一萬筆交易中只允許失敗一筆。
該研發(fā)負責人進一步表示,在樂觀鎖并發(fā)控制模式下,由于沖突是在事務提交時檢查,如果檢查到失敗事務即報錯,這雖然保證了事務的一致性,但會導致交易失敗率增加。因此,貴州易鯨捷針對銀行核心業(yè)務打造的QianBase數(shù)據(jù)庫,在支持OCC的基礎上,又增加了“悲觀鎖”并發(fā)控制技術。在“悲觀鎖”并發(fā)控制模式下,發(fā)生沖突的修改會進行等待,直到另一個事務提交成功,被等待的修改隨之也會繼續(xù)執(zhí)行,這大大增加了銀行核心業(yè)務的交易成功率。
目前,貴州易鯨捷QianBase系列數(shù)據(jù)庫可同時支持樂觀鎖與悲觀鎖兩種并發(fā)訪問控制技術,適用于不同的業(yè)務場景,而這項技術已在貴陽銀行沙箱項目與貴陽農(nóng)商銀行雙庫并行項目中獲得應用。
貴州易鯨捷CEO武新表示,對易鯨捷此次獲得的分布式數(shù)據(jù)庫核心技術美國專利,用悲觀鎖與樂觀鎖混合模式,優(yōu)雅的解決了分布式數(shù)據(jù)庫最棘手的多用戶并發(fā)訪問沖突問題,這是全球分布式數(shù)據(jù)庫領域最難解決的業(yè)內(nèi)難題之一,為支持復雜業(yè)務場景下的長事務并發(fā)奠定了基礎,這也是分布式數(shù)據(jù)庫能夠透明支撐核心交易系統(tǒng)的關鍵技術之一。
此外,據(jù)知情人士透露,除此次從美國商標專利局獲取的這項發(fā)明專利外,貴州易鯨捷目前還有多個國內(nèi)外專利在申請過程中,其中覆蓋了數(shù)據(jù)庫產(chǎn)品的計算層、連接層和分布式事務管理等模塊/組件。
?
聚焦銀行核心業(yè)務
在當前全球數(shù)據(jù)庫市場中,以微軟、亞馬遜、Oracle等為首的國際廠商處于壟斷地位。Gartner數(shù)據(jù)顯示,2021年此三家數(shù)據(jù)庫巨頭分別占有24%、23.9%和20.6%的市場份額。在國內(nèi)市場中,近年來,我國多家金融機構單一來源均采購的是國外數(shù)據(jù)庫廠商產(chǎn)品。
數(shù)據(jù)庫行業(yè)專業(yè)人士表示,目前國內(nèi)金融行業(yè)核心交易系統(tǒng)數(shù)據(jù)庫采用Oracle產(chǎn)品和IBM小型機的比例在80%以上,而基于國內(nèi)數(shù)據(jù)庫的銀行核心交易系統(tǒng)數(shù)量還不足10家,尚處于探索階段。
然而,貴州易鯨捷自2019年3月便中標了貴陽銀行與貴陽農(nóng)商銀行的核心交易系統(tǒng)試點項目,經(jīng)過持續(xù)研發(fā),貴州易鯨捷目前已將首創(chuàng)的雙庫并行技術應用到了貴陽農(nóng)商銀行項目中,使得銀行前端的柜面交易、支付平臺,以及核心交易的完整核心系統(tǒng),均可并行在易鯨捷數(shù)據(jù)庫與Oracle之上,互為災備且秒級互相切換,真正做到了保障國家信息安全與銀行業(yè)務安全。
此外,貴陽銀行核心交易系統(tǒng)沙箱項目從2020年4月1日上線至2021年3月項目成功結項,始終保持穩(wěn)定運行,交易成功率在99.999%以上,準確率達到100%。在此基
?