騰訊云數(shù)據(jù)庫(kù)TDSQL再破世界紀(jì)錄，實(shí)現(xiàn)“雙榜第一”

國(guó)產(chǎn)數(shù)據(jù)庫(kù)再破世界紀(jì)錄！ 

10月22日，據(jù)國(guó)際事務(wù)處理性能委員會(huì)官網(wǎng)信息，在數(shù)據(jù)庫(kù)“決策支持類(lèi)”性能測(cè)試TPC-DS中，騰訊云數(shù)據(jù)庫(kù)TDSQL以7260萬(wàn)分、37.52元同時(shí)刷新性能和性?xún)r(jià)比紀(jì)錄，登頂世界第一。

TPC針對(duì)數(shù)據(jù)庫(kù)各項(xiàng)性能推出的基準(zhǔn)測(cè)試，被譽(yù)為數(shù)據(jù)庫(kù)界的“奧林匹克”。去年，騰訊云TDSQL已經(jīng)在數(shù)據(jù)庫(kù)“事務(wù)處理類(lèi)”性能測(cè)試TPC-C中刷新世界紀(jì)錄。這標(biāo)志著在數(shù)據(jù)庫(kù)最核心的兩個(gè)應(yīng)用場(chǎng)景下，騰訊云TDSQL都取得了世界最佳性能紀(jì)錄，成為“雙榜”第一。

中國(guó)工程院院士鄭緯民對(duì)此表示，國(guó)產(chǎn)數(shù)據(jù)庫(kù)多次打破性能瓶頸，體現(xiàn)了國(guó)內(nèi)基礎(chǔ)軟件持續(xù)打磨內(nèi)功的決心，以及穩(wěn)定輸出技術(shù)能力的底蘊(yùn)。

 原國(guó)家科技部秘書(shū)長(zhǎng)、黨組成員、國(guó)際歐亞科學(xué)院院士張景安表示，數(shù)據(jù)庫(kù)作為信息技術(shù)的基石，其性能與穩(wěn)定性直接關(guān)系到各行各業(yè)的數(shù)字化轉(zhuǎn)型進(jìn)程。我國(guó)軟件企業(yè)在兩項(xiàng)國(guó)際標(biāo)準(zhǔn)測(cè)試中屢破紀(jì)錄，標(biāo)志著中國(guó)在數(shù)據(jù)庫(kù)這一核心軟件技術(shù)領(lǐng)域正邁向國(guó)際先進(jìn)水平，有助于增強(qiáng)我國(guó)的國(guó)際科技競(jìng)爭(zhēng)力。

計(jì)算性能飆升3.8倍，刷新性能與性?xún)r(jià)比紀(jì)錄

TPC-DS是一個(gè)針對(duì)數(shù)據(jù)庫(kù)管理系統(tǒng)分析性能的基準(zhǔn)測(cè)試。它模擬一個(gè)大型零售商銷(xiāo)售數(shù)據(jù)的在線(xiàn)數(shù)據(jù)分析（OLAP）場(chǎng)景，通過(guò) 99 個(gè)不同類(lèi)型的分析任務(wù)，考察底層數(shù)據(jù)庫(kù)的處理耗時(shí)、并發(fā)性能和導(dǎo)數(shù)性能等指標(biāo)，是數(shù)據(jù)庫(kù)產(chǎn)品分析處理能力和技術(shù)先進(jìn)性的金標(biāo)準(zhǔn)。

騰訊云數(shù)據(jù)庫(kù)研發(fā)總經(jīng)理潘安群介紹，此次騰訊云參與打榜的TPC-DS 測(cè)試數(shù)據(jù)量級(jí)達(dá)10TB，相當(dāng)于10億頁(yè)電子書(shū)，包含銷(xiāo)售紀(jì)錄、退貨記錄、時(shí)間信息等17項(xiàng)維度的24張表格。其中，最大的一張表高達(dá)288億行數(shù)據(jù)。

在海量數(shù)據(jù)中，騰訊云TDSQL需要?dú)v經(jīng)數(shù)據(jù)導(dǎo)入、單任務(wù)計(jì)算、多任務(wù)并行計(jì)算、數(shù)據(jù)變更等多項(xiàng)測(cè)試，關(guān)聯(lián)十幾個(gè)“億級(jí)”表格，聯(lián)合計(jì)算出例如“銷(xiāo)量排名前十的商品從何時(shí)開(kāi)始網(wǎng)店銷(xiāo)量超過(guò)門(mén)店”等信息。在這個(gè)過(guò)程中，TPC甚至還會(huì)在數(shù)據(jù)變更時(shí)隨機(jī)銷(xiāo)毀數(shù)據(jù)增加難度。

結(jié)果顯示，騰訊云TDSQL項(xiàng)測(cè)試耗時(shí)均大幅領(lǐng)先榜單其他廠(chǎng)商，99個(gè)復(fù)雜分析任務(wù)單任務(wù)平均耗時(shí)4秒以?xún)?nèi)，領(lǐng)先榜單第二名一倍；多任務(wù)并行計(jì)算平均耗時(shí)8秒以?xún)?nèi)，領(lǐng)先兩倍，以7260萬(wàn)分的性能評(píng)分，將決策支持類(lèi)榜單紀(jì)錄提升3.8倍。

在復(fù)雜任務(wù)處理能力大幅提升的基礎(chǔ)上，TDSQL將每1000評(píng)分的價(jià)格相比同類(lèi)產(chǎn)品減少1/3，同時(shí)刷新TPC-DS性能與性?xún)r(jià)比紀(jì)錄。

三大自研技術(shù)能力，突破性能瓶頸 

聯(lián)機(jī)分析處理（OLAP）場(chǎng)景下，如何充分發(fā)揮每個(gè)算力單元的極致潛力，以及確保每個(gè)任務(wù)之間不等待和阻塞，一直是數(shù)據(jù)庫(kù)領(lǐng)域的重點(diǎn)攻關(guān)方向。

潘安群介紹，騰訊云TDSQL在分布式交互、并行計(jì)算、單核極致性能三個(gè)方向深度自研，保障了計(jì)算從多核到多進(jìn)程再到多節(jié)點(diǎn)，能充分并行無(wú)阻塞運(yùn)行，實(shí)現(xiàn)了性能的大幅提升。

TDSQL通過(guò)自研MPP執(zhí)行框架，優(yōu)化了主流 OLAP 數(shù)據(jù)庫(kù)應(yīng)用“pull”模型存在的數(shù)據(jù)傳輸“擁堵”瓶頸，保證所有計(jì)算任務(wù)全速順暢運(yùn)行，通用性能提升40%。

而在性能無(wú)法線(xiàn)性跟隨CPU核數(shù)增加的業(yè)界難題上，TDSQL通過(guò)自研并行執(zhí)行框架，徹底去除并行進(jìn)程間阻塞依賴(lài)，CPU 利用率提高至 95% 以上，能充分利用多核資源。

對(duì)于單核計(jì)算效率，TDSQL團(tuán)隊(duì)也有著極致追求。在以上并行框架的基礎(chǔ)上，TDSQL 自研了列式存儲(chǔ)和向量化執(zhí)行引擎，在算法、結(jié)構(gòu)、新一代CPU結(jié)合等方面深度優(yōu)化單核任務(wù)執(zhí)行效率，實(shí)現(xiàn)單核效率提升1倍以上。

雙榜第一，為產(chǎn)業(yè)發(fā)展筑牢底座

數(shù)據(jù)庫(kù)世界性能榜單第一的每次易主，都標(biāo)志著數(shù)據(jù)處理技術(shù)的向前推進(jìn)。

去年，騰訊云數(shù)據(jù)庫(kù)TDSQL順利通過(guò)TPC-C基準(zhǔn)測(cè)試，性能達(dá)到每分鐘8.14億筆交易（tpmC），打破世界紀(jì)錄。期間，TDSQL持續(xù)穩(wěn)定運(yùn)行這一超大規(guī)模集群，實(shí)現(xiàn)8小時(shí)無(wú)抖動(dòng)，保障了超過(guò)8600億總事務(wù)、4萬(wàn)億條訂單詳細(xì)信息不出錯(cuò)。

“TPC-C的特點(diǎn)是多、穩(wěn)、快、高頻小任務(wù)，考驗(yàn)的是高并發(fā)場(chǎng)景下數(shù)據(jù)庫(kù)的極致性能和穩(wěn)定性；TPC-DS特點(diǎn)則是少、快、大、低頻大任務(wù)，考驗(yàn)的是復(fù)雜任務(wù)場(chǎng)景下數(shù)據(jù)庫(kù)的綜合能力。在兩個(gè)核心場(chǎng)景下，騰訊云TDSQL都實(shí)現(xiàn)了性能紀(jì)錄的極大突破?！迸税踩赫f(shuō)。

雙榜第一也為產(chǎn)業(yè)發(fā)展筑牢了更強(qiáng)的基座。據(jù)騰訊云數(shù)據(jù)庫(kù)總經(jīng)理王義成介紹，騰訊云數(shù)據(jù)庫(kù)TDSQL已形成了金融級(jí)分布式、云原生、分析型等多引擎融合的完整數(shù)據(jù)庫(kù)產(chǎn)品體系，能高效應(yīng)對(duì)OLTP、OLAP、HTAP等多樣化的計(jì)算場(chǎng)景，滿(mǎn)足企業(yè)多樣化的國(guó)產(chǎn)數(shù)據(jù)管理需求。

在騰訊云TDSQL的助力下，數(shù)字廣東粵省事實(shí)現(xiàn)流程再造和決策優(yōu)化，實(shí)現(xiàn)民眾少跑路，數(shù)據(jù)多跑路；“第七次全國(guó)人口普查”以“OLTP+OLAP”技術(shù)融合架構(gòu)支持了十億級(jí)用戶(hù)數(shù)據(jù)、七百萬(wàn)個(gè)終端和百萬(wàn)級(jí)峰值TPS。

除此之外，這些優(yōu)化能力還應(yīng)用在了騰訊云大數(shù)據(jù)TChouse（云數(shù)據(jù)倉(cāng)庫(kù)）上，與芯片、服務(wù)器、操作系統(tǒng)、云底座一同構(gòu)建起核心領(lǐng)域自研產(chǎn)品體系，已具備軟硬一體的全棧融合創(chuàng)新能力。

雷峰網(wǎng)(公眾號(hào)：雷峰網(wǎng))