騰訊云副總裁劉煜宏：構(gòu)建企業(yè)數(shù)據(jù)連接器，助力企業(yè)更高效挖掘數(shù)據(jù)價(jià)值

在11月4日的2021騰訊數(shù)字生態(tài)大會(huì)的Techo Day技術(shù)峰會(huì)上，騰訊云副總裁、騰訊數(shù)據(jù)平臺(tái)部副總經(jīng)理劉煜宏透露，截至目前，騰訊大數(shù)據(jù)的日實(shí)時(shí)計(jì)算量已經(jīng)超過(guò)200萬(wàn)億，在線(xiàn)模型訓(xùn)練維度達(dá)到1萬(wàn)億，大數(shù)據(jù)平臺(tái)算力1000萬(wàn)核，日離線(xiàn)分析任務(wù)數(shù)1500萬(wàn)，量級(jí)位居國(guó)內(nèi)第一。騰訊大數(shù)據(jù)和AI繼續(xù)在國(guó)內(nèi)保持領(lǐng)先優(yōu)勢(shì)。

劉煜宏表示：“企業(yè)數(shù)字化正在全面加速，企業(yè)對(duì)云服務(wù)的需求也在不斷增加，騰訊云在大數(shù)據(jù)和AI領(lǐng)域既要尋求技術(shù)突破，又要能把這些技術(shù)突破轉(zhuǎn)為產(chǎn)品和服務(wù)，讓技術(shù)真正落地為行業(yè)服務(wù)，才能讓技術(shù)產(chǎn)生價(jià)值。”

騰訊云副總裁、騰訊數(shù)據(jù)平臺(tái)部副總經(jīng)理劉煜宏

構(gòu)建企業(yè)數(shù)據(jù)連接器，助力企業(yè)更高效挖掘數(shù)據(jù)價(jià)值

隨著全球經(jīng)濟(jì)數(shù)字化轉(zhuǎn)型的加快,企業(yè)對(duì)大數(shù)據(jù)的需求也日益強(qiáng)烈，復(fù)雜場(chǎng)景、規(guī)模成本和數(shù)據(jù)安全等問(wèn)題都對(duì)大數(shù)據(jù)業(yè)務(wù)發(fā)展提出了新挑戰(zhàn)。比如用戶(hù)的超大規(guī)模數(shù)據(jù)需要更高的調(diào)度性能；元數(shù)據(jù)、小文件數(shù)的膨脹也會(huì)帶來(lái)資源碎片過(guò)多存儲(chǔ)效率下降、平臺(tái)規(guī)模龐大運(yùn)維定位復(fù)雜等問(wèn)題。

針對(duì)這些痛點(diǎn)，騰訊大數(shù)據(jù)在技術(shù)上實(shí)現(xiàn)多個(gè)突破，比如借助“自適應(yīng)計(jì)算+數(shù)據(jù)編排”能力可以屏蔽復(fù)雜底層，簡(jiǎn)化使用，用最優(yōu)執(zhí)行引擎解耦計(jì)算與存儲(chǔ)；“Caelus離在線(xiàn)混部+平臺(tái)大腦”可以讓資源得到充分利用，節(jié)省運(yùn)營(yíng)成本，通過(guò)資源削峰填谷，讓平臺(tái)運(yùn)行更加智能化；“PowerFL安全聯(lián)合計(jì)算”的3072bit高強(qiáng)度數(shù)據(jù)加密，則可以在保護(hù)隱私的同時(shí)實(shí)現(xiàn)數(shù)據(jù)協(xié)作。

在技術(shù)實(shí)現(xiàn)突破的同時(shí)，騰訊云也基于自身在大數(shù)據(jù)的基礎(chǔ)產(chǎn)品能力、數(shù)據(jù)中臺(tái)能力、數(shù)據(jù)應(yīng)用能力，構(gòu)建連通業(yè)務(wù)與數(shù)據(jù)資產(chǎn)的企業(yè)數(shù)據(jù)連接器，幫助教育、金融、政務(wù)等多個(gè)行業(yè)更深入、更高效地挖掘數(shù)據(jù)價(jià)值。

以國(guó)內(nèi)某教育平臺(tái)來(lái)說(shuō)，在大數(shù)據(jù)使用時(shí)有明顯痛點(diǎn)，首先是擴(kuò)容響應(yīng)滯后，尤其短期有大量計(jì)算資源需求時(shí)；其次是資源利用率低，不同時(shí)段資源用量存在波峰波谷，在離線(xiàn)計(jì)算資源無(wú)法靈活調(diào)度；并且自建大數(shù)據(jù)成本高，不僅會(huì)為開(kāi)發(fā)、運(yùn)維帶來(lái)高成本，技術(shù)難度也大。基于此，騰訊云大數(shù)據(jù)通過(guò)云原生混合算力調(diào)度，讓離在線(xiàn)技術(shù)助力該平臺(tái)成本節(jié)約及效能提升。最終，在云原生存算分離技術(shù)、云原生混合算力調(diào)度技術(shù)、云原生分析加速技術(shù)的加持下，在線(xiàn)資源利用率提升了100%，固定算力降低了5000核，10分鐘計(jì)算資源拉起能力也提升至了20000核。

在另一個(gè)銀行案例中，數(shù)據(jù)孤島嚴(yán)重、存儲(chǔ)成本高、數(shù)據(jù)不標(biāo)準(zhǔn)且質(zhì)量低成為了客戶(hù)痛點(diǎn)，騰訊云以TBDS為基礎(chǔ)的金融數(shù)據(jù)湖解決方案，幫助客戶(hù)消除數(shù)據(jù)孤島，做好數(shù)據(jù)治理，讓該客戶(hù)超50家分支機(jī)構(gòu)建設(shè)了規(guī)模超1000節(jié)點(diǎn)的統(tǒng)一的大數(shù)據(jù)平臺(tái)，清洗治理的數(shù)據(jù)量超20PB，提升了數(shù)據(jù)質(zhì)量和價(jià)值。

劉煜宏表示，騰訊云大數(shù)據(jù)源于開(kāi)源，也積極回饋開(kāi)源。騰訊大數(shù)據(jù)從2014年就開(kāi)始開(kāi)源，目前主導(dǎo)或捐贈(zèng)了6個(gè)項(xiàng)目，為社區(qū)貢獻(xiàn)超過(guò)800萬(wàn)行代碼，培養(yǎng)了近100位或PMC或Committer成員。今天，騰訊大數(shù)據(jù)正式開(kāi)源Caelus和FireStorm兩大項(xiàng)目，把騰訊大數(shù)據(jù)在在離線(xiàn)混部、計(jì)算加速等技術(shù)突破的成果與所有開(kāi)發(fā)者分享。

用AI技術(shù)為產(chǎn)業(yè)賦能，構(gòu)建開(kāi)放、可持續(xù)的生態(tài)

騰訊云大數(shù)據(jù)通過(guò)深耕應(yīng)用拓展了產(chǎn)業(yè)創(chuàng)新的邊界，騰訊云AI則正在通過(guò)技術(shù)突破助力全領(lǐng)域智能，讓數(shù)字技術(shù)與現(xiàn)實(shí)世界深度融合。據(jù)劉煜宏介紹，騰訊云AI技術(shù)如今已經(jīng)實(shí)現(xiàn)了由騰訊優(yōu)圖、AI Lab、WeChat AI、騰訊多媒體實(shí)驗(yàn)室、騰訊云小微為技術(shù)支撐底座，騰訊云TI平臺(tái)、騰訊云小微對(duì)話(huà)式AI平臺(tái)為開(kāi)發(fā)平臺(tái)，結(jié)合各行業(yè)的需求和行業(yè)經(jīng)驗(yàn)，沉淀了工業(yè)AI中臺(tái)、媒體AI中臺(tái)、政務(wù)AI中臺(tái)等解決方案，為泛政府、泛互聯(lián)網(wǎng)、工業(yè)、企業(yè)AI、金融、傳媒、出行、家居等不同領(lǐng)域提供行業(yè)應(yīng)用。

目前，騰訊在計(jì)算機(jī)視覺(jué)領(lǐng)域有超過(guò)100項(xiàng)原子能力、超過(guò)6500個(gè)全球?qū)＠l(fā)表在全球頂會(huì)論文800余篇，專(zhuān)利及論文數(shù)量位居中國(guó)互聯(lián)網(wǎng)公司第一，并多次刷新世界紀(jì)錄。

在語(yǔ)音AI領(lǐng)域也在不斷突破。比如騰訊語(yǔ)音智能，業(yè)務(wù)首創(chuàng)基于DNN全鏈路方案，可以對(duì)于回聲消除，聲音定位，語(yǔ)音分離，去混響及波束增強(qiáng)進(jìn)行一體化處理技術(shù)。實(shí)車(chē)測(cè)試，在同時(shí)存在車(chē)外噪聲，車(chē)內(nèi)廣播及后排干擾人聲的復(fù)雜條件下，大幅提升語(yǔ)音去回聲，降噪，分離整體性能，識(shí)別準(zhǔn)確率由10%~50%提升至90%以上。云小微數(shù)智人則可以實(shí)現(xiàn)多模態(tài)人機(jī)交互，多維度為客戶(hù)賦能，助力行業(yè)客戶(hù)打造有智能、有形象、可交互的數(shù)字分身。

今年8月，騰訊云和生態(tài)伙伴慧眼科技聯(lián)合打造的騰慧飛瞳AI質(zhì)檢儀正式發(fā)布。該產(chǎn)品針對(duì)目前3C結(jié)構(gòu)件外觀檢測(cè)準(zhǔn)確性差、效率低等難題，創(chuàng)造性的采用一站式智能化解決方案，突破制造業(yè)外觀檢測(cè)自動(dòng)化的瓶頸問(wèn)題，大幅提升檢測(cè)效率，解放質(zhì)檢人力、優(yōu)化成本。借助前沿的AI能力，3C零部件制造商富馳高科原來(lái)利用人工進(jìn)行的質(zhì)檢工作，現(xiàn)在借助騰慧飛瞳AI質(zhì)檢儀僅需幾秒就能完成對(duì)目標(biāo)零件360度無(wú)死角的采圖、分析、分類(lèi)的工作，速度提升10倍，并且在10多臺(tái)設(shè)備持續(xù)滿(mǎn)載生產(chǎn)的情況下，項(xiàng)目可以每年為富馳節(jié)省人力成本數(shù)千萬(wàn)元，檢測(cè)的質(zhì)量也得到明顯提高。

另一個(gè)AI技術(shù)加持的案例是騰訊云智媒體AI中臺(tái)，它從“媒體+AI”應(yīng)用的實(shí)際需求出發(fā)，依托騰訊內(nèi)部諸多優(yōu)秀團(tuán)隊(duì)的AI技術(shù)與最佳實(shí)踐，為媒體全業(yè)務(wù)流程打造應(yīng)用服務(wù)。騰訊云智媒體AI中臺(tái)覆蓋多模態(tài)內(nèi)容結(jié)構(gòu)化、智能轉(zhuǎn)碼、超分、老片修復(fù)、視頻質(zhì)檢等多維度應(yīng)用，此外，可在平臺(tái)層提供智能推理、智能訓(xùn)練、算法調(diào)度、可視化編排等能力，支持第三方算法、數(shù)據(jù)、應(yīng)用接入，方便業(yè)務(wù)側(cè)的快速創(chuàng)新。使用后，可以讓媒體業(yè)務(wù)系統(tǒng)開(kāi)發(fā)效率提升70%，場(chǎng)景貼合度提升50%，人員操作人效提升60%。

未來(lái)，騰訊云將繼續(xù)打造開(kāi)放包容大數(shù)據(jù)和AI生態(tài)，攜手更多行業(yè)合作伙伴，共同建設(shè)繁榮的云端應(yīng)用生態(tài)，推動(dòng)企業(yè)數(shù)字化、智能化進(jìn)程。

雷鋒網(wǎng)