威盛電子唐亮：產(chǎn)學(xué)研整合-推動(dòng)下一代智能駕駛?cè)瞬排囵B(yǎng) | CCF-GAIR 2020

 

雷鋒網(wǎng)按：2020 年 8 月 7 日，全球人工智能和機(jī)器人峰會(huì)（CCF-GAIR 2020）正式開幕。CCF-GAIR 2020 峰會(huì)由中國(guó)計(jì)算機(jī)學(xué)會(huì)（CCF）主辦，香港中文大學(xué)（深圳）、雷鋒網(wǎng)聯(lián)合承辦，鵬城實(shí)驗(yàn)室、深圳市人工智能與機(jī)器人研究院協(xié)辦。

本次峰會(huì)智能駕駛專場(chǎng)上，威盛電子高級(jí)技術(shù)總監(jiān)唐亮，為與會(huì)者們帶來(lái)了一場(chǎng)精彩紛呈的“產(chǎn)學(xué)研整合-推動(dòng)下一代智能駕駛?cè)瞬排囵B(yǎng)”報(bào)告。

實(shí)際上，威盛電子在車載領(lǐng)域，憑借嵌入式及計(jì)算機(jī)視覺(jué)領(lǐng)域的研究成果做了大量關(guān)于智能駕駛方面的工作，主要針對(duì)商用車隊(duì)、礦卡、巴士等車型，以車載AI系統(tǒng)及車載AI雙鏡頭監(jiān)控儀為硬件基礎(chǔ)，配套DMS駕駛員監(jiān)控、ADAS輔助駕駛、SVS全景環(huán)視、傳感器融合等軟件算法，并針對(duì)學(xué)校發(fā)展有威盛任我行智駕科研平臺(tái)。

基于威盛任我行智駕科研平臺(tái)原型無(wú)人車系統(tǒng)，在封閉園區(qū)指定范圍內(nèi)，可以做到自動(dòng)行駛抵達(dá)目的地。同時(shí)通過(guò)激光雷達(dá)、超聲波雷達(dá)、慣性導(dǎo)航等，已經(jīng)可以自主避障，實(shí)現(xiàn)了 L4 級(jí)別的自動(dòng)駕駛。

同時(shí)，唐亮稱目前相關(guān)技術(shù)人才培養(yǎng)，很多大學(xué)都處于科普階段，目前中國(guó)的人工智能領(lǐng)域人員缺口是 500 萬(wàn)，威盛希望通過(guò)自己的努力，借助威盛任我行智駕科研平臺(tái)以及系統(tǒng)，幫助百萬(wàn)學(xué)子走入 AI 和自動(dòng)駕駛產(chǎn)業(yè)。

以下是唐亮的演講全文，雷鋒網(wǎng)新智駕進(jìn)行了不改變?cè)獾木庉嫞?/p>

大家好，我是威盛電子的唐亮。我今天介紹的題目是“產(chǎn)學(xué)研整合-推動(dòng)下一代智能駕駛?cè)瞬排囵B(yǎng)”,主要介紹威盛任我行智駕科研平臺(tái)。演講內(nèi)容包括三部分：一是介紹威盛電子；二是介紹威盛電子在人工智能方面做的工作；三是介紹威盛任我行智駕科研平臺(tái)。

完成從傳統(tǒng)嵌入式平臺(tái)到人工智能嵌入式平臺(tái)轉(zhuǎn)變

威盛電子成立于 1987 年，是嵌入式平臺(tái)及解決方案提供商。公司總部在 1992 年從美國(guó)遷至臺(tái)灣臺(tái)北市。CEO 是陳文琦，目前有 2000 多名員工，擁有專利 6000 多個(gè)。

國(guó)內(nèi)在北京、深圳、上海、臺(tái)北等地設(shè)有研發(fā)中心，國(guó)外在美國(guó)奧斯丁和福利蒙特市設(shè)有研發(fā)中心，東京有銷售分部。

威盛電子 1987 年成立至今，從最底層的 CPU、GPU、芯片組設(shè)計(jì)，到自行研發(fā)嵌入式主板，最后成功研發(fā)嵌入式系統(tǒng)。如今把計(jì)算機(jī)視覺(jué)、人工智能結(jié)合進(jìn)來(lái)做終端智能化工作，一路走來(lái)將近 30 多年的歷程。

30 多年的時(shí)間，最初威盛主要涉及領(lǐng)域都在 PC 領(lǐng)域，主做系統(tǒng)設(shè)計(jì)、I/O 集成、無(wú)線網(wǎng)絡(luò)連接等。最近十年我們集中在人工智能方向，結(jié)合深度學(xué)習(xí)，增加了很多人工智能功能，完成了從傳統(tǒng)嵌入式平臺(tái)到人工智能嵌入式平臺(tái)轉(zhuǎn)變的過(guò)程。

如今威盛人工智能工作很多是在視覺(jué)方面，基于 GPU 的積累，視覺(jué)上主要做物體識(shí)別，應(yīng)用于智能工廠，比如硅片識(shí)別、流水線瑕疵產(chǎn)品的識(shí)別等。

視覺(jué)領(lǐng)域自然少不了人臉識(shí)別，所以威盛做了大量關(guān)于人臉識(shí)別方面的努力，很多產(chǎn)品已經(jīng)落地。語(yǔ)音方面，不論是在線還是離線語(yǔ)音處理，也已落地了很多項(xiàng)目，尤其在智能家居、智能醫(yī)療方面有很多實(shí)際項(xiàng)目落地。

車載領(lǐng)域，借用嵌入式領(lǐng)域的工作成果和視覺(jué)研究成果，在輔助駕駛方面的工作主要針對(duì)：DMS、駕駛?cè)松矸葑R(shí)別、ADAS 方面，已有 Mobile360 系列產(chǎn)品落地。

威盛電子人工智能主要集中在邊緣端，目的是為實(shí)現(xiàn)終端智能化，在智能制造、智能醫(yī)療、智能商務(wù)、智能交通等各個(gè)領(lǐng)域都有人工智能方面的產(chǎn)品落地。

為什么開發(fā)威盛任我行智駕科研平臺(tái)？

與學(xué)校、廠商合作過(guò)程中，需要把代碼、項(xiàng)目、技術(shù)移交給對(duì)方，如果僅僅把源代碼給對(duì)方，這樣做很可能無(wú)法順利交接，原因在于開發(fā)流程、編譯環(huán)境以及使用習(xí)慣不同，中間缺乏一個(gè)完整的系統(tǒng)做這件事。

基于這些因素，為方便輸出技術(shù)，威盛借助在人工智能領(lǐng)域的經(jīng)驗(yàn)積累，開發(fā)出任我行智駕科研平臺(tái)。該平臺(tái)功能包括：用戶管理、代碼管理、開發(fā)測(cè)試、編譯環(huán)境、自動(dòng)部署等一系列的流程工具，同時(shí)也包括人工智能模型訓(xùn)練、模型優(yōu)化、自動(dòng)標(biāo)注等人工智能方面的基礎(chǔ)工具。

對(duì)外接口一方面是面向用戶操作的人機(jī)界面，可以在該平臺(tái)做編譯、開發(fā)等工作。另一方面是對(duì)終端的訪問(wèn)接口，可以實(shí)現(xiàn)終端的管理、數(shù)據(jù)上傳、數(shù)據(jù)分析以及自動(dòng)更新等。

在底層，平臺(tái)同樣提供了跨平臺(tái)的部署能力，可以部署到私有服務(wù)器上，也可以部署到公有云上，并提供擴(kuò)展功能。

借助這套人工智能開發(fā)平臺(tái)，可以很好地把威盛技術(shù)結(jié)合在一起，輸出到科研學(xué)校、科研單位或者合作伙伴。

任我行智駕平臺(tái)有一部分是車載視覺(jué)開發(fā)平臺(tái)。可將車載視覺(jué)的：硬件、軟件、代碼、SDK，平臺(tái)相結(jié)合。硬件部分，車載視覺(jué)控制器采用高通 820 的芯片，可以接到 9 個(gè)攝像頭，實(shí)現(xiàn)人工智能、視頻拼接等操作，利用平臺(tái)可以開發(fā)智能座艙等。如果只是想在小的領(lǐng)域做研發(fā)，比如需要做 ISP 性能提升調(diào)整，有了這個(gè)平臺(tái)一兩天時(shí)間就可以完成部署。 

有了車載視覺(jué)開發(fā)平臺(tái)就可以開發(fā)關(guān)于自動(dòng)駕駛方面功能，如：道路交通標(biāo)志識(shí)別、盲點(diǎn)監(jiān)測(cè)、前車防撞預(yù)警、3D 環(huán)視/行車記錄等。

除在應(yīng)用層開發(fā)，該套系統(tǒng)也能調(diào)整人工智能模型、物體檢測(cè)、行人檢測(cè)、面部檢測(cè)、調(diào)整模型和訓(xùn)練素材。

DMS 作為駕駛員行為監(jiān)測(cè)系統(tǒng)，通過(guò)圖像輸入，對(duì)面部、身體形態(tài)分割，把信息輸入到深度卷積神經(jīng)網(wǎng)絡(luò)，識(shí)別各種不同的行為，并分析這是危害駕駛還是安全駕駛。有了 DMS，就可以實(shí)現(xiàn)深度神經(jīng)網(wǎng)絡(luò)的圖像識(shí)別功能，捕獲司機(jī)駕駛行為并自定義報(bào)警，目前已經(jīng)可以識(shí)別 十幾種駕駛行為。

 環(huán)視系統(tǒng)作為現(xiàn)在的標(biāo)配，當(dāng)拿到統(tǒng)一模塊直接上車就可以使用。Tier 1 在這個(gè)領(lǐng)域已經(jīng)做的非常好，拿到完整的開發(fā)包，可以自己調(diào)整，最多接 9 路攝像頭，正常的話接 4 路就可以了，前后左右。有些攝像頭數(shù)據(jù)拿過(guò)來(lái)可以做標(biāo)定工作，通過(guò)拼接了解整個(gè)流程，做任何想要做的事情。有了 SVS 代碼，也可以了解計(jì)算機(jī)視覺(jué)動(dòng)態(tài)拼接是怎么實(shí)現(xiàn)的，了解關(guān)鍵點(diǎn)在哪里，如想在里面做小的調(diào)整，這些可以進(jìn)行實(shí)現(xiàn)。

ADAS 領(lǐng)域有很多輔助功能，基于此，威盛在開發(fā)平臺(tái)上開放了接口，便于學(xué)習(xí)、了解。包括盲點(diǎn)檢測(cè)、前車防撞等，都是基于視覺(jué)、毫米波雷達(dá)等對(duì)物體距離、對(duì)物體的判斷，根據(jù)這些信息做邏輯分析。

基于任我行平臺(tái)實(shí)現(xiàn) L4 級(jí)別的自動(dòng)駕駛

當(dāng)下自動(dòng)駕駛大熱，前途也非常光明，研究自動(dòng)駕駛的公司非常多，但自動(dòng)駕駛研究的機(jī)構(gòu)用手指就可以數(shù)出來(lái)，沒(méi)有經(jīng)濟(jì)實(shí)力做相關(guān)研究很難，威盛所做的就是提供計(jì)算平臺(tái)，結(jié)合代碼、控制器、無(wú)人車、傳感器，整體打包自動(dòng)駕駛開發(fā)平臺(tái)。

威盛電子開發(fā)的原形系統(tǒng)在封閉園區(qū)指定范圍內(nèi)，可以做到自動(dòng)行駛抵達(dá)目的地。同時(shí)通過(guò)激光雷達(dá)、超聲波雷達(dá)、慣性導(dǎo)航等，已經(jīng)可以自主避障，實(shí)現(xiàn)了 L4 級(jí)別的自動(dòng)駕駛。

相關(guān)技術(shù)人才缺口巨大 

威盛任我行智駕科研平臺(tái)的基礎(chǔ)，是構(gòu)建在人工智能開發(fā)平臺(tái)之上，把自動(dòng)駕駛技術(shù)放進(jìn)去變成自動(dòng)駕駛開發(fā)平臺(tái)，把車載視覺(jué)放進(jìn)去就是車載視覺(jué)開發(fā)平臺(tái)，形成可供教學(xué)使用的開發(fā)平臺(tái)。

可以看到全中國(guó)的學(xué)校，最上層是 235 所科研院所（不含大學(xué)），593 所大學(xué)可以招收研究生，2956 所高等學(xué)府、1.01 萬(wàn)所中專。大學(xué)包括大專在內(nèi)，都是以理論知識(shí)為主，做科研的是少數(shù)，更多是做科普。

威盛希望達(dá)到的效果并不僅僅是把平臺(tái)拿出去做科研，而是希望更多做技術(shù)方面的 AI 公司加入，把任我行平臺(tái)作為一個(gè)科普平臺(tái)，通過(guò)開發(fā)平臺(tái)把威盛的技術(shù)變成標(biāo)準(zhǔn)化的開發(fā)包，供給學(xué)校或科研機(jī)構(gòu)使用。

通過(guò)標(biāo)準(zhǔn)化開發(fā)包的方式，幫助第三方教育機(jī)構(gòu)有能力開發(fā)基于人工智能的教案、教具，讓更多的人能夠接觸人工智能，學(xué)習(xí)人工智能。

目前中國(guó)的人工智能領(lǐng)域人員缺口是 500 萬(wàn)，威盛目標(biāo)是希望通過(guò)智研平臺(tái)以及系統(tǒng)，幫助百萬(wàn)學(xué)子走入 AI 產(chǎn)業(yè)，這個(gè)時(shí)間可能是 5 年、10 年，但這是威盛電子努力的方向，第一步先從自動(dòng)駕駛和輔助駕駛開始。

雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。