加入星計(jì)劃,您可以享受以下權(quán)益:

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴(kuò)散
  • 作品版權(quán)保護(hù)
  • 300W+ 專業(yè)用戶
  • 1.5W+ 優(yōu)質(zhì)創(chuàng)作者
  • 5000+ 長(zhǎng)期合作伙伴
立即加入
  • 正文
    • 01、高維方案:量產(chǎn)BEV
    • 02、降本需求,國(guó)產(chǎn)替代不容易
    • 03、軟硬協(xié)同:輕舟+地平線>輕舟和地平線
    • 04、工程化解題 :好奇心與緊迫感
  • 推薦器件
  • 相關(guān)推薦
  • 電子產(chǎn)業(yè)圖譜
申請(qǐng)入駐 產(chǎn)業(yè)圖譜

降本、BEV、量產(chǎn),輕舟+地平線的國(guó)產(chǎn)化范式

2023/10/15
2970
閱讀需 18 分鐘
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點(diǎn)資訊討論

作者 | 朱世耘,編輯 | 章漣漪

2022年年初,侯聰因?yàn)橐蚝怂徇^期,與黃暢的“飯局”改在北五環(huán)外的一個(gè)公園內(nèi)。邊吃著薯?xiàng)l漢堡,兩位清華同門聊了許多關(guān)于自動(dòng)駕駛產(chǎn)業(yè)的話題,以及輕舟使用地平線征程5芯片(以下簡(jiǎn)稱征程5)作為其自動(dòng)駕駛系統(tǒng)核心計(jì)算平臺(tái)的計(jì)劃。

我當(dāng)時(shí)正處于從英偉達(dá)往地平線轉(zhuǎn)換的過程中,其實(shí)確實(shí)會(huì)有一些路徑依賴。黃暢師兄(地平線聯(lián)合創(chuàng)始人、CTO)的幾句話,讓我放心地在地平線的平臺(tái)上去開發(fā)。” 輕舟智航(以下簡(jiǎn)稱輕舟)聯(lián)合創(chuàng)始人、CTO侯聰向《賽博汽車》回憶道。

一年之后,輕舟于9月20日宣布已成功獲得數(shù)家頭部車企量產(chǎn)定點(diǎn)合作,成為首家基于地平線征程5實(shí)現(xiàn)BEV感知技術(shù),達(dá)到行泊一體全棧交付量產(chǎn)要求的智駕方案供應(yīng)商。

更重要的是,這套征程5+11V5R作為硬件系統(tǒng),能夠?qū)崿F(xiàn)高速NOA,且具備城市NOA拓展能力的的高階量產(chǎn)智駕方案的成本,用侯聰?shù)脑捳f是“極具性價(jià)比優(yōu)勢(shì)”,未來征程5+激光雷達(dá)的城市NOA方案成本也是如此。

這意味著,中國(guó)高階智駕的量產(chǎn)硬件系統(tǒng)開始接近特斯拉HW3.0 7000元左右的標(biāo)配成本區(qū)間。

像大眾、通用、豐田在中國(guó)實(shí)現(xiàn)百萬輛級(jí)規(guī)模,像特斯拉在華生產(chǎn)出口歐洲一樣,國(guó)產(chǎn)軟、硬件,中國(guó)公司間的軟硬協(xié)同,國(guó)產(chǎn)化也成為低成本量產(chǎn)高階智駕系統(tǒng)的底層推動(dòng)力。

01、高維方案:量產(chǎn)BEV

“當(dāng)我們?cè)谲嚨谰€識(shí)別等場(chǎng)景中比其它供應(yīng)商表現(xiàn)更好、更穩(wěn)定時(shí),就有突破感?!焙盥斦f道:“那一刻我們就知道,我們是在做一個(gè)更先進(jìn)的東西,它本身就是更容易解決這些問題,是正確的做法。”

“更先進(jìn)的東西”是指BEV感知模型。

相比于前視圖或透視圖,BEV(鳥瞰圖)表征能夠讓模型更好地識(shí)別遮擋,有利于規(guī)劃、控制后續(xù)模塊的開發(fā)和部署。輕舟的BEV方案采用多相機(jī)特征和時(shí)序融合的方式,生成速度和方向,實(shí)現(xiàn)道路語義識(shí)別、跨相機(jī)遮擋等非BEV方案模型所不具備的能力。

而且,輕舟將7個(gè)行車攝像頭和5個(gè)泊車攝像頭的數(shù)據(jù)全部輸入同一個(gè)感知神經(jīng)網(wǎng)絡(luò),實(shí)現(xiàn)軟硬件完整整合的行泊一體方案,降低算力需求,提升產(chǎn)品體驗(yàn)。

BEV并不是新概念。自特斯拉2020年首次給出BEV在自動(dòng)駕駛領(lǐng)域的最佳實(shí)踐后,已是自動(dòng)駕駛玩家人手一套的“流行技術(shù)”。

但反直覺的是,至今量產(chǎn)上車的BEV方案屈指可數(shù)。據(jù)《賽博汽車》粗略了解,此次輕舟的BEV方案,甚至可能是繼特斯拉、小鵬、華為之外的第四家(準(zhǔn))量產(chǎn)方案。

究其原因,計(jì)算機(jī)視覺領(lǐng)域有眾多的開源算法、工具和數(shù)據(jù)集,即使只是相關(guān)專業(yè)學(xué)生也可以搭建起一套能“跑起來“的BEV模型。

但“做出Demo,到把算法部署在車上做到量產(chǎn)水平,中間是天壤之別?!焙盥敱硎?。

顯而易見,量產(chǎn)模型需要具有足夠高的精度和魯棒性(系統(tǒng)健壯性),在各類及復(fù)雜場(chǎng)景下能夠表現(xiàn)穩(wěn)定?!翱偛荒馨滋炜梢砸雇聿恍校缣炜梢裕掠昶痨F不行。”

而量產(chǎn)模型的精度和魯棒性,是由“數(shù)據(jù)閉環(huán)”支撐的。

BEV作為通用性更強(qiáng)的神經(jīng)網(wǎng)絡(luò)模型,具有“力大磚飛”的特性:模型的上限取決于算力和數(shù)據(jù)的加成效果。

而數(shù)據(jù)閉環(huán)是高質(zhì)量訓(xùn)練數(shù)據(jù)的生產(chǎn)過程:在大量數(shù)據(jù)的基礎(chǔ)之上,基于數(shù)據(jù)科學(xué)進(jìn)行細(xì)分類,之后利用算法工具挖掘篩選,使數(shù)據(jù)分布能夠覆蓋目標(biāo)場(chǎng)景的長(zhǎng)尾問題,最終生成一個(gè)面向現(xiàn)實(shí)場(chǎng)景的訓(xùn)練集,保證交付方案的實(shí)現(xiàn)效果。

數(shù)據(jù)閉環(huán)還包括訓(xùn)練和部署。Demo往往是在“無限”算力支持下運(yùn)行在有限的場(chǎng)境之內(nèi),量產(chǎn)模型需要適應(yīng)“算力有限、場(chǎng)景無限”的現(xiàn)實(shí)世界。因此訓(xùn)練和部署,需要從下游業(yè)務(wù)需求出發(fā),對(duì)上游資源進(jìn)行工程化的細(xì)致打磨,抓大放小,找到性能、效率和成本之間的平衡點(diǎn)。

所以,將BEV模型量產(chǎn)上車的前提,是擁有一套完備的數(shù)據(jù)閉環(huán)體系。期間,技術(shù)、心力和時(shí)間缺一不可。

侯聰表示,輕舟作為L(zhǎng)4級(jí)自動(dòng)駕駛公司期間已經(jīng)搭建起了仿真、標(biāo)注等一整套數(shù)據(jù)體系,而面向量產(chǎn)則使輕舟對(duì)算法和數(shù)據(jù)的理解更進(jìn)一步。

一方面,輕舟的模型設(shè)計(jì)之初便是以數(shù)據(jù)為中心;另一方面,為量產(chǎn)做準(zhǔn)備的過程中,輕舟形成了一套基于實(shí)戰(zhàn)的數(shù)據(jù)采集、分布、增強(qiáng)的工程方法?!?strong>讓數(shù)據(jù)的使用效率不斷提高是很關(guān)鍵的一件事。”

實(shí)踐出真知。

作為自動(dòng)駕駛算法公司,輕舟此前的發(fā)版(更新自動(dòng)駕駛系統(tǒng)版本)效率為一月一版,也是目前行業(yè)的平均水平。但隨著量產(chǎn)節(jié)奏發(fā)布,目前輕舟的發(fā)版效率已提高到兩周一版,小模型則為一周一版。解決問題的時(shí)間從行業(yè)通常的一周縮短為三天。

02、降本需求,國(guó)產(chǎn)替代不容易

但再好的BEV模型架構(gòu)和數(shù)據(jù)閉環(huán),要“上車”,都需要問問夠不夠錢“買票”。

同為自動(dòng)駕駛T1供應(yīng)商的張先生向《賽博汽車》直言:“BEV需要的算力大,現(xiàn)在只能用Orin,光芯片4000塊,整車不就得30萬元以上了。

關(guān)于英偉達(dá)Orin-X芯片的價(jià)格,業(yè)內(nèi)從300美元-500美元的說法不一,但“貴”是共識(shí)。“硬件和配套成本,Orin大概是征程5的1.5-1.8倍?!?/strong>一家正在論證從英偉達(dá)向地平線平臺(tái)切換的車企表示。

成本考量,是輕舟從之前的英偉達(dá)Orin-X向地平線征程5切換的底層原因。

高階智能駕駛需要由上限更高的神經(jīng)網(wǎng)絡(luò)算法模型實(shí)現(xiàn)。神經(jīng)網(wǎng)絡(luò)模型越大,對(duì)算力越高;目前業(yè)內(nèi)經(jīng)過量產(chǎn)驗(yàn)證的百TOPS大算力芯片只有英偉達(dá)Orin-X和地平線征程5。當(dāng)車企想要在更主流價(jià)位車型上落地NOA等高階智駕能力時(shí),用征程5替代Orin-X看似是必然之選。

問題是,如何替代?

英偉達(dá)是深度學(xué)習(xí)的引領(lǐng)者。例如在Transformer“火”起來之前,Orin所應(yīng)用的Ampere架構(gòu)便為其針對(duì)性地設(shè)計(jì)了加速支持。

如今,全球絕大多數(shù)的神經(jīng)網(wǎng)絡(luò)都使用英偉達(dá)DGX服務(wù)器進(jìn)行訓(xùn)練,大量的算法工程師學(xué)習(xí)的起點(diǎn)便是英偉達(dá)CUDA架構(gòu)。

PyTorch、Tensorflow等核心深度學(xué)習(xí)框架都屬于CUDA生態(tài),使開發(fā)者能夠靈活使用CUDA語言去定制化一些GPU算子。

簡(jiǎn)而言之,英偉達(dá)平臺(tái)先天對(duì)神經(jīng)網(wǎng)絡(luò)友好,且生態(tài)豐富健全,工程師上手難度低。

當(dāng)然英偉達(dá)也并非完美產(chǎn)品。除了貴之外,基于數(shù)據(jù)中心通用架構(gòu)打造的端側(cè)芯片,在效能表現(xiàn)上相對(duì)較弱,對(duì)算力和功耗需求更多。這不僅導(dǎo)致單位算力成本更高,也會(huì)對(duì)適配車型造成障礙。

例如燃油車上缺乏液冷系統(tǒng),就難以布置無法被動(dòng)散熱的英偉達(dá)平臺(tái)。

征程5作為針對(duì)自動(dòng)駕駛端側(cè)場(chǎng)景需求設(shè)計(jì)的專用芯片,在成本優(yōu)勢(shì)外,對(duì)一些神經(jīng)網(wǎng)絡(luò)的效能更高,功耗需求更低。

但在算力和架構(gòu)與英偉達(dá)的差距外,應(yīng)用地平線的核心挑戰(zhàn)是“太新”。相比數(shù)碼愛好者都能談上一二的英偉達(dá)GPU,地平線的BPU對(duì)算法工程師來說更加陌生,生態(tài)也仍在建設(shè)當(dāng)中。

所以,雖然地平線硬件成本較低,但部署過程可能隱含高成本。這也是討論合作之初,侯聰所擔(dān)心的問題。

03、軟硬協(xié)同:輕舟+地平線>輕舟和地平線

從結(jié)果來看,輕舟只用了兩個(gè)月的時(shí)間便完成了在地平線平臺(tái)上的算法部署:SR上能夠穩(wěn)定復(fù)現(xiàn)周圍環(huán)境信息,BEV感知幀率達(dá)到與特斯拉一樣的30FPS,行業(yè)平均水平則為12.5-20FPS((每秒傳輸幀率)。

黃暢師兄果然說到做到。

輕舟是我們生態(tài)中第一家完全自研BEV自動(dòng)駕駛方案,并在兩個(gè)月內(nèi)高速部署的企業(yè)。”地平線芯片算法工具鏈產(chǎn)品經(jīng)理秦暢告訴《賽博汽車》,在行業(yè)內(nèi),基于J5打造自研算法方案,通常3至4個(gè)月完成是比較常見的節(jié)奏。

速度,來自于輕舟與地平線的軟硬協(xié)同。

特斯拉是英偉達(dá)在自動(dòng)駕駛芯片領(lǐng)域的第一個(gè)挑戰(zhàn)者。自研算法與自研芯片之間高度的軟硬協(xié)同,使HW3.0用兩塊共計(jì)140TOPS的FSD芯片,跑贏了258TOPS的Orin-X。

但并非每個(gè)企業(yè)都有特斯拉的稟賦和時(shí)機(jī),來自不同公司的軟硬件如何軟硬協(xié)同?“極致的開放合作”,是輕舟和地平線給出了一樣的答案,但實(shí)現(xiàn)“開放合作”卻絕非易事。

首先,T1、T2之間明確的責(zé)權(quán)體系流程需要被打破。

“職責(zé)上,作為T1的輕舟負(fù)責(zé)拆解主機(jī)廠需求,我們作為T2來做支持。但要將整個(gè)系統(tǒng)指標(biāo)做到最好,就需要大家在組織文化、質(zhì)量流程等多方面一起去探索創(chuàng)新,解決問題?!钡仄骄€副總裁、智能汽車事業(yè)部業(yè)務(wù)拓展負(fù)責(zé)人張宏志舉例道:

輕舟的BEV方案中,需要將所有攝像頭數(shù)據(jù)都接入征程5的ISP(圖像信號(hào)處理器),期間地平線對(duì)工具、經(jīng)驗(yàn)等進(jìn)行能力輸出,最后圖像質(zhì)量的把關(guān)、驗(yàn)證和確認(rèn)是輕舟的責(zé)任。

即地平線干活兒,輕舟驗(yàn)收。

但這當(dāng)中涉及幾百項(xiàng)細(xì)節(jié)的調(diào)整確認(rèn),以及軟硬件不同的能力稟賦。最終,雙方并未采用發(fā)包-交付這樣傳統(tǒng)的上下游鏈條模式工作,而是組建聯(lián)合團(tuán)隊(duì)來解決整個(gè)鏈條上的所有細(xì)節(jié)問題。

“合作至今,光是有會(huì)議紀(jì)要,有跡可循的多方會(huì)議就有上百場(chǎng)。”張宏志表示,“軟硬結(jié)合要做的比較好,就看雙方的信任度、開放度和技術(shù)研討的深度?!?/p>

事實(shí)上,信任和開放的程度往往最終決定著技術(shù)研討的深度。

秦暢講了這樣一個(gè)例子:輕舟算法中有一些與征程5匹配度不高的計(jì)算結(jié)構(gòu),即使付出大量的人力和時(shí)間對(duì)算子進(jìn)行優(yōu)化,也只能達(dá)到行業(yè)平均水平。

地平線具備深厚算法基因的研發(fā)團(tuán)隊(duì),建議調(diào)整算法使其更符合BPU特性,實(shí)現(xiàn)超100分的效果。但作為算法公司的輕舟會(huì)接受來自硬件公司的建議嗎?

“算法公司都非常注重算法的保真度,所以預(yù)想會(huì)有很大阻力?!痹谝痪€溝通客戶的秦暢說:“但結(jié)果輕舟非常樂于接受這個(gè)建議:‘哎,我如果這樣改的話,還能超過原來的效果’?!?/p>

這樣的信任和開放程度,為軟硬件公司在技術(shù)協(xié)同上提供了更寬的通路。

在雷達(dá)點(diǎn)云的處理上,輕舟此前在GPU上使用CUDA來做,但地平線用的是DSP數(shù)字信號(hào)處理器),輕舟則缺少DSP的開發(fā)經(jīng)驗(yàn)。

通常,行業(yè)內(nèi)會(huì)通過多次講解會(huì)來解釋使用方法,來彌補(bǔ)知識(shí)鴻溝。但在量產(chǎn)的“死線”前,越快完成知識(shí)復(fù)制,越為后期調(diào)優(yōu)爭(zhēng)取時(shí)間。

幾次workshop之后,輕舟與地平線決定采用更為直接高效的方式:由地平線提供一個(gè)最佳實(shí)踐作為參考,輕舟再基于此快速了解DSP與BPU的協(xié)同實(shí)現(xiàn)。基于這個(gè)用例,輕舟迅速將之前GPU的經(jīng)驗(yàn)移植到J5上優(yōu)化后,形成了自己的方案,也掌握了J5上DSP處理雷達(dá)的方法。

這種開放并不僅限于供應(yīng)商之間。

“客戶(主機(jī)廠)提的指標(biāo)還是比較粗,只靠那些指標(biāo)是不夠的?!焙盥敱硎荆鳛楣?yīng)商,在商量過程中輕舟不斷與主機(jī)廠詳細(xì)分享其內(nèi)部的標(biāo)定指標(biāo),以及指標(biāo)的改進(jìn)迭代過程。隨著交流深入,客戶也給到更多的整車級(jí)系統(tǒng)技術(shù)反饋?!?strong>這對(duì)于建立客戶對(duì)我們的信任和認(rèn)可是很重要的一點(diǎn)。”

04、工程化解題 :好奇心與緊迫感

2020年5月,Space X將宇航員送入太空站后,又在5個(gè)月內(nèi)成功發(fā)射了11顆衛(wèi)星。饒是如此,當(dāng)年10月的一次發(fā)射后,馬斯克深夜造訪39A發(fā)射臺(tái),看到只有兩個(gè)人在場(chǎng)工作后,質(zhì)問負(fù)責(zé)人:“我們?cè)谶@里有783名員工,為什么現(xiàn)在我只看到兩個(gè)人在工作?“

馬斯克擔(dān)心除非他能保持狂熱的緊迫感,否則SpaceX會(huì)像波音公司一樣,最終變成一家缺乏后勁,行動(dòng)遲緩的公司。”《馬斯克傳》中這樣寫道。

這樣的工作態(tài)度和緊迫感,中國(guó)的創(chuàng)新公司和工程師們可能最能共情。

輕舟聯(lián)合創(chuàng)始人、CTO侯聰在量產(chǎn)準(zhǔn)備現(xiàn)場(chǎng)輕舟為量產(chǎn)定點(diǎn)做準(zhǔn)備的工作節(jié)奏是每天早上9點(diǎn)鐘開始調(diào)試和測(cè)試到深夜11、12點(diǎn),再拉會(huì)復(fù)盤一天的工作,直至凌晨3、4點(diǎn),去進(jìn)行版本的迭代。感知技術(shù)研發(fā)負(fù)責(zé)人在大版本更新、極端場(chǎng)景測(cè)試時(shí),都會(huì)自己上車實(shí)測(cè),對(duì)車輛維修的細(xì)節(jié)問題甚至比測(cè)試工程師更了解。研發(fā)人員用周末“叼空”結(jié)婚的例子也是不勝枚舉。

“只要不睡覺,就是我們的工作時(shí)間。”這是張宏志回憶2022年地平線和輕舟團(tuán)隊(duì)溝通十一工作安排時(shí)得到的回復(fù):“但這不是單純耗時(shí)間的‘卷’。對(duì)于工程師來說,把一個(gè)新的技術(shù)體系搭建出來,來滿足新需求的過程本身非常激動(dòng)人心。我們都很好奇,如何用新的方法來解決新領(lǐng)域的問題。

事實(shí)上,主機(jī)廠與供應(yīng)商,軟硬件公司之間肩并肩、背靠背的高強(qiáng)度工作模式,是目前中國(guó)量產(chǎn)智駕行業(yè)的普遍狀態(tài)。因?yàn)楦唠A智駕作為復(fù)雜系統(tǒng)受眾多的子系統(tǒng)、子單元影響,牽一發(fā)而動(dòng)全身,導(dǎo)致調(diào)順調(diào)優(yōu)的工程化難度指數(shù)級(jí)上升。

工程化在整個(gè)系統(tǒng)中的占比是非常大的,但行業(yè)中對(duì)工程化的重視程度并不太夠。”張宏志表示,地平線在百萬片芯片上車的過程中,對(duì)工程化的重要性深有體會(huì)。

侯聰認(rèn)為,正是這樣千頭萬緒的工程量產(chǎn)過程,使輕舟團(tuán)隊(duì)從高大上的自動(dòng)駕駛開發(fā)快速轉(zhuǎn)變貼近客戶投身一線落地量產(chǎn)的高階駕駛輔助團(tuán)隊(duì)。

“全棧自研的核心技術(shù)、扎實(shí)的工程交付能力和客戶服務(wù)意識(shí),輕舟才能為客戶提供適合中國(guó)道路、具備規(guī)?;慨a(chǎn)交付和成本效益的一系列高階輔助駕駛解決方案?!?/p>

德國(guó)慕尼黑車展期間,輕舟的產(chǎn)品矩陣完整亮相,從 Air、Pro 到 Max, 依次對(duì)應(yīng)基于單征程 5、具備高速 NOA+L2 全功能的 7V1R 高速 NOA 方案;基于單征程 5、可拓展城市 NOA 功能的 11V5R 高速 NOA 方案;基于雙征程 5、采用單激光雷 達(dá)+11V5R 的城市 NOA 方案。

推薦器件

更多器件
器件型號(hào) 數(shù)量 器件廠商 器件描述 數(shù)據(jù)手冊(cè) ECAD模型 風(fēng)險(xiǎn)等級(jí) 參考價(jià)格 更多信息
ACS723LLCTR-40AU-T 1 Allegro MicroSystems LLC Analog Circuit, 1 Func, BICMOS, PDSO8, LEAD FREE, MS-012AA, SOIC-8

ECAD模型

下載ECAD模型
$4.46 查看
NCP45560IMNTWG-H 1 onsemi Load Switch, Integrated, ecoSWITCH™, 17 A, Fault Protection, DFN12 3x3, 0.5P, 3000-REEL

ECAD模型

下載ECAD模型
$1.77 查看
INA240A2D 1 Texas Instruments -4 to 80V, bidirectional, ultra-precise current sense amplifier with enhanced PWM rejection 8-SOIC -40 to 125

ECAD模型

下載ECAD模型
$3.91 查看
地平線

地平線

地平線是邊緣人工智能芯片的全球領(lǐng)導(dǎo)者。得益于前瞻性的軟硬結(jié)合理念,地平線自主研發(fā)兼具極致效能與開放易用性的邊緣人工智能芯片及解決方案,可面向智能駕駛以及更廣泛的通用 AI 應(yīng)用領(lǐng)域,提供包括高效能邊緣 AI 芯片、豐富算法IP、開放工具鏈等在內(nèi)的全面賦能服務(wù)。目前,地平線是國(guó)內(nèi)唯一一家實(shí)現(xiàn)車規(guī)級(jí)人工智能芯片量產(chǎn)前裝的企業(yè)。

地平線是邊緣人工智能芯片的全球領(lǐng)導(dǎo)者。得益于前瞻性的軟硬結(jié)合理念,地平線自主研發(fā)兼具極致效能與開放易用性的邊緣人工智能芯片及解決方案,可面向智能駕駛以及更廣泛的通用 AI 應(yīng)用領(lǐng)域,提供包括高效能邊緣 AI 芯片、豐富算法IP、開放工具鏈等在內(nèi)的全面賦能服務(wù)。目前,地平線是國(guó)內(nèi)唯一一家實(shí)現(xiàn)車規(guī)級(jí)人工智能芯片量產(chǎn)前裝的企業(yè)。收起

查看更多

相關(guān)推薦

電子產(chǎn)業(yè)圖譜

聚焦智能汽車和自動(dòng)駕駛,關(guān)注汽車技術(shù)進(jìn)步和商業(yè)文明沖突,志與汽車產(chǎn)業(yè)一同成長(zhǎng)。公眾號(hào):賽博汽車