CVPR 2023 正式公布最佳論文等重磅獎項。來自上海人工智能實(shí)驗室、武漢大學(xué)、商湯科技團(tuán)隊聯(lián)合發(fā)表論文Planning-oriented Autonomous Driving（以路徑規(guī)劃為導(dǎo)向的自動駕駛）實(shí)現(xiàn)自動駕駛技術(shù)的重要突破，獲CVPR最佳論文。

國內(nèi)自動駕駛，真的出息了！

一覺醒來，還沒來得及吃口熱乎粽子，就看見一條堪稱爽文的熱乎新聞：

(資料圖片僅供參考)

在2023年，CVPR大會的論文投稿總量達(dá)9155篇。其中，商湯科技及聯(lián)合實(shí)驗室共有 54篇論文被CVPR 2023接收，包含一篇最佳論文、一篇最佳論文候選，以及七篇Highlight論文。

論文題目：Planning-oriented Autonomous Driving

論文地址：https://arxiv.org/abs/2212.10156

在近萬篇論文中，上海人工智能實(shí)驗室、武漢大學(xué)、商湯科技聯(lián)合團(tuán)隊研究成果Planning-oriented Autonomous Driving（以路徑規(guī)劃為導(dǎo)向的自動駕駛）最終脫穎而出，獲CVPR 2023最佳論文獎（Best Paper Award）。

（劃重點(diǎn)）要知道這個國際獎項已經(jīng)頒了40年，但以自動駕駛為主題的論文獲獎可是第一次！

另外參與CVPR評選需要和全球各地的頂尖學(xué)者來一套“過五關(guān)斬六將”，拿了這個獎堪稱為國爭光（進(jìn)度條：已擊敗全球99.99%學(xué)者/學(xué)術(shù)機(jī)構(gòu)）！

平復(fù)激動的心情，接下來咱們就聊聊這個獲獎的事兒。

首先這個頒獎機(jī)構(gòu)用一個詞來形容，就是頂級（到能讓一個研究生原地畢業(yè)）。

CVPR一年舉辦一次，是計算機(jī)視覺領(lǐng)域的全球級會議。要想知道一個會議有多少含金量，看業(yè)內(nèi)人的關(guān)注度就懂了，CVPR的隆重程度：從1983年開始，每年吸引著全球各地的學(xué)術(shù)大牛們來參與，近幾年投稿量都近萬篇，即使這些天之驕子總是第一輪就會被刷掉3/4。

當(dāng)然這可不是什么鍍金的手段，這個會議憑借著高質(zhì)量和低成本，它為眾多研學(xué)者提供著教科書般的行業(yè)價值。目前在中國計算機(jī)學(xué)會推薦國際學(xué)術(shù)會議的排名里，CVPR為人工智能領(lǐng)域的A級會議。

除了水平認(rèn)證，CVPR回報給這些學(xué)者們最重要的是尊重和公平。在初次篩選中，評審們給出的選擇不是通不通過，而是細(xì)致到“非常接受”、“接受”、“差不多”、“拒絕”、“非常拒絕”。

同時評審們不屬于CVPR機(jī)構(gòu)組織，對手里的稿件都是盲審。最關(guān)鍵的是，稿件不允許出現(xiàn)任何能顯示作者信息身份的元素（懷疑定這個規(guī)矩的人參加過我們語文高考）！所以評審們和作者都不知道彼此是誰！因此，最后脫穎而出的作品都是用實(shí)力經(jīng)過細(xì)審，沒什么運(yùn)氣的成分。

話說咱們國內(nèi)智能車現(xiàn)在發(fā)展的如火如荼，也不知道當(dāng)時有沒有評審猜中過這篇論文的歸屬地。話不多說，接下來咱們就來看看這篇論文是靠什么獲得國際認(rèn)證的。

我們?nèi)祟愰_車時的思路通常是“堵車了，我得剎?！?，而自動駕駛車的思路則是“感知前方障礙物的時速和距離、系統(tǒng)算法判斷場景需求決定剎車、牽動制動系統(tǒng)”。顯然，如果自動駕駛系統(tǒng)將流程整合起來會帶來更絲滑、BUG更少的體驗。

這篇以自動駕駛為主題的論文就是從此角度切入問題，核心在于首次提出感知決策一體化的自動駕駛通用大模型UniAD。UniAD將檢測、跟蹤、建圖、軌跡預(yù)測，占據(jù)柵格預(yù)測以及規(guī)劃，整合到一個基于Transformer的端到端網(wǎng)絡(luò)框架下。

不用覺得復(fù)雜，我們挑取2個重點(diǎn)詞“檢測”、“規(guī)劃”，也就是說這個框架在環(huán)境中可以直接給出相應(yīng)的指令。

UniAD將各任務(wù)通過token（最小單位）的形式在特征層面，按照感知-預(yù)測-決策的流程進(jìn)行深度融合，使得各項任務(wù)彼此支持，實(shí)現(xiàn)性能提升。在nuScenes數(shù)據(jù)集的所有任務(wù)上，UniAD都達(dá)到 SOTA 性能。

融合五大核心模塊，解決自動駕駛“規(guī)劃”難題

為什么之前的自動駕駛系統(tǒng)做不到呢？

現(xiàn)有的自動駕駛系統(tǒng)可大致歸為三類：

（a）模塊化組成的系統(tǒng)；

（b）多任務(wù)模塊架構(gòu)的系統(tǒng)；

（c）端到端自動駕駛系統(tǒng)。

其中傳統(tǒng)的端到端算法可分為：

（c.1）基礎(chǔ)的端到端算法，直接從傳感器輸入預(yù)測控制輸出，但是優(yōu)化困難，在充滿復(fù)雜視覺信息的真實(shí)場景中應(yīng)用面臨較大挑戰(zhàn)；

（c.2）按照任務(wù)劃分網(wǎng)絡(luò)的顯式設(shè)計，但是網(wǎng)絡(luò)模塊之間缺乏有效的特征溝通，需要分階段的輸出結(jié)果，任務(wù)間缺乏有效交互。

（c.3）這篇論文里提出的決策導(dǎo)向的感知決策一體設(shè)計方法，用token特征按照感知-預(yù)測-決策的流程進(jìn)行深度融合，使得以決策為目標(biāo)的各項任務(wù)指標(biāo)一致提升。

最為常見的是模塊化組成的系統(tǒng)架構(gòu)，或者部分模塊組成多任務(wù)架構(gòu)，他們都以優(yōu)化部分性能為核心，比如檢測性能（檢測準(zhǔn)確度）、預(yù)測性能（預(yù)測準(zhǔn)確度）。

以上一些算法的BUG總結(jié)起來其實(shí)就是流程瑣碎，一損俱損。這和當(dāng)下智駕方案都急著擺脫高精地圖的原因有點(diǎn)類似。畢竟依賴高精地圖的話，哪怕硬件、算法再好，只要地圖有偏差，整套方案直接崩盤。所以大家都在做“簡化和收納”。

而端到端自動駕駛系統(tǒng)，以UniAD自動駕駛通用大模型為代表，將檢測、跟蹤、建圖、軌跡預(yù)測、占據(jù)柵格預(yù)測以及規(guī)劃五大模塊融合，以最終的駕駛性能為目標(biāo)，從解決實(shí)際問題出發(fā)，例如提升規(guī)劃出來的車輛行駛軌跡的安全性。

現(xiàn)在行業(yè)中大多數(shù)端到端（End-to-end，E2E）的自動駕駛系統(tǒng)，由于沒有很好的網(wǎng)絡(luò)框架來融合全部五大模塊，都只能融合部分模塊。

UniAD通過將環(huán)視的圖片以Transformer映射得到BEV的特征，同時進(jìn)行目標(biāo)的跟蹤，在線的建圖，包括目標(biāo)軌跡的預(yù)測，還有障礙物的預(yù)測，最終實(shí)現(xiàn)駕駛行為。環(huán)視一圈，現(xiàn)觀察現(xiàn)預(yù)測，然后決定怎么行動，聽起來是不是有人類開車的味兒了？

據(jù)商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家王曉剛表示，UniAD可以做到“多目標(biāo)跟蹤準(zhǔn)確率超越SOTA 20%，車道線預(yù)測準(zhǔn)確率提升30%，預(yù)測運(yùn)動位移誤差降低38%，規(guī)劃誤差降低28%。”

下面展示了UniAD在數(shù)據(jù)集nuScenes上多個復(fù)雜場景下的優(yōu)勢。

UniAD 感知到左前方等待的黑色車輛，預(yù)測其未來軌跡（即將左轉(zhuǎn)駛?cè)胱攒嚨能嚨溃┖臀磥淼膐ccupancy，推算繼續(xù)前行有碰撞風(fēng)險，并立即減速以進(jìn)行避讓，待黑車駛離后再恢復(fù)正常速度直行。

得益于 UniAD 的地圖分割模塊與規(guī)劃模塊的深度交互，規(guī)劃模塊基于道路信息作出判斷，向前行駛時依據(jù)道路結(jié)構(gòu)適時地轉(zhuǎn)彎。

在視野干擾較大且場景復(fù)雜的十字路口，UniAD 能通過分割模塊生成十字路口的整體道路結(jié)構(gòu)（如右側(cè) BEV 圖中的綠色分割結(jié)果所示）和周圍車輛的軌跡，由基于注意力機(jī)制的planner完成大幅度的左轉(zhuǎn)。

在夜晚視野變暗的情況下，由于需要繼續(xù)直行至下個路口左轉(zhuǎn)，UniAD 能感知到前車停止且左右均有障礙物，所以先靜止，待前車行駛并再前行并左轉(zhuǎn)。

雖然現(xiàn)在自動駕駛的目標(biāo)還是趕緊追上人類，但是不得不說有些場景中大模型觀察環(huán)境比我們都更加全面細(xì)致，以下案例，展示了UniAD在國內(nèi)真實(shí)場景的實(shí)際演示效果。

在擁堵路段上，UniAD能感知到前方大車的停車和啟動狀態(tài)，做出相應(yīng)的減速和加速決策，保持足夠的安全距離。

得益于地圖重建任務(wù)，UniAD在路口和曲折道路上，也可以做出符合道路曲率的路徑規(guī)劃。

自動駕駛多模態(tài)大模型發(fā)展和落地

在學(xué)術(shù)圈大家都認(rèn)這么一個理兒：不能落地的論文得再好的獎也沒有價值。這篇《以路徑規(guī)劃為導(dǎo)向的自動駕駛》用幾千字提出了UniAD 這項自動駕駛技術(shù)，為產(chǎn)業(yè)發(fā)展拓展了一個新的方向。實(shí)際上，它的創(chuàng)造者已經(jīng)在努力將這些價值落地了。

作為創(chuàng)作者之一的商湯科技，一直致力于自動駕駛技術(shù)領(lǐng)域的研究和發(fā)展布局。例如在今年上海車展上，商湯展示了廣汽埃安AION LX Plus、哪吒S等車型搭載商湯絕影智能駕駛方案的落地成果。

王曉剛將這些成果歸功于商湯持續(xù)建設(shè)打造“大模型+大裝置”技術(shù)路徑，以及在自動駕駛行業(yè)長期深耕的積累與實(shí)踐，并表示未來將沿著多模態(tài)大模型的道路，去進(jìn)一步推動自動駕駛的進(jìn)步。

所以這篇論文不只是學(xué)術(shù)上一次舌戰(zhàn)群儒的勝利，更關(guān)鍵的是它將成為自動駕駛大漠臺多模型落地的標(biāo)志，繼續(xù)發(fā)揮它的應(yīng)用價值，去推動實(shí)現(xiàn)更高階的自動駕駛?cè)斯ぶ悄?。期待國?nèi)自動駕駛行業(yè)再次實(shí)現(xiàn)擊敗全球99.99%對手的進(jìn)度條！

關(guān)鍵詞：