本文經(jīng)自動(dòng)駕駛之心公眾號(hào)授權(quán)轉(zhuǎn)載，轉(zhuǎn)載請聯(lián)系出處。

21年 埋下了一顆種子

看過BEV障礙物故事的同學(xué)應(yīng)該清楚，我們組是在21年10月左右開始做BEV 障礙物的。那個(gè)時(shí)候不敢想著去做BEV 車道線，因?yàn)闆]有人力。但是我記得在12月左右的時(shí)候，我們面到了一個(gè)候選人，在面試的過程中聽到他們做了差不多半年多的BEV 車道線，整個(gè)技術(shù)路線是通過高精地圖來作為BEV 車道線網(wǎng)絡(luò)的訓(xùn)練真值，并說效果還不錯(cuò)。很遺憾，那個(gè)候選人最后沒有來我們這里。結(jié)合21年Telsa AI day 講的車道線內(nèi)容，一個(gè)要做BEV 車道線的種子就這樣在組內(nèi)埋下了。

22年 走對(duì)了第一步

整個(gè)22年，我們組內(nèi)人力都是很緊張的，我記得在6，7月份的時(shí)候，我們剛好有人力去探索一下BEV 車道線。但是當(dāng)時(shí)我們組只有一個(gè)同學(xué)(我們就先叫他小軒同學(xué)吧)有2個(gè)月的時(shí)間去做這件事。然后21年的那顆種子開始發(fā)芽了，我們準(zhǔn)備先從數(shù)據(jù)下手，小軒同學(xué)還是很給力的(很有想象力，后續(xù)小軒同學(xué)也做了更多令大家驚喜的東西)，差不多用了2月的時(shí)間，我們可以通過高速高精地圖來提取對(duì)應(yīng)的車周圍的車道線數(shù)據(jù)。當(dāng)時(shí)做出來的時(shí)候，我記得大家還是很激動(dòng)的。

圖1: 高精地圖車道線 投影到圖像系的效果

大家從圖1上可以看出，貼合對(duì)還是有一些問題，因此小軒同學(xué)又做了系列的優(yōu)化。2個(gè)月后，小軒同學(xué)去做其他任務(wù)了，現(xiàn)在回頭看，我們的BEV 車道線探索之路，已經(jīng)走對(duì)了第一步。因?yàn)樵?1年，22年已經(jīng)逐步有很多優(yōu)秀的BEV 車道線論文和代碼相繼開源?？吹竭@里，你可能以為23年一定有一個(gè)完完美美的BEV 車道線落地的故事，然后理想往往都很豐滿，現(xiàn)實(shí)卻是很殘酷。

23年 跌跌撞撞

由于我們BEV 障礙物已經(jīng)證明BEV 這條路是可以走下去了，并且在路測也表現(xiàn)出了不錯(cuò)的效果。組內(nèi)開始有了更多的資源來考慮車道線這件事，注意這里不是BEV了。為什么呢？因?yàn)樵谶@個(gè)時(shí)候，我們面臨了很大的上線壓力，BEV 車道線又沒有足夠的經(jīng)驗(yàn)，或者說整個(gè)組內(nèi)做過2D 車道線量產(chǎn)的人都幾乎沒有。23年前半年，真的可以用跌跌撞撞來形容，我們內(nèi)部激烈的討論了很多次，最后決定形成2條線，一條線為2D 車道線: 大部分的人力在2D 車道線這條線上,重后處理，輕模型，通過2D 車道線這條線來積累車道線后處理量產(chǎn)經(jīng)驗(yàn)。一條線為BEV 車道線：只有一小部分人力(其實(shí)就1-2個(gè)人力)，注重BEV 車道線的模型設(shè)計(jì), 積累模型經(jīng)驗(yàn)。BEV 車道線的網(wǎng)絡(luò)已經(jīng)有很多了，我在這里貼2篇對(duì)我們影響比較大的論文供大家參考?！禜DMapNet: An Online HD Map Construction and Evaluation Framework》 和 《MapTR: Structured Modeling and Learning for Online Vectorized HD Map Construction》

圖2: HDMapNet

圖3 MapTR

很幸運(yùn)，在4,5月份的時(shí)候，我們在2D 車道線這條線積累了大量的車道線后處理量產(chǎn)經(jīng)驗(yàn)，我們的BEV 車道線網(wǎng)絡(luò)也設(shè)計(jì)出來了，在5月底，很快BEV 車道線順利上車。在這里不得不說一下我們負(fù)責(zé)車道線后處理的大海同學(xué)，還是很給力的。然而當(dāng)你覺得很順利的時(shí)候，往往噩夢就要開始了。BEV 車道線部署后，控車效果不理想，這個(gè)時(shí)候大家陷入了自我懷疑階段，到底是因?yàn)锽EV 車道線3次樣條曲線擬合的問題，還是下游參數(shù)沒有適配好的問題。萬幸的是，我們車上有供應(yīng)商的效果，我們在路測時(shí)把供應(yīng)商的車道線結(jié)果保存下來，然后在可視化工具里面在和我們的結(jié)果對(duì)比。當(dāng)控車效果不好的時(shí)候，先證明我們自己的車道線質(zhì)量是沒有問題，這樣驅(qū)動(dòng)下游來適配我們的BEV車道線。一個(gè)月，整整一個(gè)月的時(shí)間，我們才穩(wěn)定控車。我記得很清楚，我們還從上海跑到蘇州，那天還是周六，大家在群里看到高速的控車效果都很激動(dòng)。

然而一個(gè)故事往往都是一波三折的，我們只能利用高速高精地圖來生產(chǎn)車道線數(shù)據(jù)。城市怎么辦，還有那么多badcase 需要解決。這個(gè)時(shí)候重要人物終于要出現(xiàn)了，我們就先叫他小糖同學(xué)吧(我們數(shù)據(jù)組的大管家)。小糖同學(xué)他們利用點(diǎn)云重建來給我們重建出來重建clip（這個(gè)過程還是蠻痛苦，我記得那兩個(gè)月是他們壓力最大的時(shí)候，哈哈，當(dāng)然我們和小糖同學(xué)經(jīng)常相愛相殺，畢竟經(jīng)常在開會(huì)時(shí)常常說又沒有數(shù)據(jù)了。）。然后重建出來后怎么標(biāo)注，放眼當(dāng)時(shí)手里的供應(yīng)商們，都沒有這樣的標(biāo)注工具，別說什么標(biāo)注經(jīng)驗(yàn)了。又是和小糖同學(xué)他們一起，經(jīng)歷了漫長的1個(gè)月時(shí)間，標(biāo)注工具終于和供應(yīng)商打磨好了。（我們經(jīng)常開玩笑說，我們這是在賦能整個(gè)自動(dòng)駕駛的標(biāo)注行業(yè)，這個(gè)過程是真痛苦，重建clip 加載是真慢 ）。然而整個(gè)標(biāo)注還是比較慢的，或者比較貴，這個(gè)時(shí)候小軒同學(xué)帶著他的車道線預(yù)標(biāo)注大模型閃亮登場(車道線預(yù)標(biāo)注的大模型效果還是杠杠的)，大家看他的眼神都在閃閃發(fā)光。這一套組合拳打下來，我們的車道線數(shù)據(jù)生產(chǎn)終于是磨合的差不多了。8月份的時(shí)候我們的BEV 車道線控車道線已經(jīng)迭代的不錯(cuò)了，對(duì)于簡單的高速領(lǐng)航功能。現(xiàn)在小軒同學(xué)在大模型預(yù)標(biāo)注方向依舊不斷的給我們帶來更多的驚喜，我們和小糖同學(xué)依舊在相愛相殺中。

然而一個(gè)故事都不是這么容易結(jié)束，我們在9月份的時(shí)候，開始動(dòng)手做多模態(tài)(Lidar,camera，Radar)多任務(wù)(車道線，障礙物，Occ)前融合模型，并后續(xù)支持城市領(lǐng)航功（NCP), 也就是所謂的重感知，輕地圖的方案。基于BEV障礙物和BEV 車道線的經(jīng)驗(yàn)前融合網(wǎng)絡(luò)我們很快就部署上車了，應(yīng)該是在9月底的時(shí)候。車道線也加了很多子任務(wù)，路面標(biāo)識(shí)別，路口的拓?fù)涞鹊取Ｔ谶@個(gè)過程中，我們對(duì)BEV 車道線的后處理進(jìn)行了升級(jí)，拋棄了車道線3次樣條曲線擬合，而采用點(diǎn)的跟蹤方案，點(diǎn)的跟蹤方案和我們的車道線模型的輸出可以很好的結(jié)合在一起。這個(gè)過程也是一個(gè)痛苦的，我們連續(xù)2個(gè)月，每周開一次專項(xiàng)會(huì)，畢竟我們已經(jīng)基于擬合的方案做的不錯(cuò)了，但是為了更高的上限，只能痛并快樂著。最終目前我們已經(jīng)把基礎(chǔ)的功能進(jìn)行路測了。

稍微給大家解釋一下圖4，左邊是車道線點(diǎn)跟蹤的效果目前我們模型的感知范圍只有前80米，大家可以看到車后也有一些點(diǎn)，這是跟蹤留下的。右邊是我們的建立的實(shí)時(shí)感知圖，當(dāng)然現(xiàn)在還在一個(gè)快速迭代的過程，還有很多問題正在解決中。

24年 新的開始

時(shí)刻，站在24年回看我們從21年到現(xiàn)在的一路成長和積累，很慶幸在21年那個(gè)點(diǎn)，有機(jī)會(huì)去做BEV， 也很慶幸有一群志同相合的小伙伴一路相輔相成。24年，對(duì)我們來說，有很多東西需要去追尋，前融合模型的量產(chǎn)上線，數(shù)據(jù)方向的發(fā)力，時(shí)序模型的探索，端到端的暢想等等。