ICRA2022 | 愛丁堡&牛津&利物浦大學(xué)聯(lián)合開源AutoPlace:車載單片毫米波雷達場景識別
原文鏈接:ICRA2022 | 愛丁堡&牛津&利物浦大學(xué)聯(lián)合開源AutoPlace:車載單片毫米波雷達場景識別
https://mp.weixin.qq.com/s/vCoMJBAHdv9nlQLqv7I_Zw
今天給大家介紹一個最新的開源工作:AutoPlace,主要用于車載單片毫米波雷達場景識別。該工作由愛丁堡大學(xué)MAPS Lab的盧曉軒團隊(Kaiwen Cai, Bing Wang, ?Chris Xiaoxuan Lu)完成,開源了代碼和數(shù)據(jù)集,可謂是一大福音!
大家快去star吧!
項目地址:https://ramdrop.github.io/assets/pages/AutoPlace/AutoPlace_customized.html
代碼地址:
Code:https://github.com/ramdrop/AutoPlace
Demo如下所示
視頻鏈接:ICRA2022 | 愛丁堡&牛津&利物浦大學(xué)聯(lián)合開源AutoPlace:車載單片毫米波雷達場景識別
https://mp.weixin.qq.com/s/vCoMJBAHdv9nlQLqv7I_Zw
景識別是許多機器自主任務(wù)的基礎(chǔ),比如回環(huán)檢測和尺度定位。一般的場景識別系統(tǒng)使用視覺相機或者激光雷達來實現(xiàn),但它們在黑暗、惡劣天氣以及其他視線不佳的情況下性能會極大降低。機械毫米波雷達(如CTS-350X)可以應(yīng)對一些惡劣工況,但是它體積大、成本高且必須安裝在車頂,這使得難以被大規(guī)模商用。車載單片毫米波雷達是近年來新出現(xiàn)的商用環(huán)境感知傳感器,它體積小、成本低,采集信號種類豐富(包括多譜勒速度和RCS)。但是車載單片毫米波雷達的點云稀疏又嘈雜,如何將其良好應(yīng)用于場景識別是一個尚未解決的挑戰(zhàn)。
本工作提出一套針對車載單片毫米波雷達的場景識別方法,我們稱之為AutoPlace。AutoPlace挖掘車載單片毫米波雷達的Doppler Velocity和RCS兩種測量物理信號,并使用深度學(xué)習(xí)網(wǎng)絡(luò)提取點云的時間和空間信息,為每一幀點云生成一個具有強區(qū)分度的全局描述子。
下面分別介紹AutoPlace三個模塊的功能和效果:
1. DPR(Dynamic Points Removal)
動態(tài)點云不屬于靜態(tài)環(huán)境特征,因此我們借助于雷達測量的物體Doppler Velocity來進行動態(tài)點云去除。具體來說,(1)雷達靜止時,我們直接過濾Doppler Velocity大于設(shè)定閾值的點云;(2)雷達運動時,我們使用正弦曲線擬合物體位置角-Doppler Velocity曲線,擬合外點即被視為動態(tài)點并濾除。(下圖中紅色點為識別出的動態(tài)點)

2. SE+TE(Spatial Encoder + Temporal ?Encoder)
我們將點云俯視圖轉(zhuǎn)換成圖像,然后使用多層CNN提取圖像空間特征。此外,我們認為雷達的時間信息也有助于提升場景可識別度,因此將連續(xù)的三張CNN特征圖輸入到單層LSTM中,得到最終的點云全局描述子。

3. RCSHR(RCS Histogram Reranking)
RCS是主要由物體本身材料特性和反射角決定的物理量。在推理階段,我們進一步提取點云的RCS的直方圖特征來對取回樣本進行重排。

我們在nuScenes數(shù)據(jù)集上進行了實驗,相關(guān)的數(shù)據(jù)集和算法代碼均已開源:
項目地址:https://ramdrop.github.io/assets/pages/AutoPlace/AutoPlace_customized.html
代碼地址:
Code:https://github.com/ramdrop/AutoPlace
獨家重磅課程!
1、機器人導(dǎo)航運動規(guī)劃:?機器人核心技術(shù)運動規(guī)劃:讓機器人想去哪就去哪!
2、詳解Cartographer:谷歌開源的激光SLAM算法Cartographer為什么這么牛X?
3、深度學(xué)習(xí)三維重建?詳解深度學(xué)習(xí)三維重建網(wǎng)絡(luò):MVSNet、PatchMatchNet、JDACS-MS
4、三維視覺基礎(chǔ)?詳解視覺深度估計算法(單/雙目/RGB-D+特征匹配+極線矯正+代碼實戰(zhàn))
5、視覺SLAM必備基礎(chǔ)?SLAM的第一個實踐,最適合學(xué)哪個開源框架 ?
6、?VINS:Mono+Fusion?SLAM面試官:看你簡歷上寫精通VINS,麻煩現(xiàn)場手推一下預(yù)積分!
7、VIO進階:ORB-SLAM3(單/雙目/RGBD+魚眼+IMU緊耦合+多地圖+閉環(huán))獨家70+講全部上線!
8、圖像三維重建課程:視覺幾何三維重建教程(第2期):稠密重建,曲面重建,點云融合,紋理貼圖
9、重磅來襲!基于LiDAR的多傳感器融合SLAM 系列教程:LOAM、LeGO-LOAM、LIO-SAM
10、系統(tǒng)全面的相機標定課程:單目/魚眼/雙目/陣列 相機標定:原理與實戰(zhàn)
鏈接:ICRA2022 | 愛丁堡&牛津&利物浦大學(xué)聯(lián)合開源AutoPlace:車載單片毫米波雷達場景識別
https://mp.weixin.qq.com/s/vCoMJBAHdv9nlQLqv7I_Zw
全國最棒的SLAM、三維視覺學(xué)習(xí)社區(qū)↓
鏈接:ICRA2022 | 愛丁堡&牛津&利物浦大學(xué)聯(lián)合開源AutoPlace:車載單片毫米波雷達場景識別
https://mp.weixin.qq.com/s/vCoMJBAHdv9nlQLqv7I_Zw
技術(shù)交流微信群
歡迎加入公眾號讀者群一起和同行交流,目前有SLAM、三維視覺、傳感器、自動駕駛、計算攝影、檢測、分割、識別、醫(yī)學(xué)影像、GAN、算法競賽等微信群,請?zhí)砑游⑿盘?chichui502 或掃描下方加群,備注:”名字/昵稱+學(xué)校/公司+研究方向“。請按照格式備注,否則不予通過。添加成功后會根據(jù)研究方向邀請進入相關(guān)微信群。請勿在群內(nèi)發(fā)送廣告,否則會請出群,謝謝理解~
投稿、合作也歡迎聯(lián)系:simiter@126.com
小助手鏈接:ICRA2022 | 愛丁堡&牛津&利物浦大學(xué)聯(lián)合開源AutoPlace:車載單片毫米波雷達場景識別
https://mp.weixin.qq.com/s/vCoMJBAHdv9nlQLqv7I_Zw
掃描關(guān)注視頻號,看最新技術(shù)落地及開源方案視頻秀?↓
視頻號鏈接:ICRA2022 | 愛丁堡&牛津&利物浦大學(xué)聯(lián)合開源AutoPlace:車載單片毫米波雷達場景識別
https://mp.weixin.qq.com/s/vCoMJBAHdv9nlQLqv7I_Zw
—? ?版權(quán)聲明? —
本公眾號原創(chuàng)內(nèi)容版權(quán)屬計算機視覺life所有;從公開渠道收集、整理及授權(quán)轉(zhuǎn)載的非原創(chuàng)文字、圖片和音視頻資料,版權(quán)屬原作者。如果侵權(quán),請聯(lián)系我們,會及時刪除