<acronym id="s8ci2"><small id="s8ci2"></small></acronym>
<rt id="s8ci2"></rt><rt id="s8ci2"><optgroup id="s8ci2"></optgroup></rt>
<acronym id="s8ci2"></acronym>
<acronym id="s8ci2"><center id="s8ci2"></center></acronym>
0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

基于自動駕駛汽車記錄的3D激光掃描的SLAM閉環問題討論

3D視覺工坊 ? 來源:古月居 ? 作者:lovely_yoshino ? 2022-10-27 11:08 ? 次閱讀

簡介

我們在之前的博客中討論了一些激光回環檢測的方法,但是基本都是圍繞著點云特征去做的,并未涉足過深度學習的相關方法,之前作者在查找《經典文獻閱讀之—BoW3D》資料時看到了一個比較感興趣的工作《OverlapNet: Loop Closing for LiDAR-based SLAM》,同時這個文章還擁有對應的開源源碼Github,非常適合復現以及學習。

工作重心

同時定位和映射(SLAM)是大多數自主系統所需的基本能力。在本文中,我們討論了基于自動駕駛汽車記錄的3D激光掃描的SLAM閉環問題。

我們的方法利用深度神經網絡,利用從激光雷達數據生成的不同線索來尋找環路閉合。

它估計廣義到距離圖像的圖像重疊,并提供掃描對之間的相對偏航角估計。

基于這些預測,我們處理環路閉合檢測,并將我們的方法集成到現有的SLAM系統中,以改善其映射結果。

簡單來說,作者通過深度學習完成點云轉換為影像,然后做回環檢測, 輸出Overlap和yaw的操作步驟,文中指出,本文的主要創新點有:

能夠利用多個線索,不需提前知道兩個雷達掃描的相對位姿,只利用范圍、法向量、強度和語義等線索,使用深度神經網絡直接估計兩個激光雷達掃描的重疊率,以及相對偏航角。

結合里程計信息和重疊率預測實現閉環的檢測、修正,可以檢測到的閉環整合到現有SLAM系統中,可以提高整體位姿估計的結果,產生全局一致的地圖。

無需先驗位姿信息,解決在自動駕駛中3D LiDAR SLAM 的閉環檢測問題,使用產生正確掃描匹配結果的OverlapNet網絡預測初始化ICP

詳細算法

2.1 Overlap的概念

作者認為直接對比兩個點云之間的距離不夠精確,因為會受漂移的影響。

因此提出用重疊率來代替距離檢測回環。具體思路是由影像的overlap中來,要成功匹配兩個圖像并計算它們的相對姿態,圖像必須重疊。

這可以通過將重疊百分比定義為第一圖像中的像素的百分比來量化,該像素可以在沒有遮擋的情況下成功地投影回第二圖像中。

請注意,該度量不是對稱的:如果圖像對存在較大的尺度差異。

例如,一幅圖像顯示一堵墻,另一幅顯示該墻周圍的許多建筑物,則第一到第二幅圖像的重疊百分比可能較大,而第二到第一幅圖像的交疊百分比較低。

在本文中,我們使用了距離圖像重疊的思想,明確地利用了距離信息

8c57625a-4576-11ed-96c9-dac502259ad0.png

對于環路閉合,重疊百分比的閾值可用于決定兩個激光雷達掃描是否在同一位置和/或環路閉合。

對于環路閉合,這種測量可能比一對掃描記錄位置之間的常用距離更好,因為位置可能會受到漂移的影響,因此不可靠。

重疊預測與相對姿勢無關,因此可用于查找環路閉合,而無需知道掃描之間的正確相對姿勢。

2.2 激光雷達掃描對之間重疊的定義

8c85df40-4576-11ed-96c9-dac502259ad0.png8cb5aa86-4576-11ed-96c9-dac502259ad0.png

簡單來說就是將兩個點云轉化為二維圖并且坐標系對齊,如果兩個坐標差小于閾值記為1,否則為零,求和再除以兩個圖中像素較小的那個,作者想用這個等式建立訓練集。

對于旋轉,作者選擇旋轉多個角度,用最大重疊值代表最終重疊值。

2.3 網絡結構

下圖描述了所提出的重疊網絡的概述。我們利用了多個線索,這些線索可以從單個激光雷達掃描中生成,包括深度、法線、強度和語義類概率信息。

深度信息存儲在由一個通道組成的范圍圖R中。我們使用頂點映射的鄰域信息來生成法線映射N,它有三個通道編碼法線坐標。

我們直接從傳感器獲得強度信息,也稱為緩解,并使用強度信息為單通道強度圖I。使用RangeNet++計算逐點語義類概率,我們將其表示為語義圖S。

RangeNet++提供20個不同類的概率。為了提高效率,我們使用主成分分析將20維RangeNet++輸出縮減為壓縮的三維向量。

信息被組合成一個大小為64×900×D64×900×D的輸入張量,其中64900是輸入的高度和寬度,$D$取決于使用的數據類型.

8ce9b0c4-4576-11ed-96c9-dac502259ad0.png

這里沒有特別仔細去研究,具體就是由兩個共享權重的Legs和由Legs生成的相同特征體積對的Head組成。

進一步說這個模型的作用就是將深度圖,向量圖,強度圖,還用RangeNet++做了個語義圖一起作為輸入。

一個輸出是角度特征向量,一個輸出是兩次掃描之間的重疊率。

8d00c44e-4576-11ed-96c9-dac502259ad0.png8d32d52e-4576-11ed-96c9-dac502259ad0.png

同時使用基于surfel的映射系統SuMa作為的SLAM的 pipeline,并將OverlapNet集成到SuMa中,以取代其原始的啟發式環路閉合檢測方法。

所以說最后就是SuMa+OverlapNet的集合完成的。

8d5eaf0a-4576-11ed-96c9-dac502259ad0.png





審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • SLAM
    +關注

    關注

    22

    文章

    398

    瀏覽量

    31617
  • 激光掃描
    +關注

    關注

    0

    文章

    104

    瀏覽量

    11370

原文標題:經典文獻閱讀之—OverlapNet

文章出處:【微信號:3D視覺工坊,微信公眾號:3D視覺工坊】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    揭秘自動駕駛:未來汽車的感官革命,究竟需要哪些超級傳感器?

    ,激光雷達技術受到極大關注,被譽為“激光雷達元年”,凸顯了傳感器在自動駕駛中的重要性。那么,自動駕駛汽車究竟需要哪些傳感器呢?
    的頭像 發表于 05-31 09:14 ?106次閱讀

    頭盔3D掃描逆向工程3d建模抄數測繪服務-CASAIM中科廣電

    3D掃描
    中科院廣州電子
    發布于 :2024年04月12日 14:03:01

    未來已來,多傳感器融合感知是自動駕駛破局的關鍵

    的架構,預計未來許多智能駕駛團隊都會引入“占用網絡”來提升系統能力。多維像素的應用前景非常廣闊。昱感微的融合感知技術+BEV +Transformer+占用網格有望成為L3/L4級自動駕駛最優的落地方案。 昱感微電子融合感知平
    發表于 04-11 10:26

    Waymo自愿召回444輛自動駕駛汽車 L4的自動駕駛還有很多路要走

    近日,谷歌旗下的自動駕駛部門Waymo自愿召回了444輛自動駕駛汽車,原因是其軟件可能無法準確預測拖曳車輛的運動軌跡
    的頭像 發表于 02-26 10:22 ?776次閱讀
    Waymo自愿召回444輛<b class='flag-5'>自動駕駛</b><b class='flag-5'>汽車</b> L4的<b class='flag-5'>自動駕駛</b>還有很多路要走

    如何搞定自動駕駛3D目標檢測!

    可用于自動駕駛場景下基于圖像的3D目標檢測的數據集總結。其中一些數據集包括多個任務,這里只報告了3D檢測基準(例如KITTI 3D發布了超過40K的圖像,其中約15K用于
    發表于 01-05 10:43 ?187次閱讀
    如何搞定<b class='flag-5'>自動駕駛</b><b class='flag-5'>3D</b>目標檢測!

    LabVIEW開發自動駕駛的雙目測距系統

    LabVIEW開發自動駕駛的雙目測距系統 隨著車輛駕駛技術的不斷發展,自動駕駛技術正日益成為現實。從L2級別的輔助駕駛技術到L3級別的受條件
    發表于 12-19 18:02

    【KV260視覺入門套件試用體驗】八、VITis AI自動駕駛多任務執行MultiTask V3

    d58cbda2-97976be7__640x360.avi MultiTask V3 旨在同時執行自動駕駛場景中的不同任務,同時實現優異的性能和效率。這些任務包括對象檢測、分 割、車道檢測、可行駛區域分割和深度估算,這些
    發表于 09-26 16:43

    一文通過AEC-Q102車規級芯片測試認證了解激光雷達核心技術及行業格局

    13625289200 總結 我們認為,以特斯拉為代表的造車新勢力在駕駛上給消費者帶來了更“智能化”的體驗,也將引領汽車行業L3 級及以上自動駕駛的加速落地,而
    發表于 09-19 13:35

    汽車自動駕駛現狀及挑戰

    可以授權部分控制權給系統管理,某些功能可以自動進行。L2:半自動駕駛。人類駕駛員和汽車來分享控制權,駕駛員在某些預設環境下可以不操作
    的頭像 發表于 08-19 08:30 ?574次閱讀
    <b class='flag-5'>汽車</b><b class='flag-5'>自動駕駛</b>現狀及挑戰

    低成本3D掃描儀機械部分設計中。#3d打印 #3d掃描 #3d建模 #3d #fusion

    3D掃描
    學習電子知識
    發布于 :2023年07月03日 20:13:56

    新能源汽車自動駕駛的六個級別

    新能源汽車自動駕駛是指搭載自動駕駛技術的電動汽車。隨著人工智能和傳感器技術的進步,越來越多的新能源汽車制造商積極開發和推出
    的頭像 發表于 06-28 17:04 ?1731次閱讀

    LiDAR如何為自動駕駛汽車提供關鍵距離傳感

    如果您正在設計自動駕駛汽車應用,您就會知道 LiDAR(光檢測和測距)的重要性。LiDAR 是執行自動駕駛汽車距離傳感的關鍵光學技術,是高級駕駛
    的頭像 發表于 06-28 10:47 ?699次閱讀
    LiDAR如何為<b class='flag-5'>自動駕駛</b><b class='flag-5'>汽車</b>提供關鍵距離傳感

    CASAIM IM自動3d掃描儀電視機背板外觀掃描自動測量尺寸設備

    3D掃描
    中科院廣州電子
    發布于 :2023年06月25日 10:23:23

    自動駕駛汽車如何工作 有什么好處

    如今,自動駕駛汽車已成為一個熱門話題,理由很充分:無人駕駛汽車可能會帶來自工業革命以來最大的社會革命,而且似乎 每個人都在參與其中。 從有關 Apple
    發表于 06-06 14:18 ?0次下載
    <b class='flag-5'>自動駕駛</b><b class='flag-5'>汽車</b>如何工作 有什么好處

    自動駕駛3D點云語義分割數據標注

    自動駕駛環境感知系統中,如何獲取高精度實時路況數據,是決定自動駕駛系統行車安全的關鍵。 目前主流的兩種感知技術路徑“純視覺”與“高精地圖+激光雷達”中,由于激光雷達采集的
    發表于 06-06 09:48 ?3次下載
    <b class='flag-5'>自動駕駛</b><b class='flag-5'>3D</b>點云語義分割數據標注
    亚洲欧美日韩精品久久_久久精品AⅤ无码中文_日本中文字幕有码在线播放_亚洲视频高清不卡在线观看
    <acronym id="s8ci2"><small id="s8ci2"></small></acronym>
    <rt id="s8ci2"></rt><rt id="s8ci2"><optgroup id="s8ci2"></optgroup></rt>
    <acronym id="s8ci2"></acronym>
    <acronym id="s8ci2"><center id="s8ci2"></center></acronym>