女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

基于SupSLAM視覺慣性SLAM方法在無人機中的應用研究

jt_rfid5 ? 來源:新機器視覺 ? 作者:新機器視覺 ? 2022-10-19 17:35 ? 次閱讀

近年來,使用機器學習技術進行特征提取的基于調制解調器特征的SLAM越來越受到關注,并有望在幾乎所有機器人工作環境中超越傳統方法。這種方法利用經過訓練的網絡來學習關鍵點,從而增強可視化SLAM數據關聯的魯棒性?,F代基于特征的SLAM也有望為實時映射生成可靠的感知圖,因為基于學習的特征點更具可重復性和均勻分布性。此外,這些局部特征可以用作神經對應網絡的輸入,以消除異常值,從而使姿態估計變得更加準確。另一方面,由于資源有限,無人機上的SLAM經常對計算構成限制。在這種情況下,基于特征的SLAM更相關,因為提取的興趣點可以稍后用于與分割和對象檢測相關的任務。

因此,提取特征點的方法在SLAM中起著關鍵作用。我們引入了一種名為SupSLAM的視覺慣性SLAM方法,該方法基于一種稱為超級點的新特征點的使用。這些特征點通過深度神經網絡從SLAM前端的輸入圖像中提取的。我們的SLAM前端只需要一個帶有IMU作為輸入的立體攝像頭。姿態估計由多狀態約束卡爾曼濾波器(MSCKF)進行,而軌跡可靠性則由后端運行的圖形優化過程維護。

系統架構

圖1 中顯示了表示我們的SLAM系統的圖表。該系統使用立體攝像頭作為輸入來提取環境特征。該相機配有IMU,用于測量線性加速度和角速度。然后通過前端和后端模塊處理來自輸入設備的數據。

9e79bfa8-4e0b-11ed-a3b6-dac502259ad0.png

圖1系統概述

前端從輸入數據中提取特征點,然后在左右攝像頭之間匹配它們以獲取深度信息。然后將這些信息提供給多態約束MSCKF,以估計無人機的3D姿態。另一方面,后端跟蹤關鍵幀中的要素,以執行映射一致性和軌跡估計的循環閉包過程。因此,前端表現為視覺慣性里程計(VIO),以提供無人機姿勢的實時估計,而后端則跟蹤并隨時間調整姿勢。

SLAM 中數據關聯的超級點

SuperPoint是一個完全卷積的神經網絡,它在單個正向傳遞和運行中計算2D特征點位置和描述符。在我們的工作中,我們只考慮特征點,以降低計算成本并保持匹配結果的一致性。所用超級點的體系結構如圖 2所示。

9e944562-4e0b-11ed-a3b6-dac502259ad0.jpg

圖2超級點的模型架構

實驗設置

實驗數據是從框架尺寸為40cm x40cm的四軸飛行器中收集的。IMU更新速率為200 Hz。立體相機的基線為7厘米,分辨率為752x480,速度為每秒20幀。SLAM系統在C++中使用OpenVINS框架實現。OpenCV和庫用于圖像處理。為了實時性能,要跟蹤的視覺特征數限制為400個,當活動點數降至300以下時,將添加新的特征點。預訓練的深度神經網絡用于以752x480的分辨率從輸入圖像中提取特征。MSCKF中的時間窗口設置為3秒。在后端,每隔1.2米向姿勢圖添加新的關鍵幀。

數據準備

真實數據和合成數據都用于實驗。真實數據包括EuRoC數據集中名為MH3,MH4和MH5的三個最復雜的序列,其中無人機沿著機房飛行。合成數據包括兩個場景,分別代表一個農村農場和一個城市地區,這些場景是由我們從AirSim開發的工具集生成的,如圖3所示。

9ea79806-4e0b-11ed-a3b6-dac502259ad0.jpg

圖3用于實驗的農村農場和城市地區的綜合場景

評價指標

我們使用兩個指標進行性能評估,包括絕對軌跡誤差(ATE)和相對軌跡誤差(RTE)。計算ATE的方法是首先將估計的軌跡與地面實況對齊,然后測量它們之間的差異,如圖4a所示。RTE的計算方法是將估計的軌跡劃分為段dk然后將每個線段與地面實況軌跡對齊,以計算誤差,如圖4b所示。

9eb34930-4e0b-11ed-a3b6-dac502259ad0.jpg

圖4評估指標的圖示(a) 絕對軌跡誤差和(b) 相對軌跡誤差

SLAM結果

圖5 顯示了SuperPoint在三個場景中檢測到的特征點,包括城市地區、農村農場和機房,具有兩種不同的設置,即100個和400個特征點??梢钥闯觯锹?,邊緣,顏色變化等特征被很好地檢測到。此外,檢測到的特征分布在圖像中,因此算法對某些對象的依賴性較小。

9ec55ea4-4e0b-11ed-a3b6-dac502259ad0.jpg

圖5超級點檢測到的特征點圖6顯示了檢測到的特征點在左右圖像之間的對應關系??梢钥闯觯蠖鄶堤卣鼽c都正確匹配,這意味著提取的深度信息是可靠的。

9ed087ca-4e0b-11ed-a3b6-dac502259ad0.jpg

圖6超級點檢測到的特征點

在不同時間捕獲的兩個圖像幀之間的特征點的跟蹤Δt=0.3s如圖7a 所示。由于檢測到的特征點分布在圖像中,因此幀之間的共同特征點的數量得到了很好的維護,這對于穩定的SLAM非常重要。

9ed9b598-4e0b-11ed-a3b6-dac502259ad0.jpg

圖7使用時差捕獲(a) FAST和(b)兩幀中的超級點的跟蹤結果Δt=0.3s

圖 8 顯示了LoopF數據集的SLAM結果,其中無人機在農村農場上空飛行兩輪??梢钥闯?,最終估計的軌跡(紅線)即使在近500米的長距離上也能很好地跟蹤地面實況軌跡(黃線)。

9ee92b40-4e0b-11ed-a3b6-dac502259ad0.jpg

圖8LoopF數據集的無人機軌跡包括地面實況軌跡(黃線)、前端估計(綠線)和后端估計(紅線)

結果比較

為了進一步評估我們方法的性能,我們與OpenVINS 進行了比較,OpenVINS是一種最先進的SLAM系統,使用FAST進行特征提取。圖9顯示了FAST檢測到的特征點。與SuperPoint不同,這些特征點集中在某些對象(如植物、房屋或機器)周圍。因此,當物體移出場景時,不同時間拍攝的圖像幀之間的共同特征點數量顯著減少,如圖7b所示。這個問題反過來又會影響SLAM的結果。

9ef3d086-4e0b-11ed-a3b6-dac502259ad0.jpg

圖9FAST檢測到的特征點

為了評估SupSLAM的性能,我們進行了許多實驗,并與真實和合成數據集進行了比較。結果驗證了我們提出的無人機系統的有效性和有效性。

審核編輯:郭婷

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 濾波器
    +關注

    關注

    162

    文章

    8058

    瀏覽量

    180886
  • 調制解調器
    +關注

    關注

    3

    文章

    872

    瀏覽量

    39422
  • 機器學習
    +關注

    關注

    66

    文章

    8488

    瀏覽量

    134011

原文標題:【光電智造】一種強大的視覺慣性SLAM系統SupSLAM釋

文章出處:【微信號:今日光電,微信公眾號:今日光電】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    肇觀電子兩款無人機視覺避障模組量產交付

    無人機的世界里,視覺不僅定義了飛行的邊界,更是智能決策的核心。肇觀電子以其突破性的AI視覺芯片,賦予無人機前所未有的感知與認知能力。
    的頭像 發表于 05-06 15:11 ?276次閱讀

    科達嘉電感無人機系統的應用

    隨著國家對低空經濟的大力支持以及無人機系統技術的快速發展,無人機農業植保、應急救援、物流運輸、旅游攝影、工業等領域的應用日益成熟。而電感器作為無人機系統
    的頭像 發表于 03-08 10:00 ?793次閱讀

    微秒級實時無人機控制的重要性

    隨著低空經濟和無人機技術的迅速發展,無人機物流運輸、農業監測、軍事偵察等多個領域的應用愈發廣泛。在這些應用,實時通信和控制對無人機的性能
    的頭像 發表于 01-17 14:46 ?330次閱讀

    晶體晶振無人機上的應用

    應用成敗的關鍵因素。 晶體晶振無人機上的應用 FAITHLONG 無人機確保飛行精確執行的過程,不單是飛行的飛行姿態、速度還是高度等參
    的頭像 發表于 01-09 11:37 ?400次閱讀

    舵機無人機的作用

    隨著科技的飛速發展,無人機已經成為現代生活不可或缺的一部分。它們軍事、商業和個人娛樂等多個領域發揮著重要作用。無人機的眾多組件
    的頭像 發表于 01-08 17:46 ?1363次閱讀

    無人機光伏巡檢的具體應用

    無人機光伏巡檢的具體應用 近年來,隨著清潔能源的快速發展,光伏發電作為實現碳中和的重要手段,受到了廣泛關注。然而,光伏電站的運維管理一直是一個復雜且耗時的任務。傳統的人工巡檢方式不僅效率低下,還
    的頭像 發表于 12-12 16:46 ?450次閱讀

    激光雷達無人機的應用實例

    隨著科技的飛速發展,無人機技術已經成為現代工業和科研領域的重要工具。無人機不僅在軍事領域有著廣泛的應用,而且民用領域,如農業、測繪、環境監測、物流配送等方面也發揮著越來越重要的作用。在這些應用
    的頭像 發表于 10-27 10:49 ?1658次閱讀

    無人機滑環的核心特點及其應用分析

    無人機滑環作為無人機系統的關鍵組件,具有獨特的設計要求和性能特點。本文將詳細分析無人機滑環的主要特點,探討其
    的頭像 發表于 09-12 12:26 ?399次閱讀
    <b class='flag-5'>無人機</b>滑環的核心特點及其應用分析

    無人機巡檢系統光伏電站的應用

    范圍有限、安全隱患大等諸多問題。近年來,隨著無人機技術的飛速發展,無人機巡檢系統光伏電站運維的應用日益廣泛,為光伏電站的高效運維開辟了新的路徑。 ??????
    的頭像 發表于 07-08 16:55 ?713次閱讀

    無人機通過什么傳輸信號

    無人機,即無人駕駛飛行器(Unmanned Aerial Vehicle,簡稱UAV),是一種通過遙控或自主飛行的飛行器。無人機軍事、民用、科研等領域有著廣泛的應用。
    的頭像 發表于 07-08 10:16 ?9683次閱讀

    無人機信號傳輸技術的原理及分類

    無人機信號傳輸技術是無人機系統的重要組成部分,它關系到無人機的飛行安全、任務執行效果和數據傳輸質量。 一、無人機信號傳輸技術概述 1.1 無人機
    的頭像 發表于 07-08 10:09 ?5237次閱讀

    無人機干擾器對網絡的影響

    引言 無人機,即無人駕駛飛機,是一種通過遙控或自主飛行的航空器。近年來,無人機技術得到了快速發展,無人機軍事、民用、商業等領域的應用越來越
    的頭像 發表于 07-08 10:01 ?1591次閱讀

    開源項目!用ESP8266 DIY會爬墻的無人機

    的微型電機,這些電機是無鐵芯的,即在轉子沒有金屬芯,無鐵芯電機可以較小的負載下達到較高的轉速。這些電機適用于微型無人機、四旋翼飛機或迷你項目。 螺旋槳 螺旋槳的目的是產生推力和扭矩以保持
    發表于 07-04 09:22

    無人機智能巡檢系統

    ?????? 無人機智能巡檢系統功能模塊 ?????? 隨著科技的不斷發展,無人機已經光伏、風電、農業、城市管理、地質等領域廣泛應用,無人機
    的頭像 發表于 06-18 17:08 ?862次閱讀

    千億級民用無人機市場,酷芯微無線傳輸、視覺處理解決方案搶跑市場

    電子發燒友網報道(文/莫婷婷)當前,中國民用無人機市場規模隨著需求的提升不斷擴大,商產業研究院的數據顯示,2018年,中國民用無人機市場
    的頭像 發表于 05-29 00:10 ?3573次閱讀
    千億級民用<b class='flag-5'>無人機</b>市場,酷芯微無線傳輸、<b class='flag-5'>視覺</b>處理解決方案搶跑市場