論SLAM技術發展趨勢

2021-09-24 05:39:20 字數 2805 閱讀 2106

2023年7月底,深藍學院發起並承辦了「第一屆全國slam技術論壇」。浙江大學章國鋒老師、香港科技大學沈劭劼老師、上海交通大學鄒丹平老師、中科院自動化所申抒含老師在「圓桌論壇:slam技術發展趨勢」上分享了slam技術的趨勢,現將內容整理公布,希望更多slamer受益。

章國鋒:由於我的研究方向更偏向於視覺slam,所以我會從我的角度來講一講slam技術的發展趨勢。

首先,我認為無論是視覺slam、視覺慣導slam、還是其他多感測資訊融合slam,相關理論目前都已經發展到了一定的成熟度。之所以近年來slam被廣泛關注,也是因為它已經在某些領域得到了應用。比如ar領域,google和蘋果分別推出的arcore和arkit。另外,slam技術也被應用於自動駕駛領域。因此,我認為slam的相關理論已經發展得比較成熟。但是,在實際應用中,問題還相當複雜。因此,我們做了很多任務程實際中的系統優化和打磨的相關工作。

另外,從做研究角度來講,很多老師和同學比較關心的是:「我做slam,那麼**該怎麼發?」我認為目前有兩個趨勢可以把握,乙個趨勢是將slam與深度學習相結合。而且,我也認為將slam與深度學習結合更容易有創新性,同時也符合現在的發展趨勢。因此,我認為結合深度學習和slam可以發表一些**。另乙個趨勢是,要使用新的感測器,比如最近新出現的event camera。使用event camera做slam近年來也取得了很多成果。因此,我認為使用新型感測器或者是研究原來沒有被用於slam的多感測器的融合,是乙個很好的研究方向,也相對容易**文。

最後,從產業應用的角度來講,我認為還是存在很多問題的。因為,目前很多結合深度學習的slam系統仍然處於研究階段,距離工程實際應用還有一定的距離,需要我們做更多的研究。

申抒含:我從我的角度出發來講一講slam技術的發展趨勢。

首先,從做研究的角度出發,我認為做slam和三維重建這些幾何視覺方向的研究是非常難入門的。相對於研究deep learning,研究幾何視覺會比較難**文。例如我們課題組的學生,一般要到博士三年級或四年級才能開始寫**,前面幾年都是在打基礎。從發表**的角度來說,做三維視覺相對來說確實難一些、慢一些。但是,我認為這也是乙個機遇。這意味著在這個領域,想要很深入的理解slam是有一定的門檻的,而一旦你通過了這個門檻,你就達到了一定的認知高度,你就擁有了自己的獨門絕技,未來無論是就業還是做研究,都有比較強的競爭力。因此,既然大家今天來參加這個論壇,那麼一定是對三維幾何視覺這個論題感興趣的,我建議大家執著地堅持下去,會有好的結果的。

其次,從應用角度出發,我們當然希望基於視覺的slam和三維重建可以盡快落地、盡快產品化。但是,基於視覺感測器的slam和三維重建有乙個很大的問題,那就是視覺感測器相對於高精度imu、差分gps和高解析度的雷射雷達等感測器來說精度不夠高。同時,隨著無人駕駛汽車、智慧型機械人等應用的不斷推進,使得高精度的imu、差分gps和高解析度的雷射雷達等以前**昂貴、產量很小、很難商用推廣的感測器,正逐漸變得越來越便宜、越來越容易獲取。在這種情況下,視覺感測器所能起到的作用會被一定程度的壓制。比如做無人車,用雷射雷達加高精度的差分gps來做構圖和定位是最傳統、最有效的方式,而基於視覺的方式只能作為乙個補充。但是,反過來想,這也會促進視覺演算法的發展,不斷提高視覺演算法的魯棒性,例如運用deep learning來解決傳統視覺上的一些瓶頸的問題。目前來講,基於視覺感測器的slam,最大的特點是**便宜。影象感測器相對於其他感測器來說,它的**永遠是最低的,因為相機是我們最常見的裝置。在這個前提下,如果我們能夠讓影象感測器在某種程度上替代其它的昂貴裝置或者是輔助昂貴的裝置來完成工作,那麼對於視覺來說也是在未來應用中值得突破的地方。當然,我們還是希望視覺感測器的效能最終能夠接近昂貴的雷射雷達或者是差分gps的效能,從而使它能夠商用推廣。目前來看,這還是有一定距離的,還有很多本質的問題需要我們去努力克服。

沈劭劼:我非常同意申老師所說的做slam是非常苦的這個觀點。大家可能也都是花了兩三年時間來打基礎。但是,我認為這是非常值得的。在我自己的研究組裡面,每個新進來的學生,我都會讓他先手寫bundle adjustment,最多只能用eigen庫,其它的庫都不能用。寫了ba之後,再開始看其它的研究內容。總體來說,我認為這個鍛鍊對他們來說收穫還是比較大的。因為在寫bundle adjustment的過程中,像非線性優化、各種調參技巧、可觀測性問題、前端後端的連線問題、工程實踐技巧、多感測器同步標定等問題,他們都親自解決過一遍。在此之後,當他們遇到真實的工程問題時才會比較游刃有餘。但是,有這麼多知識需要學習,不花這麼多時間也比較難實現,所以基本上就是目前這種狀態。

首先,關於技術方面,因為我是機械人背景,所以我更傾向於研究如何真實解決工程問題,而不是一定要用某一種感測器、研究某乙個問題、或者是一定要基於某一種概念去解決問題。因此,從解決工程問題的角度出發,我更願意把slam問題看作是乙個多感測器融合的問題。本質上,我們需要做的就是把多種感測器的model寫清楚,然後選用某種型別的最小二乘去求解。至於是用單目相機還是雙目相機、還是加gps、加輪子里程計、加imu其實並沒有問題,因為那些感測器的model都做出來了。

其次,我會傾向於跳出純slam這種比較狹窄的定義,而把slam問題當成是乙個機械人的環境感知問題。這個問題包括真正意義上的建圖,並不是指稀疏建圖,也包括對多種不同天氣以及動態環境建立真實的model,也就是simulative model方面的問題,而不能直接去掉動態環境這個因素。

鄒丹平:我從沈老師這裡學到很好的一點,那就是讓學生手寫bundle adjustment。以前我都是讓學生呼叫ceres,以後我也要讓他們手寫乙個bundle adjustment。

舉這樣的乙個例子,是想說明在具體應用場景裡面,我們要先把目標應用搞清楚,然後把後面的問題挖掘好,再去研究如何改進這個slam系統,如何把挖掘到的問題解決好。以問題為導向,可以更好地解決工程實際的問題。

---------------------

原文:

論SLAM技術發展趨勢

2018年7月底,深藍學院發起並承辦了 第一屆全國slam技術論壇 浙江大學章國鋒老師 香港科技大學沈劭劼老師 上海交通大學鄒丹平老師 中科院自動化所申抒含老師在 圓桌論壇 slam技術發展趨勢 上分享了slam技術的趨勢,現將內容整理公布,希望更多slamer受益。章國鋒 由於我的研究方向更偏向於...

ZigBee技術發展趨勢

zigbee技術將朝著開發soc 片上系統 更多規範 與ipv6結合 更廉價 更省電 更快速等方向發展。zigbee應用產品市場的培育和發展也是zigbee技術發展重點方向。zigbee產品應用在國際市場上將會有快速成長的機會,成長的動力來自於zigbee聯盟和業界廠商的大力推廣,更完善的zigbe...

解讀軟體2 0思想框架 把握技術發展趨勢

軟體 開發與人類做過的任何其他工作都不一樣。其他的工作都是思維為工具,以客觀世界為目標,而軟體卻要求人類以計算機為工具來 我們自己的思維。一方面,人們對這樣的事情還很缺乏經驗,另一方面,軟體的規模越來越大,應用越來越廣,在現代社會中扮演的角色越來越重要,因此,我們就必須不斷地加深對軟體的認識,並革新...