0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

多傳感器融合技術(shù)的應(yīng)用方案

雙目立體視覺 ? 來源:雙目立體視覺 ? 作者:雙目立體視覺 ? 2022-03-25 15:40 ? 次閱讀

“INDEMIND:隨著機器人的應(yīng)用領(lǐng)域不斷拓展,對機器人的環(huán)境感知能力的要求也在不斷提升,而要解決環(huán)境感知問題,傳感器技術(shù)則是最重要的應(yīng)用支撐技術(shù)之一,它對于機器人的意義亦如人眼對于人,但與人眼不同的是,它的構(gòu)成主要由傳感器和算法組成,并伴隨著機器人發(fā)展,已從單傳感器向多傳感器融合迭代。”

由于機器人不斷滲透到各行各業(yè),面對的外部環(huán)境越來越復(fù)雜,對機器人的精度、穩(wěn)定性、智能化提出了新的要求,而單傳感器或采用多個(種)傳感器卻僅是從多個側(cè)面孤立地獲取目標信息的方式,前者不僅效率較低下,且獲取的信息量有限,而后者不斷增加傳感器的做法,更會增加系統(tǒng)的復(fù)雜度,對平臺算力要求提高,且割斷了各傳感器信息間的內(nèi)在聯(lián)系,丟失了信息經(jīng)有機組合后可能蘊含的深層有效信息,造成信息資源浪費,甚至可能導(dǎo)致決策失誤。

在多重因素影響下,發(fā)展多傳感器融合技術(shù)便表現(xiàn)出了它的必然性。事實上,多傳感器融合技術(shù)從字面上可知并非另辟蹊徑,而是在采用多個(種)傳感器的基礎(chǔ)上,進一步開拓和完善而來,原理是借助算法對感知相關(guān)要素信息的冗余或互補信息進行分析、建模、解算、融合、估計和補償,最終輸出更為準確、豐富、可靠的信息。

多傳感器融合技術(shù)的應(yīng)用,對于系統(tǒng)的容錯能力、信息精度、信息的可信度&豐富度都有了明顯提升,這對于機器人的意義無比重要。目前,市面上多傳感器融合技術(shù)多是以激光雷達為主導(dǎo)的技術(shù)方案,并根據(jù)架構(gòu)組成,又主要分為兩種。

一種是以單線激光雷達主導(dǎo)+IMU+里程計或其它傳感器的融合方案,采用松/緊耦合方式,有著簡單、成熟的技術(shù)優(yōu)勢,是市面上較為常見的融合技術(shù)方案,然而這類方案的缺點在于,一是環(huán)境適應(yīng)能力較差,對于環(huán)境特征單一的長走廊等場景,誤差較高,容易偏離路徑,二是重定位能力差,運行過程中一旦丟失位置,難以重新定位。

另一種是以多線激光雷達為主導(dǎo)的融合方案,與其它傳感器采用松/緊耦合方式組合,得益于多線激光雷達,可獲取到環(huán)境物體的三維信息,使得這類方案的環(huán)境感知能力得到顯著提升,且在功能表現(xiàn)上,同樣有著激光雷達精度高和穩(wěn)定性高的特點,然而需要提到的是,多線激光雷達在保留了傳統(tǒng)優(yōu)勢的同時,也有著激光雷達類似的局限性,且一旦出現(xiàn)故障,會導(dǎo)致整個系統(tǒng)宕機,目前這類方案主要應(yīng)用于大多數(shù)商用機器人,不過其高昂的成本也讓大多數(shù)企業(yè)難以承受。

因此,在此背景下,行業(yè)一方面在進一步完善激光雷達方案的同時,另一方面也在探索視覺方案。目前,以視覺為主導(dǎo)的融合技術(shù)方案,在市面上雖然還相對較少,但隨著計算機視覺技術(shù)多年來的發(fā)展,已經(jīng)有了成熟方案,INDEMIND的多傳感器融合技術(shù)便是其中之一。

與激光雷達方案不同,INDEMIND多傳感器融合技術(shù)在實現(xiàn)上,設(shè)計了以視覺傳感器為主導(dǎo)的標準化、模塊化的多傳感器融合架構(gòu),通過遵循INDEMIND的標準定義接口,可快速加入IMU、里程計、激光、GNSS等多種傳感器,實現(xiàn)“積木式”加裝,結(jié)合雙目立體視覺技術(shù),能夠?qū)崿F(xiàn)高精度、高穩(wěn)定性、低成本的3D環(huán)境感知,走出了不同于激光雷達方案的All IN ONE新路徑。

眾多周知,信息量豐富是視覺的優(yōu)勢,但也導(dǎo)致對算力要求的大幅提升。由于需要處理的環(huán)境信息量巨大,對于平臺的算力要求極高,同時視覺受環(huán)境光線影響嚴重,如何解決這些難題,是走通視覺方案的關(guān)鍵。

因此,INDEMIND在研發(fā)過程中,對它們進行了長期針對性解決。

? 降低算力要求

算法&硬件優(yōu)化:采用增量優(yōu)化的方式,分段處理,并在區(qū)段間建立先驗信息,有效降低了平臺計算壓力,提高計算效率。

硬件加速:在硬件上,對于視覺處理采用neon加速、GPU加速、DSP加速等方式,提升計算性能,降低算力要求。

? 提高性能

傳感器更豐富:基于INDEMIND多傳感器融合架構(gòu),可融合超過4種以上的傳感器,通過緊耦合方式組合,對于環(huán)境的容忍度更高,能夠保障在部分傳感器出現(xiàn)異常的同時,系統(tǒng)仍能保持正常運行,提高魯棒性。

誤差補償:為了提升精度,INDEMIND對系統(tǒng)中的視覺、IMU、里程計等每個傳感器都進行了實時誤差建模、估計及補償,能夠有效保障在實時運行過程中的精度和穩(wěn)定性。

野值判定與剔除:由于傳感器較多,視覺、激光、里程計、IMU等不同傳感器產(chǎn)生的噪點,對于系統(tǒng)的穩(wěn)定性和精度影響較大,因此,INDEMIND對于各個傳感器的數(shù)據(jù),進行了野值判定及剔除,進一步增進系統(tǒng)對于原始傳感器數(shù)據(jù)的容錯能力,提升最終的穩(wěn)定性和精度。

與此同時,基于INDEMIND立體視覺技術(shù),可獲取豐富的3D環(huán)境信息,配合上層決策,對于實現(xiàn)智能避障、路徑規(guī)劃、人機交互提供了必要的前提條件。

目前,經(jīng)過長期驗證,搭載INDEMIND多傳感器融合技術(shù)的測試機器人,定位精度可達厘米級,<5cm(RMS),達到激光融合方案的同等精度水平。在智能避障方面,能夠?qū)崿F(xiàn)三維立體避障,精度<1%,結(jié)合INDEMIND智能決策引擎技術(shù),可實現(xiàn)策略化避障,提升安全決策水平。同時,在交互方面,基于智能決策引擎技術(shù),能夠根據(jù)指令實現(xiàn)目標跟蹤、指定區(qū)域作業(yè)等多種個性化功能,提升機器人人機、物機交互能力。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2542

    文章

    50302

    瀏覽量

    750281
  • 測試
    +關(guān)注

    關(guān)注

    8

    文章

    5046

    瀏覽量

    126238
  • 機器人
    +關(guān)注

    關(guān)注

    210

    文章

    28011

    瀏覽量

    205602
收藏 人收藏

    評論

    相關(guān)推薦

    藍牙數(shù)據(jù)模塊連接方案傳感器更加智能

    與管理,成為了一個亟待解決的難題。藍牙技術(shù),尤其是其連接方案,正逐步成為解決這一挑戰(zhàn)的關(guān)鍵,以下安朔科技為大家介紹一下傳感器藍牙模組連接
    的頭像 發(fā)表于 08-15 16:47 ?590次閱讀
    藍牙數(shù)據(jù)模塊<b class='flag-5'>多</b>連接<b class='flag-5'>方案</b>讓<b class='flag-5'>傳感器</b>更加智能

    基于物理參數(shù)數(shù)據(jù)融合和先進人工智能算法的鋰電池?zé)崾Э乇O(jiān)測傳感器

    基于物理參數(shù)數(shù)據(jù)融合和先進人工智能算法的鋰電池?zé)崾Э乇O(jiān)測傳感器是多種方案中的優(yōu)選項!是一種快速、準確、可靠、應(yīng)用廣泛的傳感
    的頭像 發(fā)表于 06-18 17:19 ?593次閱讀
    基于<b class='flag-5'>多</b>物理參數(shù)數(shù)據(jù)<b class='flag-5'>融合</b>和先進人工智能算法的鋰電池?zé)崾Э乇O(jiān)測<b class='flag-5'>傳感器</b>

    傳感器融合如何使 AMR 在工廠車間內(nèi)高效移動

    依賴單一傳感器技術(shù)傳感器融合,或簡稱“傳感器融合
    的頭像 發(fā)表于 05-05 09:34 ?624次閱讀
    <b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>如何使 AMR 在工廠車間內(nèi)高效移動

    感科技攜自研的光學(xué)傳感器芯片及產(chǎn)品亮相深圳傳感器展覽會

    4月14日-16日,感科技攜自主研發(fā)的光學(xué)傳感器芯片及應(yīng)用產(chǎn)品展示套件參展深圳傳感器展覽會,此次參展不僅是對感科技光學(xué)傳感器芯片
    的頭像 發(fā)表于 04-19 09:10 ?490次閱讀

    未來已來,傳感器融合感知是自動駕駛破局的關(guān)鍵

    駕駛的關(guān)鍵的是具備人類的感知能力,傳感器融合感知正是自動駕駛破局的關(guān)鍵。昱感微的雷視一體傳感器融合
    發(fā)表于 04-11 10:26

    智慧燈桿合一傳感器(創(chuàng)新設(shè)計,實現(xiàn)多功能融合

      智慧燈桿合一傳感器的最大特點就是創(chuàng)新的設(shè)計,將多種功能集成在一個燈桿上。它不僅僅能夠提供照明服務(wù),還能夠?qū)崟r監(jiān)測空氣質(zhì)量、溫度、濕度等環(huán)境數(shù)據(jù),甚至能夠感知人流、車流等信息。這種多功能融合的設(shè)計,使得城市管理者可以更加方便
    的頭像 發(fā)表于 03-29 15:25 ?300次閱讀

    區(qū)飛行時間(ToF)傳感器的特點

    ???????? VL53L5、VL53L7、VL53L8都是基于ST的FlightSense技術(shù)區(qū)飛行時間(ToF)傳感器。
    的頭像 發(fā)表于 02-25 09:41 ?1024次閱讀
    <b class='flag-5'>多</b>區(qū)飛行時間(ToF)<b class='flag-5'>傳感器</b>的特點

    深度解析:傳感器融合SLAM技術(shù)全景剖析

    SLAM中,先驗值通常從一系列傳感器獲得,比如慣性測量單元(IMU)和編碼,而觀測值則是通過GPS、相機和激光雷達等其他傳感器獲取的,后驗值是融合了先驗信息與觀測數(shù)據(jù)之后得到的結(jié)果,
    發(fā)表于 02-23 11:31 ?2415次閱讀
    深度解析:<b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>SLAM<b class='flag-5'>技術(shù)</b>全景剖析

    康謀技術(shù) | 自動駕駛傳感器數(shù)據(jù)融合方法

    近年來,深度學(xué)習(xí)技術(shù)在涉及高維非結(jié)構(gòu)化數(shù)據(jù)領(lǐng)域展現(xiàn)出了最先進的性能,如計算機視覺、語音、自然語言處理等方面,并且開始涉及更大、更復(fù)雜的模態(tài)信息問題。 不同傳感器在進行同一實驗任務(wù)時,針對產(chǎn)生的同一
    的頭像 發(fā)表于 01-24 18:02 ?500次閱讀
    康謀<b class='flag-5'>技術(shù)</b> | 自動駕駛<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>數(shù)據(jù)<b class='flag-5'>融合</b>方法

    Spring Boot和飛騰派融合構(gòu)建的農(nóng)業(yè)物聯(lián)網(wǎng)系統(tǒng)-改進自適應(yīng)加權(quán)融合算法

    接上集: 上次實驗我們已經(jīng)完成傳感器融合算法的設(shè)計,本次實驗注意完成改進自適應(yīng)加權(quán)融合算法設(shè)計。 一、背景 通過利用溫室控制系統(tǒng)來管理溫室內(nèi)的各種設(shè)備并控制溫度、濕度,可以更好地探索
    發(fā)表于 01-06 12:18

    【飛騰派4G版免費試用】Spring Boot和飛騰派融合構(gòu)建的農(nóng)業(yè)物聯(lián)網(wǎng)系統(tǒng)-數(shù)據(jù)融合算法篇

    ,在農(nóng)田中使用傳感器融合檢測將會是一個很好的方案。 二、理論依據(jù) 由于自適應(yīng)加權(quán)融合算法在實際應(yīng)用中具有
    發(fā)表于 12-26 20:59

    傳感器數(shù)據(jù)融合算法python代碼

    傳感器數(shù)據(jù)融合算法是一種將多個傳感器收集到的數(shù)據(jù)合并到一個一致和準確的表示中的技術(shù)。這種算法的目的是提高數(shù)據(jù)精確性和可靠性,從而增強對環(huán)境或目標的理解和控制。在本文中,我們將詳細討論
    的頭像 發(fā)表于 12-15 10:28 ?1263次閱讀

    傳感器數(shù)據(jù)融合算法最關(guān)鍵的是

    傳感器數(shù)據(jù)融合是一個綜合處理傳感器數(shù)據(jù)的過程,以提高對環(huán)境或目標的感知和解釋能力。在這個過程中,各種數(shù)據(jù)
    的頭像 發(fā)表于 12-13 11:00 ?537次閱讀

    上海微系統(tǒng)所在無人系統(tǒng)的傳感融合技術(shù)方面取得進展

    類人多感官的傳感融合是智能無人系統(tǒng)感知環(huán)境、完成決策的重要手段。其中,通過多傳感器校準獲取傳感器間的外部相對關(guān)系,是保障后續(xù)
    的頭像 發(fā)表于 12-04 16:09 ?618次閱讀
    上海微系統(tǒng)所在無人系統(tǒng)的<b class='flag-5'>多</b><b class='flag-5'>傳感</b><b class='flag-5'>融合</b><b class='flag-5'>技術(shù)</b>方面取得進展

    基于隨機有限集的傳感器多目標跟蹤技術(shù)

    本文綜述了基于隨機有限集方法的傳感器多目標跟蹤的最新研究進展。在傳感器濾波中起基礎(chǔ)性作用的融合方法可分為數(shù)據(jù)層多目標測量
    發(fā)表于 12-04 10:39 ?406次閱讀
    基于隨機有限集的<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>多目標跟蹤<b class='flag-5'>技術(shù)</b>