0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

圖像的點云是如何拼接在一起的?

新機(jī)器視覺 ? 來源:古月居 ? 作者:月照銀海似蛟龍 ? 2021-07-04 17:05 ? 次閱讀

理解好圖像的點云拼接,需要從相機(jī)的模型說起。理解相機(jī)的成像原理之后,便可更為深刻的理解圖像的點云如何拼接在一起。

首先說下相機(jī)的概念與原理。

相機(jī)概念與原理

相機(jī)的作用:將三維世界中的坐標(biāo)點(單位為米)映射到二維圖像平面(單位為像素)。

通常我們見到的相機(jī)都是針孔相機(jī),但是不是簡單的 針孔,還有透鏡的畸變存在,所以在做圖像處理時要進(jìn)行畸變校正。

由于畸變的存在,我們在使用相機(jī)之前都要進(jìn)行相機(jī)標(biāo)定。

目的就是求出內(nèi)參對于簡單的應(yīng)用求出徑向畸變和切向畸變就夠了。

所謂的外參就是相機(jī)的位姿。

有了外參、內(nèi)參、圖像、深度信息 便可以把圖像中的點,轉(zhuǎn)到世界坐標(biāo)系下,并帶有RGB的顏色。就形成了所謂的點云。

相關(guān)的公式也很好理解 ,就是通過相似三角形的原理。

23eb1154-dbc7-11eb-9e57-12bb97331649.png

注意其中fx 、fy、 cx 、cy也就是相機(jī)的內(nèi)參了。在相機(jī)出廠時會給出。

理解了相機(jī)的概念與原理,來編輯代碼實現(xiàn)下。

Code實現(xiàn)

全部代碼

先放上全部代碼,再進(jìn)行分段講解

代碼講解

poYBAGDhes-Ac1LLAAEtIvo2CAQ223.jpg

讀取對應(yīng)路徑下的彩色圖像、深度圖像、相機(jī)的位姿。

上面說了,有了這三個量再加上相機(jī)內(nèi)參,就可以得到點云。

pYYBAGDheuyAeEIiAAAy3-ecoVY412.jpg

//相機(jī)內(nèi)參

poYBAGDhevaAee5jAABQUA2GHZA654.jpg

傳說中的相機(jī)內(nèi)參

//定義點云使用的格式

聲明pcl的格式創(chuàng)建一個點云,然后開始for循環(huán)處理每一張圖片和對應(yīng)的深度圖片與相機(jī)位姿。

poYBAGDhex2Af6F8AABA6-h5p2A196.jpg


poYBAGDheyyAYrZ5AAAfdiZaiKQ717.jpg



poYBAGDhez-AK4qZAABIxz4NCw4286.jpg


得到要處理的彩色圖像深度圖像對應(yīng)的pose,然后for循環(huán)處理每一個像素。

得到深度信息

通過:

23eb1154-dbc7-11eb-9e57-12bb97331649.png

這個公式得到相機(jī)坐標(biāo)系下的 x,y,z

poYBAGDhe82Ae_HpAAAcQ6kw-oQ038.jpg

相機(jī)坐標(biāo)系下的點通過坐標(biāo)變換轉(zhuǎn)到世界坐標(biāo)系下。

poYBAGDhe9-AFDOCAAB28rxHi7I711.jpg

賦值點云的坐標(biāo)與顏色。

pYYBAGDhe-qAD3h8AAAmI6o-KK4503.jpg

保存成點云文件。

責(zé)任編輯:lq6

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 圖像
    +關(guān)注

    關(guān)注

    2

    文章

    1078

    瀏覽量

    40355
  • 拼接
    +關(guān)注

    關(guān)注

    0

    文章

    13

    瀏覽量

    12650

原文標(biāo)題:圖像的點云拼接-原理講解與代碼實現(xiàn)

文章出處:【微信號:vision263com,微信公眾號:新機(jī)器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    請問三片PCM1864如何級聯(lián)在一起?

    現(xiàn)用三片PCM1864實現(xiàn)多路MIC信號實時采集,時鐘信號接在一起,數(shù)據(jù)信號分別接到DM8168的McASP接口的AXn的數(shù)據(jù)接口上。來做級聯(lián)是否可以。
    發(fā)表于 10-24 08:08

    隔離電源的地能接在一起嗎,隔離電源能不能直接共地使用

    不能接在一起。在使用隔離電源時,需要將隔離電源的輸入和輸出端的地線分別接在接地柱和接地線上,而不能將它們接在一起。實際上,如果將隔離電源兩端的地線接在一起,會導(dǎo)致接地系統(tǒng)的干擾,降低系
    的頭像 發(fā)表于 10-01 16:27 ?681次閱讀

    將5G信號鏈與電平轉(zhuǎn)換結(jié)合在一起

    電子發(fā)燒友網(wǎng)站提供《將5G信號鏈與電平轉(zhuǎn)換結(jié)合在一起.pdf》資料免費下載
    發(fā)表于 09-18 14:49 ?0次下載
    將5G信號鏈與電平轉(zhuǎn)換結(jié)合<b class='flag-5'>在一起</b>

    模擬地和電源地能接在一起

    模擬地和電源地是否能接在一起,取決于電子系統(tǒng)的具體要求和設(shè)計。在電子系統(tǒng)中,地(Ground)是個共同的參考點,用于構(gòu)建電位參考平面。電源地是所有電源網(wǎng)絡(luò)的參考點,用于確保電源的穩(wěn)定性和系統(tǒng)的正常工作。模擬地則與模擬電路相關(guān),用于提供參考電位。
    的頭像 發(fā)表于 09-15 11:43 ?521次閱讀

    請問14引腳的VCA821的正負(fù)電源為什么有兩個?使用時怎么和電源接在一起?

    請問14引腳的VCA821的正負(fù)電源為什么有兩個?使用時怎么和電源接在一起?是4個都要接嗎?GRAND引腳直接接地嗎?
    發(fā)表于 08-23 07:33

    DAC8771RGZ電流輸出端IOUT和電壓輸VOUT出端是連在一起的,是否可以不并在一起?

    請教下DAC8771RGZ這款芯片,看官方demo板,電流輸出端IOUT和電壓輸VOUT出端是連在一起的,是否可以不并在一起,分成兩路,單獨分別輸出電流或電壓嗎?
    發(fā)表于 08-08 07:59

    普通門電路的輸出端能否連在一起

    普通門電路的輸出端能否連在一起,取決于具體的應(yīng)用場景和需求。普通門電路的輸出端能否連在一起個復(fù)雜的問題,涉及到數(shù)字電路設(shè)計、邏輯電路分析、信號完整性、電源管理等多個方面。 門電路的基本概念 在
    的頭像 發(fā)表于 07-30 15:13 ?489次閱讀

    labview全景圖像拼接

    本人是個小白直在求labview的兩張或多張圖片拼接,就像相機(jī)全景樣,但是直都找不到。網(wǎng)上只有個垂直的
    發(fā)表于 03-08 09:45

    作為導(dǎo)線,銅線和鋁線有何區(qū)別?可以接在一起嗎?

    作為導(dǎo)線,銅線和鋁線有何區(qū)別?可以接在一起嗎? 銅線和鋁線是兩種常用的導(dǎo)線材料,用于電力輸送和電器連接。雖然它們都具備導(dǎo)電功能,但在性能、用途和優(yōu)勢方面存在些區(qū)別。本文將對銅線和鋁線進(jìn)行詳細(xì)比較
    的頭像 發(fā)表于 02-18 13:52 ?4557次閱讀

    打造震撼大屏幕:拼接顯示系統(tǒng)的完美方案

    顯示系統(tǒng)的基本原理和類型至關(guān)重要。拼接顯示系統(tǒng)通過將多個顯示屏幕拼接在一起,形成個連續(xù)的、高分辨率的大屏幕。常見的拼接方式包括物理拼接和軟
    的頭像 發(fā)表于 01-26 14:30 ?704次閱讀

    零線和地線連在一起為什么漏電保護(hù)器跳閘

    零線和地線連接在一起會導(dǎo)致漏電保護(hù)器跳閘的主要原因是短路。當(dāng)零線與地線直接相連時,電流將通過這個連接形成個低阻抗回路,從而繞過了電器設(shè)備。漏電保護(hù)器檢測到電流繞過電器設(shè)備并流失到地線,誤認(rèn)為是漏電現(xiàn)象,因此會觸發(fā)跳閘保護(hù)。
    的頭像 發(fā)表于 01-09 09:19 ?3898次閱讀

    AD7606的AGND和VXGND是否定要接在一起?

    你好: 想咨詢下,我們正使用貴公司AD7606作為模擬輸入轉(zhuǎn)換芯片,在使用過程中遇到了個問題,因為芯片的AGND和VXGND分開設(shè)計沒有共接在一起,這樣VXGND和VIN就可以實現(xiàn)正負(fù)電壓采集
    發(fā)表于 12-14 07:36

    AD7606第26引腳是不是在芯片內(nèi)部與其他的AGND連接在一起了?

    AD7606的芯片,第26引腳是不是在芯片內(nèi)部與其他的AGND連接在一起了 測了下,26腳與第2、41、47連接在一起,但與40、35引腳不通 40、35引腳在手冊上也是AGND,有什么特殊的么?
    發(fā)表于 12-04 07:30

    為什么在電網(wǎng)中使用多個變壓器連接在一起形成變電站?

    為什么在電網(wǎng)中使用多個變壓器連接在一起形成變電站? 在電網(wǎng)中使用多個變壓器連接在一起形成變電站有多個原因,這些原因包括電網(wǎng)的穩(wěn)定性、電能輸送的效率、負(fù)荷分配的需要以及電網(wǎng)的可靠性等等。以下是對于每個
    的頭像 發(fā)表于 11-23 14:19 ?621次閱讀

    銅線和鋁線接在一起會發(fā)生什么?有哪些優(yōu)缺點?

    銅線和鋁線接在一起會發(fā)生什么?有哪些優(yōu)缺點? 銅線和鋁線是兩種常見的導(dǎo)電材料,它們都有其獨特的優(yōu)點和缺點。如果將銅線和鋁線接在一起,會在定程度上影響電流的傳輸和系統(tǒng)的穩(wěn)定性。下面將詳細(xì)介紹銅線
    的頭像 發(fā)表于 11-22 17:45 ?3123次閱讀