0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

自動駕駛汽車的視覺傳感器攝像頭介紹

電子工程師 ? 來源:四維圖新NavInfo ? 作者:四維圖新NavInfo ? 2021-03-05 09:30 ? 次閱讀

對于自動駕駛汽車來說,傳感器有很多種,而視覺傳感器“攝像頭”就屬于傳感器中價格相對便宜且功能很重要的一種,被稱為“智能汽車之眼”。今天小編先帶大家對攝像頭作一個基礎(chǔ)介紹。

01攝像頭定義

攝像頭(CAMERA或WEBCAM)又稱為電腦相機、電腦眼、電子眼等,是一種視頻輸入設(shè)備,它就像我們?nèi)说难劬σ粯?,可以將看到的真實環(huán)境記錄,以數(shù)據(jù)形式存儲。

說起攝像頭大家其實并不陌生,因為我們生活中經(jīng)常在使用,比如手機數(shù)碼相機、電腦上的攝像頭,汽車上的攝像頭,還有馬路上交通違章攝像頭,小區(qū)、銀行和商場監(jiān)控攝像頭等等。

02攝像頭原理

攝像頭一般具有視頻攝像和靜態(tài)圖像捕捉等基本功能,它借由鏡頭采集圖像(光信號)后,由攝像頭內(nèi)的感光組件電路及控制組件對圖像進行處理并轉(zhuǎn)換成電腦所能識別的數(shù)字信號,然后借由并行端口USB連接輸入到電腦后由軟件再進行圖像還原。

攝像頭原理圖:機械工業(yè)出版社《自動駕駛改變未來》

03攝像頭組件

攝像頭的主要組件有:

3.1鏡頭組

鏡頭組(lens),由光學鏡片、濾光片和保護膜等組成。

透鏡分兩類,有塑膠透鏡(Plastic)及玻璃透鏡(Glass)。

3.2圖像傳感器(ImageSensor),可以分為兩類:CCD與CMOS傳感器。

CCD(ChargeCoupled Device):電荷耦合器件,可直接將光學信號轉(zhuǎn)換為模擬電流信號,電流信號經(jīng)過放大和模數(shù)轉(zhuǎn)換,實現(xiàn)圖像的獲取、存儲、傳輸、處理和復(fù)現(xiàn)。一般是用于攝影攝像方面的高端技術(shù)元件。

CMOS(ComplementaryMetal-OxideSemiconductor):中文學名為互補金屬氧化物半導(dǎo)體,它本是計算機系統(tǒng)內(nèi)一種重要的芯片,保存了系統(tǒng)引導(dǎo)最基本的資料。CMOS的制造技術(shù)和一般計算機芯片沒什么差別,主要是利用硅和鍺這兩種元素所做成的半導(dǎo)體,使其在CMOS上共存著帶N(帶-電)和P(帶+電)級的半導(dǎo)體,這兩個互補效應(yīng)所產(chǎn)生的電流即可被處理芯片記錄和解讀成影像。后來發(fā)現(xiàn)CMOS經(jīng)過加工也可以作為數(shù)碼攝影中的圖像傳感器。

CCD與CMOS傳感器,兩者都是利用感光二極管(photodiode)進行光電轉(zhuǎn)換,將圖像轉(zhuǎn)換為數(shù)字數(shù)據(jù),而其主要差異是數(shù)字數(shù)據(jù)傳送的方式不同。CCD傳感器中每一行中每一個像素的電荷數(shù)據(jù)都會依次傳送到下一個像素中,由最底端部分輸出,再經(jīng)由傳感器邊緣的放大器進行放大輸出;而在CMOS傳感器中,每個像素都會鄰接一個放大器及A/D轉(zhuǎn)換電路,用類似內(nèi)存電路的方式將數(shù)據(jù)輸出。

簡單講CMOS的信號是以“點”為單位的電荷信號,而CCD是以“行”為單位的電流信號。

3.3 DSP芯片(數(shù)字信號處理器

DSP芯片,也稱數(shù)字信號處理器,是一種具有特殊結(jié)構(gòu)的微處理器。DSP的功能主要是通過一系列復(fù)雜的數(shù)學算法運算,對由CMOS傳感器來的數(shù)字圖像信號進行優(yōu)化處理,并把處理后的信號通過USB等接口傳到PC設(shè)備,是攝像頭的核心設(shè)備。

04攝像頭參數(shù)

4.1像素(Resolution)是由一個數(shù)字序列表示圖像中的一個最小單位。如下面四維圖新logo就是由一個個小方格子像素組成的。

4.2分辨率

分辨率是用于度量位圖圖像內(nèi)數(shù)據(jù)量多少的一個參數(shù),表示成dpi(DotsPerInch,每英寸點或像素數(shù))。它是衡量攝像頭的一個重要指標之一,通常來說攝像頭的最高分辨率越高(即像素點數(shù)量),拍攝出來的圖像品質(zhì)就越好。

方便了解,我們直觀對比一下最高分辨率對圖像的影響。

30萬像素CMOS的分辨率為640×480=307200像素;

100萬像素(720p)的分辨率為1280x720=921600像素;

200萬像素(1080p)的分辨率為1920x1080=2073600像素;

800萬像素是1080p的四倍面積,被稱為4K;

1600萬像素是1080p的8倍面積,被稱為8K。

仍以上面四維圖新logo為例,像素低的如左圖,像素高的如右圖,我們可以發(fā)現(xiàn)最高分辨率越高,像素數(shù)越多,圖像越清晰。

4.3色域

色域(ColorGamut或ColorSpace)是對一種顏色進行編碼的方法,也指一個技術(shù)系統(tǒng)能夠產(chǎn)生的顏色的總和。最常用的兩種圖像格式是RGB24和I420。

RGB24:RGB即代表紅、綠、藍三個通道的顏色變化以及它們相互之間的疊加來得到各式各樣的顏色,這個標準幾乎包括了人類視力所能感知的所有顏色,是目前運用最廣的顏色系統(tǒng)之一。RGB24圖像每個像素用8bit(比特位)表示,RGB24一幀的大小size=width×heigth×3 Byte(字節(jié))。最多可表現(xiàn)256級濃淡,從而可以再現(xiàn)256*256*256種顏色。

I420:是YUV格式之一,YUV模型是根據(jù)一個亮度(Y分量)和兩個色度(UV分量)來定義顏色空間。I420(即YUV標準格式4:2:0)的數(shù)據(jù)量是 size=width×heigth×1.5 Byte(字節(jié))。

其它格式還有:RGB565,RGB444,YUV42等。

4.4自動白平衡調(diào)整

定義:要求在不同色溫環(huán)境下,照白色的物體,屏幕中的圖像應(yīng)也是白色的。色溫表示光譜成分,光的顏色。色溫低表示長波光成分多。當色溫改變時,光源中三基色(紅、綠、藍)的比例會發(fā)生變化,需要調(diào)節(jié)三基色的比例來達到彩色的平衡。

4.5彩色深度

反映對色彩的識別能力和成像的色彩表現(xiàn)能力,實際就是A/D轉(zhuǎn)換器的量化精度,是指將信號分成多少個等級。常用色彩位數(shù)(bit)表示。彩色深度越高,獲得的影像色彩就越艷麗動人。市場上的攝像頭均已達到24位,有的甚至是32位。

4.6圖像噪音

指的是圖像中的雜點干擾。表現(xiàn)為圖像中有固定的彩色雜點。如下圖中紅色方框中的黃色像素點即為圖像噪音。

圖像噪音樣式

4.7視角

鏡頭中心點到成像平面對角線兩端所形成的夾角就是鏡頭視角,對于相同的成像面積,鏡頭焦距越短,其視角就越大。這個與人的眼睛成像是相同的,我們可以試著將手掌(如下圖黃色方框)放于眼前正前方10厘米處和30厘米處,10厘米時的視角(藍色線夾角)大于30厘米的視角(橘黃色線夾角)。

相同成像面積時的鏡頭視角圖

4.8幀率

幀率FPS(FramesPer Second)是指畫面每秒傳輸幀數(shù),通俗來講就是指動畫或視頻的畫面數(shù),即每秒拍攝了多少張照片。比如我們目前看到的大部分電影都是采用24fps(或者23.98fps)拍攝和放映,也就是每秒拍攝/放映24張照片。

五、攝像頭在自動駕駛中的應(yīng)用

上述說了這么多攝像頭的原理和基礎(chǔ)參數(shù),那么攝像頭是如何幫助自動駕駛工作的呢?

簡單來說,攝像頭就是扮演了“車的眼睛”。

我們以前也提過,自動駕駛其實就是讓車擁有人腦的工作,而駕駛過程中,我們?nèi)藭鶕?jù)看到的景象進行感知,同時形成認知并傳遞給大腦,大腦會根據(jù)感知到的結(jié)果進行分析和決策,從而讓手和腳去操作。

聽起來挺簡單的原理,其實是個十分復(fù)雜的過程,舉個例子,比如說我們打開搜索網(wǎng)站搜索“桌子”,會發(fā)現(xiàn)有很多種的樣子。

我們會發(fā)現(xiàn),不管桌子是方是圓,是黑是白,那么我們?nèi)祟悘姶蟮拇竽X會迅速地知道它是一張桌子。

但如果換作計算機,我們就需要通過攝像頭作為輸入,通過AI算法讓汽車知道這是什么。

結(jié)語:

ADAS層面,其實我們目前汽車的一些功能如行人探測與防撞預(yù)警、車道保持和偏離預(yù)警等功能都有攝像頭的參與,而目前針對L3及以上自動駕駛的功能,攝像頭更是重要的傳感器之一。

原文標題:新·知丨自動駕駛傳感器那點事之 攝像頭基礎(chǔ)介紹

文章出處:【微信公眾號:四維圖新NavInfo】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

責任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2542

    文章

    50303

    瀏覽量

    750281
  • 攝像頭
    +關(guān)注

    關(guān)注

    59

    文章

    4782

    瀏覽量

    95131
  • 自動駕駛
    +關(guān)注

    關(guān)注

    782

    文章

    13548

    瀏覽量

    165771

原文標題:新·知丨自動駕駛傳感器那點事之 攝像頭基礎(chǔ)介紹

文章出處:【微信號:realnavinfo,微信公眾號:四維圖新NavInfo】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    聚焦MIPI 系列之三:汽車SerDes – 實現(xiàn)更好的ADAS攝像頭傳感器

    汽車 (AV) 領(lǐng)域。例如,Waymo 的第五代自動駕駛汽車配備了至少29個攝像頭,此外還有五個激光雷達和六個雷達。 未來的自動駕駛
    的頭像 發(fā)表于 08-01 10:18 ?380次閱讀
    聚焦MIPI 系列之三:<b class='flag-5'>汽車</b>SerDes – 實現(xiàn)更好的ADAS<b class='flag-5'>攝像頭</b><b class='flag-5'>傳感器</b>

    FPGA在自動駕駛領(lǐng)域有哪些應(yīng)用?

    的數(shù)據(jù)處理和預(yù)處理,實現(xiàn)實時計算和反饋。 二、數(shù)據(jù)傳輸與處理FPGA在自動駕駛中扮演著數(shù)據(jù)傳輸和處理的角色。它能夠支持多種傳感器(如激光雷達、攝像頭、GPS等)的數(shù)據(jù)傳輸,并通過其高速的數(shù)據(jù)處理能力,實現(xiàn)
    發(fā)表于 07-29 17:09

    自動駕駛汽車如何識別障礙物

    自動駕駛汽車識別障礙物是一個復(fù)雜而關(guān)鍵的過程,它依賴于多種傳感器和技術(shù)的協(xié)同工作。這些傳感器主要包括激光雷達(LiDAR)、雷達、攝像頭以及
    的頭像 發(fā)表于 07-23 16:40 ?729次閱讀

    自動駕駛傳感器技術(shù)介紹

    自動駕駛傳感器技術(shù)是自動駕駛系統(tǒng)的核心組成部分,它使車輛能夠感知并理解周圍環(huán)境,從而做出智能決策。以下是對自動駕駛傳感器技術(shù)的詳細
    的頭像 發(fā)表于 07-23 16:08 ?1784次閱讀

    自動駕駛汽車傳感器有哪些

    自動駕駛汽車傳感器是實現(xiàn)自動駕駛功能的關(guān)鍵組件,它們通過采集和處理車輛周圍環(huán)境的信息,為自動駕駛系統(tǒng)提供必要的感知和決策依據(jù)。以下是對
    的頭像 發(fā)表于 07-23 16:00 ?1687次閱讀

    2030年,自動駕駛傳感器市場將高達235億美元

    攝像頭)的需求將持續(xù)增長,預(yù)計2023年市場規(guī)模將擴大約2.4倍。 ADAS 攝像頭,像素數(shù)從 1.7/5.4MP 增加到 8MP 2024年6月,矢野研究所對ADAS(高級駕駛輔助系統(tǒng))/
    的頭像 發(fā)表于 06-24 09:12 ?307次閱讀

    揭秘自動駕駛:未來汽車的感官革命,究竟需要哪些超級傳感器

    來源:LANCI瀾社汽車,謝謝 編輯:感知芯視界 Link 隨著自動駕駛技術(shù)的發(fā)展,我們已進入一個技術(shù)瓶頸期。在這一背景下,汽車制造商開始將注意力轉(zhuǎn)向自動駕駛的關(guān)鍵組成部分——
    的頭像 發(fā)表于 05-31 09:14 ?452次閱讀

    采用 CMOS傳感器的監(jiān)控攝像頭參考設(shè)計

    電子發(fā)燒友網(wǎng)站提供《采用 CMOS傳感器的監(jiān)控攝像頭參考設(shè)計.pdf》資料免費下載
    發(fā)表于 05-17 18:11 ?9次下載
    采用 CMOS<b class='flag-5'>傳感器</b>的監(jiān)控<b class='flag-5'>攝像頭</b>參考設(shè)計

    未來已來,多傳感器融合感知是自動駕駛破局的關(guān)鍵

    模態(tài)精準感知信息,使自動駕駛系統(tǒng)可以實時精準地感知道路上的各種狀況。 昱感微融合感知產(chǎn)品方案創(chuàng)新性地 將可見光攝像頭、紅外攝像頭以及4D毫米波雷達的探測數(shù)據(jù)在前端(數(shù)據(jù)獲取時)交互,將各傳感
    發(fā)表于 04-11 10:26

    自研自動駕駛芯片競賽,索喜成為關(guān)鍵合作伙伴

    目前汽車領(lǐng)域在手訂單大約3000億日元,主要是自動駕駛和HPC還有激光雷達、毫米波雷達、攝像頭(應(yīng)該是ISP)傳感器芯片。
    發(fā)表于 03-20 11:02 ?1457次閱讀
    自研<b class='flag-5'>自動駕駛</b>芯片競賽,索喜成為關(guān)鍵合作伙伴

    CMOS圖像傳感器自動駕駛汽車提供視覺感知

    和其他道路使用者的安全。本文將探討在選擇圖像傳感器時需要注意的關(guān)鍵特性,以便為自動駕駛汽車提供所需的出色功能組合。 圖像傳感器負責將光子轉(zhuǎn)化為電子,然后存儲為數(shù)字圖像數(shù)據(jù)。如今,圖像
    的頭像 發(fā)表于 02-27 09:28 ?444次閱讀

    詳解無人駕駛傳感器攝像頭、激光雷達、雷達、溫度傳感器

    詳解無人駕駛傳感器攝像頭、激光雷達、雷達、溫度傳感器
    的頭像 發(fā)表于 12-07 10:51 ?1439次閱讀
    詳解無人<b class='flag-5'>駕駛</b><b class='flag-5'>傳感器</b>:<b class='flag-5'>攝像頭</b>、激光雷達、雷達、溫度<b class='flag-5'>傳感器</b>

    自動駕駛攝像頭分類與功能應(yīng)用

    左右后視鏡處或下方車身處 側(cè)視攝像頭主要是用于盲點監(jiān)測BSD,根據(jù)安裝位置可以實現(xiàn)前視或后視作用。目前大部分主機廠會選擇安裝在汽車兩側(cè)的后視鏡下方的位置。未來可能會將傳統(tǒng)的光學后視鏡用攝像頭取代,變成應(yīng)用CMS
    發(fā)表于 12-04 17:10 ?989次閱讀
    <b class='flag-5'>自動駕駛</b><b class='flag-5'>攝像頭</b>分類與功能應(yīng)用

    LiDAR立體視覺攝像頭如何處理弱光及惡劣的天氣條件

    兩種高效的距離傳感解決方案,盡管性能存在顯著差異,尤其是在惡劣天氣和道路條件下。 Nodar是一家為自動駕駛汽車提供先進立體視覺技術(shù)的供應(yīng)商,最近進行了一系列
    的頭像 發(fā)表于 11-07 17:01 ?1101次閱讀

    自動駕駛傳感器攻擊研究

    對于現(xiàn)今的自動駕駛汽車來說,由于傳感器的增加和感知網(wǎng)絡(luò)等軟件的存在,使得自動駕駛汽車在信息安全上相較于其它
    的頭像 發(fā)表于 11-03 15:00 ?502次閱讀
    <b class='flag-5'>自動駕駛</b><b class='flag-5'>傳感器</b>攻擊研究