0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于視覺(jué)感知的波束跟蹤系統(tǒng)

5NwT_Exc ? 來(lái)源:曾益科技 ? 作者:曾益科技 ? 2021-08-10 10:26 ? 次閱讀

清華大學(xué)高飛飛老師團(tuán)隊(duì)聯(lián)合曾益科技將在無(wú)線研究領(lǐng)域的年度盛會(huì)IEEE/CIC International Conference on Communications in China上展出基于軟件無(wú)線電平臺(tái)及人工智能算法相結(jié)合的原型驗(yàn)證系統(tǒng)Vicom,可實(shí)現(xiàn)基于視覺(jué)感知的毫米波波束跟蹤及遮擋情境下的高低頻無(wú)縫切換演示驗(yàn)證,該技術(shù)屬于感知通信一體化新體系。

研究背景

5G的主流部署方式之中主要存在兩個(gè)頻段:Sub6G頻段(6GHz以下頻段)與毫米波頻段(24GHz至300GHz頻段)。毫米波頻段相比于Sub6G頻段具有高數(shù)據(jù)吞吐量、大帶寬、天線體積小等優(yōu)點(diǎn),因此占據(jù)5G通信研究前沿的重要一席。

然而,毫米波也具有其波段上的固有缺點(diǎn),如大維天線信道估計(jì)開(kāi)銷較高,波束對(duì)準(zhǔn)耗時(shí)較長(zhǎng),相對(duì)于低頻信號(hào)穿透能力弱、易被遮擋等缺點(diǎn)。近期研究表明,可利用感知信息等帶外信息輔助提高無(wú)線通信性能,因此感知通信一體化研究已成為B5G乃至6G技術(shù)的熱點(diǎn)之一。

本原型系統(tǒng)實(shí)現(xiàn)了利用視覺(jué)感知信號(hào)來(lái)輔助毫米波通信的演示驗(yàn)證,包括視頻感知輔助的窄波束實(shí)時(shí)跟蹤,視頻感知輔助的遮擋判斷,一站雙頻的高低頻切換等來(lái)保持穩(wěn)定可靠的數(shù)據(jù)傳輸。系統(tǒng)起名為Vicom,意指Vision Aided Communications。

系統(tǒng)展示

基于視覺(jué)感知的波束跟蹤系統(tǒng)

使用視覺(jué)感知以及人工智能的方式從環(huán)境中獲取收發(fā)兩端最優(yōu)的波束權(quán)重,并通過(guò)傳感器直接控制收發(fā)兩端的大規(guī)模天線相位、無(wú)需使用昂貴的射頻鏈路資源。

傳統(tǒng)框架下毫米波通信的波束成形與跟蹤采用的是:在收發(fā)兩端依次掃描遍歷整個(gè)碼本來(lái)確定接收能量最強(qiáng)的方向作為波束對(duì)準(zhǔn)方向。該方式在用戶運(yùn)動(dòng)過(guò)程中必須不斷掃描整個(gè)碼本、造成時(shí)間資源和通信資源浪費(fèi)。

在所搭建的基于視覺(jué)感知的毫米波通信系統(tǒng)中,基站端和用戶移動(dòng)端均使用攝像頭對(duì)環(huán)境進(jìn)行感知、然后利用人工智能的方式從視覺(jué)信息中找到當(dāng)前時(shí)刻最優(yōu)的波束方向,從而控制毫米波陣列的波束權(quán)重。該方法利用可見(jiàn)光頻段這類“帶外”信息,不占用寶貴的帶內(nèi)資源,且無(wú)需掃描遍歷整個(gè)碼本,使得波束跟蹤算法更加簡(jiǎn)單、且降低了設(shè)備成本。

基于視覺(jué)感知的高低頻通信切換系統(tǒng)

使用視覺(jué)對(duì)于毫米波天線遮擋情況進(jìn)行判斷,在存在天線遮擋的情況下,系統(tǒng)自動(dòng)切換低頻傳輸,有效地解決了遮擋物導(dǎo)致的毫米波傳輸中斷問(wèn)題。

在毫米波通信之中,對(duì)于遮擋物阻隔信號(hào)的處理問(wèn)題是研究關(guān)注的熱點(diǎn)之一。毫米波較弱的穿透能力、較弱的散射和衍射能力使得在存在遮擋物的情形下通信效果迅速下降。

5G通信之中存在Sub6G較低的頻率資源,且使用Sub6G頻段的低頻通信具有豐富的散射和衍射效應(yīng),形成充足的多徑資源,使得5G通信在NLOS下也能夠正常進(jìn)行通信。目前已有大量的基站采用一站多頻的方式,而相當(dāng)多類型的手機(jī)也已經(jīng)支持多個(gè)高低頻頻段。

所搭建的演示驗(yàn)證系統(tǒng)使用基站端和移動(dòng)端的視覺(jué)判定LOS徑是否被遮擋、若遮擋存在將通信頻段從毫米波頻段切換至使用NLOS徑的Sub6G頻段。在遮擋物消失后,基站端和移動(dòng)端通過(guò)視覺(jué)檢測(cè)自動(dòng)切換回毫米波頻段繼續(xù)進(jìn)行波束跟蹤。

應(yīng)用前景

基于視覺(jué)輔助無(wú)線通信系統(tǒng)其本質(zhì)是將傳統(tǒng)通信轉(zhuǎn)化為“主動(dòng)感知通信”,屬于主動(dòng)感知輔助的通信方式,是感知通信一體化新體系中的重要技術(shù)。采用主動(dòng)感知的方案,使得基站端能夠利用人工智能算法對(duì)周圍通信環(huán)境做出判斷,不僅僅能夠?qū)崿F(xiàn)波束跟蹤。

同時(shí)還可實(shí)現(xiàn)遮擋判斷、參數(shù)獲取、資源配置等多種功能、對(duì)于多類其他通信場(chǎng)景例如智能反射面(RIS)等也有良好的支撐,具有大規(guī)模部署和應(yīng)用的前景。

大咖分享

團(tuán)隊(duì)研究負(fù)責(zé)人清華大學(xué)高飛飛副教授將會(huì)出席IEEE/CIC同期6G分論壇,分享6G智能無(wú)線通信研究的最新進(jìn)展。

演講摘要

在無(wú)線通信系統(tǒng)設(shè)計(jì)里融入人工智能技術(shù)已成為無(wú)線通信領(lǐng)域的新趨勢(shì),并被認(rèn)可為是6G移動(dòng)通信系統(tǒng)的關(guān)鍵技術(shù)之一。本報(bào)告主要講述了如何利用深度學(xué)習(xí)對(duì)無(wú)線通信物理層各個(gè)環(huán)節(jié)進(jìn)行創(chuàng)新設(shè)計(jì),包括信道估計(jì)、信道預(yù)測(cè)、波束成形等。

研究表明,利用深度學(xué)習(xí)能夠解決傳統(tǒng)通信系統(tǒng)無(wú)法觸及的大量新問(wèn)題。我們同時(shí)還搭建了原型驗(yàn)證平臺(tái)來(lái)展示人工智能融合無(wú)線通信的可行性。

演講嘉賓

高飛飛老師長(zhǎng)期從事智能通信與信號(hào)處理技術(shù)研究,發(fā)表IEEE期刊論文150余篇,獲谷歌引用1萬(wàn)余次,獲中國(guó)通信學(xué)會(huì)自然科學(xué)獎(jiǎng)二等獎(jiǎng)、中國(guó)通信學(xué)會(huì)青年科技獎(jiǎng)、IEEE通信學(xué)會(huì)亞太地區(qū)杰出青年學(xué)者稱號(hào)。

擔(dān)任IEEE TCOM、IEEE TWC、IEEE JSTSP、IEEE TCCN等6個(gè)IEEE頂級(jí)期刊高級(jí)編委/客座編委/編委、以及中國(guó)科技期刊卓越行動(dòng)計(jì)劃入選期刊《China Communications》編委。

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 毫米波
    +關(guān)注

    關(guān)注

    21

    文章

    1900

    瀏覽量

    64603
  • 6G
    6G
    +關(guān)注

    關(guān)注

    7

    文章

    448

    瀏覽量

    41750
  • 視覺(jué)感知
    +關(guān)注

    關(guān)注

    0

    文章

    44

    瀏覽量

    3173

原文標(biāo)題:6G技術(shù)前沿:基于視覺(jué)感知的毫米波通信新技術(shù)

文章出處:【微信號(hào):Excelpoint世健,微信公眾號(hào):Excelpoint世健】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    INDEMIND視覺(jué)感知技術(shù),為具身智能構(gòu)建物理“感官”

    為具身智能量身打造通用性視覺(jué)感知技術(shù)
    的頭像 發(fā)表于 10-25 14:16 ?57次閱讀

    人形機(jī)器人感知系統(tǒng)的特點(diǎn):多模態(tài)感知、高精度、實(shí)時(shí)性

    優(yōu)必選、小米科技、宇樹(shù)科技等。 ? 人形機(jī)器人感知系統(tǒng)包括哪些傳感器和算法 ? 人形機(jī)器人感知系統(tǒng)包括各種傳感器,如視覺(jué)傳感器:通過(guò)模擬人類
    的頭像 發(fā)表于 07-30 01:05 ?4070次閱讀

    計(jì)算機(jī)視覺(jué)與智能感知是干嘛的

    引言 計(jì)算機(jī)視覺(jué)(Computer Vision)是一門(mén)研究如何使計(jì)算機(jī)能夠理解和解釋視覺(jué)信息的學(xué)科。它涉及到圖像處理、模式識(shí)別、機(jī)器學(xué)習(xí)等多個(gè)領(lǐng)域,是人工智能的重要組成部分。智能感知
    的頭像 發(fā)表于 07-09 09:23 ?574次閱讀

    清華大學(xué)類腦視覺(jué)芯片“天眸芯”突破傳統(tǒng)視覺(jué)感知芯片性能瓶頸

    據(jù)介紹,傳統(tǒng)視覺(jué)感知芯片因受到“功耗墻”與“帶寬墻”的制約,在處理突發(fā)意外情況時(shí)易出現(xiàn)失真、失效或高延遲等問(wèn)題,從而影響系統(tǒng)的穩(wěn)定性和安全性。
    的頭像 發(fā)表于 05-30 10:16 ?1186次閱讀

    未來(lái)已來(lái),多傳感器融合感知是自動(dòng)駕駛破局的關(guān)鍵

    駕駛的關(guān)鍵的是具備人類的感知能力,多傳感器融合感知正是自動(dòng)駕駛破局的關(guān)鍵。昱感微的雷視一體多傳感器融合方案就好像一雙比人眼更敏銳的眼睛,可以為自動(dòng)駕駛系統(tǒng)提供更豐富更精準(zhǔn)的視覺(jué)語(yǔ)言——
    發(fā)表于 04-11 10:26

    視覺(jué)焊縫跟蹤系統(tǒng)的發(fā)展趨勢(shì)與挑戰(zhàn)

    在當(dāng)今制造業(yè)中,焊接技術(shù)一直扮演著至關(guān)重要的角色。為了提高焊接質(zhì)量和效率,視覺(jué)焊縫跟蹤系統(tǒng)應(yīng)運(yùn)而生。這些系統(tǒng)利用計(jì)算機(jī)視覺(jué)技術(shù),實(shí)時(shí)監(jiān)測(cè)焊接
    的頭像 發(fā)表于 03-05 16:30 ?340次閱讀
    <b class='flag-5'>視覺(jué)</b>焊縫<b class='flag-5'>跟蹤</b><b class='flag-5'>系統(tǒng)</b>的發(fā)展趨勢(shì)與挑戰(zhàn)

    Zinn Labs 推出基于 PROPHESEE事件視覺(jué)傳感器的視線跟蹤系統(tǒng),為 AI 智能鏡框和 VR/MR 系統(tǒng)賦能

    結(jié)合 ?Prophesee 超低功耗、低延遲的事件視覺(jué)傳感器, 該款突破性的 視線 跟蹤系統(tǒng)將 助力 帶來(lái)直觀、無(wú)縫 流暢 的 新 用戶體驗(yàn) ? Zinn Labs 宣布推出業(yè)內(nèi)首款基于事件的視線
    的頭像 發(fā)表于 02-07 13:53 ?542次閱讀
    Zinn Labs 推出基于 PROPHESEE事件<b class='flag-5'>視覺(jué)</b>傳感器的視線<b class='flag-5'>跟蹤</b><b class='flag-5'>系統(tǒng)</b>,為 AI 智能鏡框和 VR/MR <b class='flag-5'>系統(tǒng)</b>賦能

    淺析自動(dòng)駕駛行業(yè)的視覺(jué)感知主流框架設(shè)計(jì)

    視覺(jué)感知系統(tǒng)主要以攝像頭作為傳感器輸入,經(jīng)過(guò)一系列的計(jì)算和處理,對(duì)自車周圍的環(huán)境信息做精確感知。目的在于為融合模塊提供準(zhǔn)確豐富的信息,包括被檢測(cè)物體的類別、距離信息、速度信息、朝向信息
    發(fā)表于 01-26 11:25 ?562次閱讀
    淺析自動(dòng)駕駛行業(yè)的<b class='flag-5'>視覺(jué)</b><b class='flag-5'>感知</b>主流框架設(shè)計(jì)

    創(chuàng)想視覺(jué)焊縫跟蹤系統(tǒng)適配廣數(shù)機(jī)器人進(jìn)行自動(dòng)化焊接的應(yīng)用

    ??隨著制造業(yè)的發(fā)展,自動(dòng)化技術(shù)在焊接領(lǐng)域的應(yīng)用變得愈發(fā)重要。為了提高焊接質(zhì)量和效率,越來(lái)越多的企業(yè)開(kāi)始采用機(jī)器人進(jìn)行自動(dòng)化焊接。而焊縫跟蹤技術(shù)作為自動(dòng)化焊接的關(guān)鍵技術(shù)之一,今天創(chuàng)想焊縫跟蹤小編帶大家了解創(chuàng)想視覺(jué)焊縫
    的頭像 發(fā)表于 01-07 10:52 ?426次閱讀

    創(chuàng)想焊縫跟蹤系統(tǒng)適配大牛機(jī)器人進(jìn)行智能尋位跟蹤的應(yīng)用案例

    系統(tǒng)小編帶大家一起了解創(chuàng)想焊縫跟蹤系統(tǒng)在大牛機(jī)器人上的應(yīng)用。 創(chuàng)想焊縫跟蹤系統(tǒng)原理 創(chuàng)想焊縫跟蹤
    的頭像 發(fā)表于 12-23 16:00 ?628次閱讀
    創(chuàng)想焊縫<b class='flag-5'>跟蹤</b><b class='flag-5'>系統(tǒng)</b>適配大牛機(jī)器人進(jìn)行智能尋位<b class='flag-5'>跟蹤</b>的應(yīng)用案例

    七軸開(kāi)源協(xié)作機(jī)械臂myArm視覺(jué)跟蹤技術(shù)!

    引言 ArUco標(biāo)記是一種基于二維碼的標(biāo)記,可以被用于高效的場(chǎng)景識(shí)別和位置跟蹤。這些標(biāo)記的簡(jiǎn)單性和高效性使其成為機(jī)器視覺(jué)領(lǐng)域的理想選擇,特別是在需要實(shí)時(shí)和高精度跟蹤的場(chǎng)景中。結(jié)合機(jī)器學(xué)習(xí)和先進(jìn)的圖像
    的頭像 發(fā)表于 12-18 11:14 ?1082次閱讀
    七軸開(kāi)源協(xié)作機(jī)械臂myArm<b class='flag-5'>視覺(jué)</b><b class='flag-5'>跟蹤</b>技術(shù)!

    創(chuàng)想視覺(jué)焊縫跟蹤系統(tǒng)適配OTC機(jī)器人實(shí)現(xiàn)高效自動(dòng)焊接的案例

    制造業(yè)發(fā)展提供了強(qiáng)有力的支持。 焊縫跟蹤工作原理 焊縫跟蹤系統(tǒng)是一種基于先進(jìn)視覺(jué)技術(shù)的自動(dòng)化系統(tǒng),其工作原理基于計(jì)算機(jī)
    的頭像 發(fā)表于 11-25 14:20 ?521次閱讀
    創(chuàng)想<b class='flag-5'>視覺(jué)</b>焊縫<b class='flag-5'>跟蹤</b><b class='flag-5'>系統(tǒng)</b>適配OTC機(jī)器人實(shí)現(xiàn)高效自動(dòng)焊接的案例

    毫米波雷達(dá)的自適應(yīng)波束成形技術(shù):提升感知精度的前沿探索

    毫米波雷達(dá)的自適應(yīng)波束成形技術(shù)是當(dāng)前雷達(dá)領(lǐng)域備受關(guān)注的研究方向之一。本文深入探討了自適應(yīng)波束成形技術(shù)的原理、關(guān)鍵技術(shù)和在各個(gè)應(yīng)用領(lǐng)域中的前景,以及它如何提升毫米波雷達(dá)系統(tǒng)在復(fù)雜環(huán)境中的感知
    的頭像 發(fā)表于 11-14 15:51 ?588次閱讀

    BEV感知的二維特征點(diǎn)

    BEV感知的二維特征點(diǎn) 首先來(lái)簡(jiǎn)單介紹一下什么是BEV感知。 BEV感知(Bird’s Eye View Perception)是一種用于自動(dòng)駕駛汽車的感知
    的頭像 發(fā)表于 11-14 11:37 ?596次閱讀

    如何通過(guò)PaddleHub快速實(shí)現(xiàn)計(jì)算機(jī)視覺(jué)任務(wù)

    具體的說(shuō),就是讓機(jī)器去識(shí)別攝像機(jī)拍攝的圖片或視頻中的物體,檢測(cè)出物體所在的位置,并對(duì)目標(biāo)物體進(jìn)行跟蹤,從而理解并描述出圖片或視頻里的場(chǎng)景和故事,以此來(lái)模擬人腦視覺(jué)系統(tǒng)。因此,計(jì)算機(jī)視覺(jué)也通常被叫做機(jī)器
    發(fā)表于 10-30 11:22 ?427次閱讀
    如何通過(guò)PaddleHub快速實(shí)現(xiàn)計(jì)算機(jī)<b class='flag-5'>視覺(jué)</b>任務(wù)