0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

麻省理工學(xué)院在NVIDIA DRIVE AGX Pegasus上開(kāi)發(fā)全新自動(dòng)駕駛技術(shù)

世強(qiáng)SEKORM ? 來(lái)源:NVIDIA英偉達(dá)企業(yè)解決方案 ? 作者:NVIDIA英偉達(dá)企業(yè)解 ? 2021-08-02 15:59 ? 次閱讀

在今年COMPUTEX上發(fā)表的論文詳細(xì)介紹了綜合深度神經(jīng)網(wǎng)絡(luò)的開(kāi)發(fā)過(guò)程。

全新自動(dòng)駕駛技術(shù)將能夠“獨(dú)當(dāng)一面”。

麻省理工學(xué)院的研究人員正在開(kāi)發(fā)一個(gè)一體化深度神經(jīng)網(wǎng)絡(luò)(DNN)為自動(dòng)駕駛汽車提供支持,并取代由多個(gè)網(wǎng)絡(luò)組成的系統(tǒng)。在今年COMPUTEX上發(fā)表的這項(xiàng)研究使用了NVIDIA DRIVE AGX Pegasus在車輛中運(yùn)行網(wǎng)絡(luò),能夠高效、實(shí)時(shí)地處理堆積成山的激光雷達(dá)數(shù)據(jù)。

自動(dòng)駕駛汽車傳感器會(huì)產(chǎn)生大量數(shù)據(jù)——如果一個(gè)由50輛車組成的車隊(duì)每天行駛6小時(shí),那么每天就會(huì)產(chǎn)生約1.6PB的傳感器數(shù)據(jù)。若把所有這些數(shù)據(jù)都存儲(chǔ)在1GB U盤上,這些U盤將能覆蓋100多座足球場(chǎng)。

自動(dòng)駕駛汽車必須即時(shí)處理這些數(shù)據(jù)才能感知周圍環(huán)境并安全行駛。但由于數(shù)據(jù)量巨大,一個(gè)DNN很難完成這種處理,因此大多數(shù)方法都會(huì)使用多個(gè)網(wǎng)絡(luò)和高清晰度地圖。

在他們的論文中,麻省理工學(xué)院團(tuán)隊(duì)詳細(xì)介紹了如何使用一個(gè)一體化DNN嘗試新的自動(dòng)駕駛策略,首先就是要完成實(shí)時(shí)激光雷達(dá)傳感器數(shù)據(jù)處理任務(wù)。

通過(guò)運(yùn)用高性能、高能效的NVIDIA DRIVE AGX Pegasus,該團(tuán)隊(duì)進(jìn)一步加快激光雷達(dá)的計(jì)算速度以實(shí)現(xiàn)甚至超越這一目標(biāo),其運(yùn)行速度比目前最先進(jìn)的系統(tǒng)還要快15倍。

提高數(shù)據(jù)處理效率

如今,許多開(kāi)發(fā)中的自動(dòng)駕駛系統(tǒng)除了使用高清地圖之外,還使用一系列DNN來(lái)處理傳感器數(shù)據(jù)。這一組合能夠使自動(dòng)駕駛汽車快速確定自己在空間的位置并探測(cè)其他道路使用者、交通標(biāo)志和其他物體。

雖然這種方法為安全自動(dòng)駕駛提供了必要的冗余和多樣性,但它很難在尚未進(jìn)行測(cè)繪的地區(qū)實(shí)施。

此外,使用激光雷達(dá)傳感器的自動(dòng)駕駛系統(tǒng)需要每秒處理周圍環(huán)境中的200多萬(wàn)個(gè)點(diǎn)。不同于2D圖像數(shù)據(jù),激光雷達(dá)點(diǎn)在3D空間中極為稀疏。由于沒(méi)有針對(duì)此類數(shù)據(jù)的定制化架構(gòu),因此這對(duì)于現(xiàn)代計(jì)算硬件而言是一個(gè)巨大的挑戰(zhàn)。

為了實(shí)現(xiàn)比基本架構(gòu)更高的速度和能效,麻省理工學(xué)院團(tuán)隊(duì)開(kāi)發(fā)出新的改進(jìn)措施。

麻省理工學(xué)院的DNN能夠執(zhí)行整個(gè)自動(dòng)駕駛系統(tǒng)的功能。這套完整的功能是通過(guò)使用大量人類駕駛數(shù)據(jù)來(lái)訓(xùn)練網(wǎng)絡(luò)而實(shí)現(xiàn)的,這些數(shù)據(jù)教會(huì)了它能夠像人類駕駛者那樣將駕駛視為一個(gè)整體,而不是把駕駛分解成多個(gè)具體的任務(wù)。

雖然這種方法仍在開(kāi)發(fā)中,但它具有很大的潛在優(yōu)勢(shì)。

在車輛中運(yùn)行一個(gè)一體化DNN明顯比運(yùn)行多個(gè)專用網(wǎng)絡(luò)更高效,這為其他功能開(kāi)辟了計(jì)算空間。而且由于DNN依靠訓(xùn)練而不是地圖來(lái)實(shí)現(xiàn)在未測(cè)繪道路上的導(dǎo)航,因此它具有更高的靈活性。隨著效率的提高,車輛還能實(shí)時(shí)處理更多的豐富感知數(shù)據(jù)。

使用NVIDIA DRIVE大幅提高性能

當(dāng)與高性能的中央計(jì)算系統(tǒng)相結(jié)合時(shí),麻省理工學(xué)院發(fā)現(xiàn)其DNN的使用更加得心應(yīng)手。

NVIDIA DRIVE AGX Pegasus是一款專為L(zhǎng)4級(jí)和L5級(jí)自動(dòng)駕駛系統(tǒng)設(shè)計(jì)的AI超級(jí)計(jì)算平臺(tái)。它結(jié)合了兩個(gè)NVIDIA Xavier SoC和兩個(gè)NVIDIA Turing架構(gòu)GPU的性能,實(shí)現(xiàn)了前所未有的每秒320萬(wàn)億次運(yùn)算性能。

麻省理工學(xué)院的研究人員已著手在某個(gè)計(jì)算系統(tǒng)上開(kāi)發(fā)DNN。該系統(tǒng)不僅功能強(qiáng)大,而且在目前正在開(kāi)發(fā)的自動(dòng)駕駛系統(tǒng)中也很常見(jiàn)。

共同領(lǐng)導(dǎo)該項(xiàng)目的麻省理工學(xué)院博士生Alexander Amini表示:“我們希望有一個(gè)高度靈活的模塊化AV系統(tǒng),而NVIDIA正是這個(gè)領(lǐng)域的領(lǐng)導(dǎo)者。Pegasus能夠處理來(lái)自各種傳感器的輸入流,讓開(kāi)發(fā)人員很容易實(shí)現(xiàn)他們的DNN?!?/p>

DNN的激光雷達(dá)感知能力只是麻省理工學(xué)院研究人員最初的自動(dòng)駕駛開(kāi)發(fā)目標(biāo)。Amini表示,團(tuán)隊(duì)正在設(shè)法解決組合傳感器流、與其他車輛之間更復(fù)雜的交互以及惡劣天氣條件等問(wèn)題——而這些問(wèn)題的解決都用到了NVIDIA DRIVE解決方案。

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    4814

    瀏覽量

    102631

原文標(biāo)題:獨(dú)當(dāng)一面:麻省理工學(xué)院在NVIDIA DRIVE AGX Pegasus上開(kāi)發(fā)出一體化自動(dòng)駕駛網(wǎng)絡(luò)

文章出處:【微信號(hào):sekorm_info,微信公眾號(hào):世強(qiáng)SEKORM】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    VILA與其他模型提供邊緣AI 2.0方面的表現(xiàn)

    VILA 是 NVIDIA 研究部門與麻省理工學(xué)院共同開(kāi)發(fā)的高性能視覺(jué)語(yǔ)言模型系列。最大的模型約有 400 億參數(shù),最小的模型約有 30 億參數(shù),并且完全開(kāi)源(包括模型檢查點(diǎn)、訓(xùn)練代碼和訓(xùn)練數(shù)據(jù))。
    的頭像 發(fā)表于 10-10 10:06 ?91次閱讀
    VILA與其他模型<b class='flag-5'>在</b>提供邊緣AI 2.0方面的表現(xiàn)

    美國(guó)佐治亞理工學(xué)院一行蒞臨達(dá)實(shí)智能調(diào)研

    近日,美國(guó)佐治亞理工學(xué)院“聚焦數(shù)據(jù)科學(xué)領(lǐng)域·深度探訪粵港澳大灣區(qū)”學(xué)生代表團(tuán)來(lái)深交流。美國(guó)佐治亞理工學(xué)院(Georgia Institute of Technology)一行探訪了大灣區(qū)科技企業(yè)代表達(dá)實(shí)智能。
    的頭像 發(fā)表于 09-26 09:21 ?385次閱讀

    FPGA自動(dòng)駕駛領(lǐng)域有哪些應(yīng)用?

    是FPGA自動(dòng)駕駛領(lǐng)域的主要應(yīng)用: 一、感知算法加速 圖像處理:自動(dòng)駕駛中需要通過(guò)攝像頭獲取并識(shí)別道路信息和行駛環(huán)境,這涉及到大量的圖像處理任務(wù)。FPGA處理圖像
    發(fā)表于 07-29 17:09

    麻省理工學(xué)院研發(fā)RoboGrocery系統(tǒng),雜貨店自動(dòng)化裝袋新篇章

    科技日新月異的今天,自動(dòng)化和智能化正逐漸滲透到我們生活的方方面面。近日,麻省理工學(xué)院計(jì)算機(jī)科學(xué)與人工智能實(shí)驗(yàn)室(CSAIL)的一項(xiàng)創(chuàng)新技術(shù)引起了廣泛關(guān)注——RoboGrocery系統(tǒng)
    的頭像 發(fā)表于 07-01 16:49 ?515次閱讀

    感謝東莞理工學(xué)院對(duì)我司導(dǎo)熱系數(shù)測(cè)試儀的認(rèn)可

    東莞理工學(xué)院作為國(guó)內(nèi)的高等學(xué)府,一直致力于科學(xué)研究和教育事業(yè)的發(fā)展,能夠得到這樣一所學(xué)府的認(rèn)可,無(wú)疑是對(duì)我們技術(shù)實(shí)力和產(chǎn)品質(zhì)量的肯定。這份認(rèn)可,如同春日里的一縷陽(yáng)光,溫暖而明亮,照亮了我們前行的道路
    的頭像 發(fā)表于 06-25 09:55 ?201次閱讀
    感謝東莞<b class='flag-5'>理工學(xué)院</b>對(duì)我司導(dǎo)熱系數(shù)測(cè)試儀的認(rèn)可

    蘇黎世聯(lián)邦理工學(xué)院報(bào)告:Rowhammer攻擊對(duì)高端RISC-V CPU的潛在風(fēng)險(xiǎn)

    來(lái)源:內(nèi)容由RISC-V國(guó)際人才培養(yǎng)認(rèn)證中心編譯自DRAMSec,作者:MicheleMarazzi;KavehRazavi。蘇黎世聯(lián)邦理工學(xué)院的研究人員發(fā)表了一篇題為“RISC-H:針對(duì)
    的頭像 發(fā)表于 06-15 08:36 ?266次閱讀
    蘇黎世聯(lián)邦<b class='flag-5'>理工學(xué)院</b>報(bào)告:Rowhammer攻擊對(duì)高端RISC-V CPU的潛在風(fēng)險(xiǎn)

    一種用于化學(xué)和生物材料識(shí)別的便攜式拉曼光譜解決方案

    基于掃頻光源的緊湊型拉曼光譜系統(tǒng):美國(guó)麻省理工學(xué)院(MIT)和韓國(guó)科學(xué)技術(shù)院(KAIST)的研究人員開(kāi)發(fā)了一種用于化學(xué)和生物材料識(shí)別的便攜式拉曼光譜解決方案,克服了光譜儀笨重的局限性。
    的頭像 發(fā)表于 04-16 10:35 ?458次閱讀
    一種用于化學(xué)和生物材料識(shí)別的便攜式拉曼光譜解決方案

    麻省理工與Adobe新技術(shù)DMD提升圖像生成速度

    2023年3月27日,據(jù)傳,新型文生圖算法雖然使得圖像生成無(wú)比逼真,但奈何運(yùn)行速度較慢。近期,美國(guó)麻省理工學(xué)院聯(lián)合Adobe推出新型DMD方法,僅略微犧牲圖像質(zhì)量就大幅度提高圖像生成效率。
    的頭像 發(fā)表于 03-27 14:17 ?436次閱讀

    霍尼韋爾與南方泵業(yè)開(kāi)展戰(zhàn)略合作,四川成都一家紅外熱成像專用圖像處理芯片服務(wù)商完成A+輪融資

    、麻省理工學(xué)院的研究生 Daniel Monagle 該校官網(wǎng)發(fā)表的一篇文章中表示:“我們展示了一個(gè)無(wú)需電池的傳感器,并且證明了這是一個(gè)可行的解決方案。我們希望其他人能利用我們的框架設(shè)計(jì)他們自己的傳感器,共同推動(dòng)這項(xiàng)技術(shù)的發(fā)展
    的頭像 發(fā)表于 03-14 08:42 ?552次閱讀
    霍尼韋爾與南方泵業(yè)開(kāi)展戰(zhàn)略合作,四川成都一家紅外熱成像專用圖像處理芯片服務(wù)商完成A+輪融資

    瑞士蘇黎世聯(lián)邦理工學(xué)院新型四足機(jī)器人單腿完成開(kāi)關(guān)門、移動(dòng)任務(wù)

    據(jù)本周五出版的Popular Science雜志報(bào)道,近日瑞士蘇黎世聯(lián)邦理工學(xué)院機(jī)器人系統(tǒng)實(shí)驗(yàn)室的科研團(tuán)隊(duì)展示了新研究進(jìn)展:他們訓(xùn)練了自家的機(jī)器狗,讓其用單腿操控門鎖和移動(dòng)物品,同時(shí)依靠其余三腿維持正常行走及平衡。
    的頭像 發(fā)表于 02-25 11:55 ?561次閱讀

    麻省理工學(xué)院開(kāi)發(fā)出新的RFID標(biāo)簽防篡改技術(shù)

    的解決方案。 麻省理工學(xué)院的研究人員推出了一項(xiàng)革命性的發(fā)明——新型防篡改ID標(biāo)簽。它不僅尺寸小巧、成本低廉,而且具備強(qiáng)大的防偽功能,有望徹底改變商品真?zhèn)舞b定的格局。 研究人員巧妙地利用太赫茲波的特性,設(shè)計(jì)出了這種新型防篡改
    的頭像 發(fā)表于 02-22 11:30 ?528次閱讀
    <b class='flag-5'>麻省理工學(xué)院</b><b class='flag-5'>開(kāi)發(fā)</b>出新的RFID標(biāo)簽防篡改<b class='flag-5'>技術(shù)</b>

    迷思科技獲數(shù)千萬(wàn)Pre A輪融資,安森美和理想汽車?yán)m(xù)簽長(zhǎng)期供貨協(xié)議

    ? 傳感新品 【美國(guó)麻省理工學(xué)院:研發(fā)吸入式傳感器,實(shí)現(xiàn)早期肺癌檢測(cè)無(wú)需做CT】 美國(guó)麻省理工學(xué)院研究人員開(kāi)發(fā)出一項(xiàng)新技術(shù),可使診斷肺癌變得像吸入納米顆粒傳感器一樣簡(jiǎn)單,然后進(jìn)行尿檢就
    的頭像 發(fā)表于 02-20 18:13 ?968次閱讀
    迷思科技獲數(shù)千萬(wàn)Pre A輪融資,安森美和理想汽車?yán)m(xù)簽長(zhǎng)期供貨協(xié)議

    Innovusion駛?cè)氤掷m(xù)增長(zhǎng)快車道,消息稱中國(guó)特供版英偉達(dá) H20 AI 芯片推遲到明年一季度發(fā)布

    ? 傳感新品 【麻省理工學(xué)院:測(cè)試了一種新的可攝入傳感器,從胃腸道內(nèi)監(jiān)測(cè)包括心率和呼吸模式在內(nèi)的生命體征】 麻省理工學(xué)院的研究人員開(kāi)發(fā)了一種可攝取的膠囊,可以從病人的胃腸道內(nèi)監(jiān)測(cè)包括心率和呼吸模式
    的頭像 發(fā)表于 12-12 17:28 ?362次閱讀
    Innovusion駛?cè)氤掷m(xù)增長(zhǎng)快車道,消息稱中國(guó)特供版英偉達(dá) H20 AI 芯片推遲到明年一季度發(fā)布

    Nature:量子材料新進(jìn)展!

    有鑒于此,麻省理工學(xué)院JosephG.Checkelsky和RiccardoComin等人報(bào)告了對(duì)C15 Laves相 CaNi2的塊狀單晶的研究,它包含一個(gè)模型網(wǎng)絡(luò)水平預(yù)測(cè)的鎳燒綠石晶格,以容納由電子跳躍的三維破壞性干涉產(chǎn)
    的頭像 發(fā)表于 11-22 16:16 ?490次閱讀
    Nature:量子材料新進(jìn)展!

    剛剛,6位傳感器青年科學(xué)家入選!麻省理工這份權(quán)威名單公布!

    麻省理工學(xué)院創(chuàng)刊,是世界歷史最悠久,也是影響力最大的技術(shù)商業(yè)類雜志,世界第一本專業(yè)的科技評(píng)論雜志,側(cè)重報(bào)道新興科技和創(chuàng)新商業(yè),專注于科技的商業(yè)化和資本化,全球前沿科技領(lǐng)域具有較大影
    的頭像 發(fā)表于 11-03 08:41 ?410次閱讀
    剛剛,6位傳感器青年科學(xué)家入選!<b class='flag-5'>麻省理工</b>這份權(quán)威名單公布!