大眾將微軟HoloLens 2首次用于移動(dòng)車輛中

戴著墨鏡開(kāi)車，炫酷拉風(fēng)。戴著混合現(xiàn)實(shí)眼鏡開(kāi)車呢？當(dāng)然是汽車自動(dòng)駕駛，你可以隨意查看交通信息、天氣狀況、沿途建筑的同時(shí)，還能通過(guò)混合現(xiàn)實(shí)眼鏡調(diào)節(jié)車內(nèi)各類參數(shù)，心動(dòng)吧？

將增強(qiáng)現(xiàn)實(shí)技術(shù)作為未來(lái)移動(dòng)概念的主要組成部分正是大眾汽車所設(shè)想的未來(lái)愿景。為了實(shí)現(xiàn)這一愿景，大眾選擇與微軟合作，并首先將 HoloLens 2用于移動(dòng)車輛。

傳感器“暈車”，混合現(xiàn)實(shí)進(jìn)軍汽車駕駛受阻

作為探索混合現(xiàn)實(shí)技術(shù)的先行者，大眾汽車在2020年就已為 ID. 系列電動(dòng)汽車引入了 MR 平視顯示屏，將導(dǎo)航箭頭、車道標(biāo)記和其他信息投射到汽車前方的環(huán)境之中。

大眾汽車集團(tuán)數(shù)據(jù)科學(xué)團(tuán)隊(duì)負(fù)責(zé)人 Andro Kleen 表示：“我們認(rèn)為，混合現(xiàn)實(shí)是我們能夠提供的最直觀信息，它可以增強(qiáng)客戶的用戶體驗(yàn)?！彼?，大眾對(duì)于混合現(xiàn)實(shí)潛力的探索，在更早的時(shí)候就已開(kāi)始。

這正是大眾汽車所設(shè)想的未來(lái)，將增強(qiáng)現(xiàn)實(shí)技術(shù)作為未來(lái)移動(dòng)概念的主要組成部分。為了實(shí)現(xiàn)這一愿景，大眾選擇與微軟合作，并首先將 HoloLens 2用于移動(dòng)車輛。

在2015年，大眾汽車啟動(dòng)了一個(gè)結(jié)合無(wú)人駕駛汽車和混合現(xiàn)實(shí)技術(shù)的培訓(xùn)項(xiàng)目Race Trainer。在測(cè)試時(shí)，這個(gè)系統(tǒng)可以在學(xué)員前方的平視顯示器疊加箭頭線和制動(dòng)提示，從而引導(dǎo)他們完成一系列的課程。

與此同時(shí)，大眾也開(kāi)始在汽車駕駛項(xiàng)目中使用 HoloLens 2。但在研究如何使用增強(qiáng)現(xiàn)實(shí)耳機(jī)來(lái)教司機(jī)如何更快地繞過(guò)賽道時(shí)，大眾發(fā)現(xiàn)傳感器“暈車”了，失去了追蹤能力，全息圖也消失了。HoloLens 使用相機(jī)傳感器和慣性測(cè)量單元（IMU）來(lái)跟蹤運(yùn)動(dòng)，測(cè)量加速度和旋轉(zhuǎn)速度。但在移動(dòng)環(huán)境中，這兩個(gè)傳感器的讀數(shù)會(huì)出現(xiàn)沖突，進(jìn)而導(dǎo)致無(wú)法識(shí)別。為此，大眾汽車向微軟尋求幫助，雙方從2018年開(kāi)始了合作之旅。

防“暈車”，

HoloLens 2“移動(dòng)平臺(tái)”功能救場(chǎng)

“在經(jīng)過(guò)大量的討論后，我們了解到大眾汽車的用例，以及希望實(shí)現(xiàn)的目標(biāo)。為 HoloLens 2開(kāi)發(fā)移動(dòng)平臺(tái)功能，是首先要解決的難題。”微軟3D計(jì)算機(jī)視覺(jué)和機(jī)器學(xué)習(xí)專家 Marc Pollefeys 如是說(shuō)。

為解決這一問(wèn)題，Marc Pollefeys 團(tuán)隊(duì)開(kāi)始對(duì)傳感器之間的差異進(jìn)行建模，以支持HoloLens繼續(xù)追蹤和提供合適視圖的算法。由于 Covid-19 的限制，分布在全球各地的研究人員，以遠(yuǎn)程的方式，通過(guò)搭乘有軌電車和公共汽車、上下乘坐電梯等方式，來(lái)測(cè)試全息圖在車輛移動(dòng)時(shí)能保持恒定。

最終克服種種困難，微軟和大眾汽車聯(lián)合開(kāi)發(fā)出了 HoloLens 2移動(dòng)平臺(tái)功能，從而確保設(shè)備在移動(dòng)平臺(tái)中提供穩(wěn)定的全息圖像顯示，允許汽車在連接的 HoloLens 2 上顯示實(shí)時(shí)信息， 并將虛擬對(duì)象投放在汽車內(nèi)外部。

系統(tǒng)操作之一：3D 地圖和導(dǎo)航

HoloLens 2將虛擬地圖投影到汽車儀表板上，如導(dǎo)航箭頭和關(guān)鍵十字路口的信息。

系統(tǒng)操作之二：全息行人警告

HoloLens 2將虛擬地圖投影到汽車儀表板上，如導(dǎo)航箭頭和關(guān)鍵十字路口的信息。

系統(tǒng)操作之三：基于混合現(xiàn)實(shí)的動(dòng)態(tài)溫度調(diào)節(jié)

HoloLens 2與車輛數(shù)據(jù)直接通信，可以通過(guò)手勢(shì)調(diào)節(jié)溫度或控制氣流的強(qiáng)度和方向。

HoloLens 2的移動(dòng)平臺(tái)功能對(duì)海事公司也有很大的吸引力，能幫助他們?cè)诔龊＿^(guò)程中進(jìn)行設(shè)備故障維修。未來(lái)，微軟還將繼續(xù)完善 HoloLens 2 的功能，在電梯、火車、汽車和其他移動(dòng)環(huán)境投入使用，同時(shí)為更多的消費(fèi)者提供無(wú)縫、互聯(lián)的移動(dòng)體驗(yàn)。

關(guān)于微軟混合現(xiàn)實(shí) HoloLens 2

HoloLens 2是一款不受線纜束縛的頭戴式全息計(jì)算機(jī)，采用符合人體工程學(xué)的設(shè)計(jì)，具有企業(yè)級(jí)應(yīng)用程序，可提高用戶準(zhǔn)確性和輸出，提高組織的工作效率。利用 HoloLens 2縮短停機(jī)時(shí)間，促進(jìn)員工隊(duì)伍轉(zhuǎn)型，構(gòu)建敏捷工廠；使團(tuán)隊(duì)安全工作，縮短護(hù)理時(shí)間，遠(yuǎn)程與專家保持聯(lián)系，提供實(shí)時(shí)數(shù)據(jù)更新迭代；借助 3D 形式傳達(dá)復(fù)雜概念的課程時(shí)間，改革課程設(shè)置，開(kāi)展體驗(yàn)式學(xué)習(xí)。