谷歌開(kāi)發(fā)者大會(huì)：ARCore新增迅速放置API等功能

2020谷歌開(kāi)發(fā)者大會(huì)開(kāi)啟，AR軟件工程總監(jiān)王啟文發(fā)布ARCore最新動(dòng)態(tài)

VR陀螺11月18日消息，Google 開(kāi)發(fā)者大會(huì) （Google Developer Summit） 是谷歌面向開(kāi)發(fā)者展示最新產(chǎn)品和平臺(tái)的年度盛會(huì)。2020 Google 開(kāi)發(fā)者大會(huì)于 11 月 16 日 至 21 日舉行，這是谷歌首次以全線(xiàn)上大會(huì)的形式與中國(guó)開(kāi)發(fā)者相聚。本次大會(huì)以“代碼不止”為主題，介紹了相關(guān)產(chǎn)品更新以及一系列面向本地開(kāi)發(fā)者的技術(shù)支持內(nèi)容，旨在賦能開(kāi)發(fā)者高效創(chuàng)新、持續(xù)不斷地創(chuàng)造愉悅的產(chǎn)品體驗(yàn)。

其中，11月16日，谷歌軟件工程總監(jiān)王啟文（Leon Wang）發(fā)表了關(guān)于“ARCore為用戶(hù)創(chuàng)造有效的AR體驗(yàn)”的主題演講。

王啟文Leon是 Google AR 團(tuán)隊(duì)的軟件工程總監(jiān)，主管ARCore 的機(jī)器感知算法項(xiàng)目，如運(yùn)動(dòng)跟蹤和深度感知等技術(shù)的開(kāi)發(fā)。加入 Google 之前，他在 Microsoft， Facebook 和 Pinterest 先后擔(dān)任過(guò)工程經(jīng)理。Leon擁有麻省理工學(xué)院計(jì)算機(jī)科學(xué)的學(xué)士和碩士學(xué)位。

首先，王啟文強(qiáng)調(diào)了AR作為一種視覺(jué)沉浸式媒介，能夠吸引人們的注意力，是一種體驗(yàn)信息的新方式，并最終推動(dòng)用戶(hù)的行動(dòng)。而谷歌發(fā)布于2018年的ARCore是AR開(kāi)發(fā)者平臺(tái)，提供了簡(jiǎn)單而強(qiáng)大的工具，為Android和iOS用戶(hù)創(chuàng)造有效的AR體驗(yàn)。目前已被應(yīng)用在7億臺(tái)設(shè)備和成千上萬(wàn)款app上，并且已獲得一些更新。

其中，王啟文介紹了包括美圖、滴滴、有道少兒詞典的中國(guó)開(kāi)發(fā)者如何使用ARCore提高產(chǎn)品的性能和體驗(yàn)。

美圖公司利用ARCore的增強(qiáng)面孔API（Augmented Faces API）構(gòu)建了100多個(gè)自拍濾鏡，就是現(xiàn)在我們?cè)贐eautyPlus上可以體驗(yàn)到的AR特效，用戶(hù)可以拍攝照片和視頻與朋友分享。

增強(qiáng)面孔API（Augmented Faces API）從2D圖像中生成3D網(wǎng)格，可追蹤嘴部動(dòng)作、眨眼、點(diǎn)頭和一些復(fù)雜的細(xì)節(jié)。

滴滴的ARCore導(dǎo)航功能幫助乘客在火車(chē)站、商場(chǎng)和機(jī)場(chǎng)等大型公共區(qū)域找到司機(jī)。滴滴地圖中加入了AR路標(biāo)，15%的用戶(hù)使用AR來(lái)引導(dǎo)他們找到訂單司機(jī)，80%的用戶(hù)給出好評(píng)。

有道少兒詞典應(yīng)用使用AR來(lái)幫助孩子們以一種有趣和吸引人的方式學(xué)習(xí)新單詞。該應(yīng)用將“三角龍Triceratops ”等單詞與其3D模型在AR中配對(duì)，父母可以把AR畫(huà)面錄制或拍照，方便日后成為孩子們可參考的學(xué)習(xí)材料。

另外，ARCore的新增功能如下：

迅速放置API（Instant Placement API）

一般來(lái)說(shuō)，用戶(hù)在空間中放置過(guò)ar對(duì)象時(shí)，需要先用手機(jī)掃描周?chē)沫h(huán)境，完成3D表面檢測(cè)。但這個(gè)過(guò)程將耗費(fèi)一些時(shí)間和精力。實(shí)際上，在大多數(shù)情況下，我們不需要知道AR對(duì)象確切的3D位置也可以正確地呈現(xiàn)它。

借助迅速放置API和幾行代碼，開(kāi)發(fā)人員可讓用戶(hù)將AR對(duì)象錨定到2D圖像中，而不需要確切知道AR對(duì)象具體的3D位置。如果需要更精確的比例，可以針對(duì)3D位置進(jìn)行三角測(cè)量。

景深應(yīng)用API（Depth API）

景深A(yù)PI可以從單個(gè)RGB相機(jī)生成地圖。原理是通過(guò)不同角度拍攝多張圖像，并在移動(dòng)手機(jī)時(shí)進(jìn)行比較，以估計(jì)到每個(gè)像素的距離。盡管只有一個(gè)RGB相機(jī)，添加了景深傳感器（如飛行時(shí)間傳感器），會(huì)讓景深地圖效果更好。

景深可以通過(guò)多種方式增強(qiáng)AR真實(shí)感，“遮擋”是其中一種景深應(yīng)用，即隱藏?cái)?shù)字物體在現(xiàn)實(shí)世界中被遮擋的部分，從而使它們看上去像是在現(xiàn)實(shí)場(chǎng)景中真實(shí)存在。

另一種是“表面交互”，即在設(shè)備中的世界里，添加3D層面的計(jì)算，可以實(shí)現(xiàn)與現(xiàn)實(shí)物品表面的交互，比如創(chuàng)意AR對(duì)象，并在其表面設(shè)計(jì)反彈和飛濺的動(dòng)作。此功能可以用于開(kāi)發(fā)新的交互式游戲機(jī)制，使玩家能夠躲在真實(shí)物體的后面。Snapchat的Dancing Hotdog和Undersea World Lens效果都使用了景深。

Persistent Cloud Anchors API

Cloud Anchors API可用于與多個(gè)用戶(hù)共享ar對(duì)象。在相同物理空間中的不同位置同時(shí)查看這些對(duì)象并與之交互，AR內(nèi)容也因此可使用更長(zhǎng)時(shí)間。

這相當(dāng)于一個(gè)“保存按鈕”，人們可以基于相同的AR體驗(yàn)進(jìn)行創(chuàng)作并進(jìn)行反復(fù)修改。比如，Sybo和iDreamSky的Mark應(yīng)用采用了該功能，人們可以在現(xiàn)實(shí)世界中與朋友一起創(chuàng)建、發(fā)現(xiàn)和共享ar藝術(shù)。

Epic Games收購(gòu)實(shí)時(shí)人臉動(dòng)畫(huà)公司Hyprsense

Epic Games本周收購(gòu)實(shí)時(shí)人臉動(dòng)畫(huà)公司Hyprsense，該公司關(guān)注于能將面部動(dòng)作實(shí)時(shí)轉(zhuǎn)換為動(dòng)畫(huà)3D形象的人臉捕捉運(yùn)動(dòng)。

Hyprsense前身為Binary VR，該公司最開(kāi)始從事VR解決方案，用懸掛在VR頭顯前方的3D紅外線(xiàn)捕捉相機(jī)準(zhǔn)確捕捉面部運(yùn)動(dòng)數(shù)據(jù)，并在2017年交付用于原始Oculus Rift 、HTC Vive等頭顯的開(kāi)發(fā)套件。

現(xiàn)在，三年過(guò)去了，該公司更名為Hyprsense于本周被Epic Games收購(gòu)。雖然Hyprsense不再是一家專(zhuān)注于VR的企業(yè)，但其使用的技術(shù)能通過(guò)手機(jī)攝像頭進(jìn)行實(shí)時(shí)面部動(dòng)作捕捉，然后將其轉(zhuǎn)換為手機(jī)屏幕上的實(shí)時(shí)3D動(dòng)畫(huà)，如下所示。

其原理類(lèi)似于Instagram和Facebook等社交媒體應(yīng)用程序中的AR臉部追蹤技術(shù)，Hyprsense在此基礎(chǔ)上向前邁了一步，允許用戶(hù)使用高度相似的3D頭像來(lái)替代用戶(hù)的臉部。

Epic Games首席技術(shù)官Kim Libreri在一份聲明中說(shuō)：“Hyprsense團(tuán)隊(duì)的加入有助于我們繼續(xù)推動(dòng)數(shù)字角色創(chuàng)新，朝著讓所有創(chuàng)作者能盡情表達(dá)其創(chuàng)意的目標(biāo)靠近?！?/p>

Epic表示，Hyprsense團(tuán)隊(duì)的主要工作是與其合作進(jìn)行游戲開(kāi)發(fā)和數(shù)字人類(lèi)項(xiàng)目的工作，這將加快Epic為開(kāi)發(fā)人員和玩家構(gòu)建更好的新工具和系統(tǒng)的過(guò)程。

2020年11月評(píng)論數(shù)和評(píng)分最高的Quest游戲與應(yīng)用程序

雖然Oculus并沒(méi)有公開(kāi)多少信息供大家了解各個(gè)應(yīng)用程序在其VR商店中的表現(xiàn)，但通過(guò)查看應(yīng)用程序之間的相互關(guān)系，可以獲得一些信息。以下是截至2020年11月排名前20的Oculus Quest游戲和應(yīng)用程序快照。

為什么要發(fā)布這些數(shù)據(jù)？

雖然SteamVR庫(kù)擁有全面的跟蹤數(shù)據(jù)庫(kù)，但卻并沒(méi)有類(lèi)似數(shù)據(jù)庫(kù)存來(lái)跟蹤Oculus商店的應(yīng)用程序。因此，我們發(fā)布這些數(shù)據(jù)以讓用戶(hù)、開(kāi)發(fā)人員和分析師深入了解Oculus應(yīng)用程序的前景。

做一個(gè)簡(jiǎn)要的介紹：

付費(fèi)與免費(fèi)的應(yīng)用程序分開(kāi)評(píng)定

參評(píng)應(yīng)用程序的評(píng)論數(shù)量需達(dá)到100條及以上

四舍五入的評(píng)分會(huì)讓部分應(yīng)用程序評(píng)分相同，但其排名按精確評(píng)分排序

最受好評(píng)的付費(fèi)Oculus Quest應(yīng)用程序

每款應(yīng)用程序的評(píng)分反映了用戶(hù)的綜合評(píng)論與大家對(duì)每款游戲的接受程度。

評(píng)分?jǐn)?shù)量最多的付費(fèi)Oculus Quest應(yīng)用程序

一般通過(guò)評(píng)分?jǐn)?shù)量便可大致了解每款游戲的相對(duì)銷(xiāo)量，數(shù)量高的游戲很可能比低的游戲賣(mài)得好。不過(guò)這樣的判斷方式肯定存在一定誤差。

最受好評(píng)的免費(fèi)Oculus Quest應(yīng)用程序

評(píng)分?jǐn)?shù)量最多的免費(fèi)Oculus Quest應(yīng)用程序

《假期模擬器》增加Quest手部追蹤支持

11月17日，《假期模擬器》（Vacation Simulator）開(kāi)發(fā)者Owlchemy Labs的首席執(zhí)行官Devin Reimer在Twitter上發(fā)布了一段視頻，其中顯示了《假期模擬器》的場(chǎng)景，我們可以看到該游戲增加了手部跟蹤支持，測(cè)試者在視頻中比出了勝利手勢(shì)和大拇指。

Owlchemy的游戲我們都非常熟悉，因此玩家大概能很快識(shí)別出來(lái)手勢(shì)識(shí)別的穩(wěn)定性。雖然Oculus Quest手勢(shì)追蹤功能已推出，但是除了《里奇的木板體驗(yàn)》（Richie‘s Plank Experience），《巫師圓舞曲》（Waltz of the Wizard）和《虛擬桌面》（Virtual Desktop）之外，并沒(méi)有其他游戲支持手部追蹤功能。

Owlchemy的《假期模擬器》和《工作模擬器》（Job Simulator）目前都登陸了Oculus Quest，并且最近針對(duì)Oculus Quest 2進(jìn)行了增強(qiáng)。這兩款游戲的v23版本更新部分包括視覺(jué)上的升級(jí)，刪除了偏重的渲染，并在Quest 2上支持90Hz。

《假期模擬器》 最近還提供了免費(fèi)的“Back to Job”擴(kuò)展功能，這是將模擬器系列第一部《工作模擬器》中的部分機(jī)制添加到了《假期模擬器》 中去，提高游戲的趣味性。

《Echo Arena》VR電競(jìng)聯(lián)賽第三賽季將于2021年1月開(kāi)賽

VR大師賽（VR Master League，簡(jiǎn)稱(chēng)“VRML”）的《Echo Arena》電競(jìng)聯(lián)賽第三賽季將于2021年1月開(kāi)始舉行，其結(jié)構(gòu)和形式與往屆相比會(huì)有所擴(kuò)展。

聯(lián)賽具體時(shí)間是從1月4日開(kāi)始，一直持續(xù)到5月2日，決賽定在5月8-9日和5月14-15日舉行。

作為新賽季擴(kuò)展的一部分，VRML Echo Arena Discord頻道已在本周開(kāi)放，它將作為玩家和社區(qū)領(lǐng)導(dǎo)人監(jiān)督聯(lián)盟的樞紐。頻道將安排花名冊(cè)、提供討論聯(lián)賽規(guī)則的場(chǎng)地等。

新賽季還將引入晉級(jí)/降級(jí)模式，該規(guī)則在游戲商店Discord中的概述如下：

“大師賽將以循環(huán)賽制進(jìn)行，后續(xù)賽則采用階梯賽制。本賽季將有多輪比賽，每輪都以挑戰(zhàn)者杯結(jié)束。挑戰(zhàn)者杯將由排名倒數(shù)2位的大師隊(duì)和排名前4位的鉆石隊(duì)來(lái)決定哪些團(tuán)隊(duì)將有資格參加大師賽和階梯賽?！?/p>

之前的《Echo Arena》電競(jìng)聯(lián)賽都在Twitch以及Oculus Venues上進(jìn)行了現(xiàn)場(chǎng)直播，VR用戶(hù)能在虛擬社交環(huán)境中觀(guān)看比賽。VRML還為其他競(jìng)技類(lèi)VR游戲比如第一人稱(chēng)射擊游戲《Onward》組織聯(lián)盟。

于幾個(gè)月前上線(xiàn)Oculus Quest平臺(tái)的《Echo Arena》采用競(jìng)技類(lèi)多人游戲模式，該游戲源自2017年在Rift推出的《Lone Echo》中獨(dú)立的單人游戲故事。

有興趣參加第三季聯(lián)賽的玩家，現(xiàn)可在VRML Echo Arena Discord網(wǎng)站創(chuàng)建帳戶(hù)，并加入VRML Echo Arena Discord服務(wù)器。

責(zé)任編輯：PSY