2021 年的谷歌 I/O 大會(huì)發(fā)強(qiáng)勢(shì)回歸。由于去年的大會(huì)被取消,今年的 I/O 大會(huì)有很多更新進(jìn)展。本次大會(huì)采取線上的方式舉辦,從 5 月 18 日持續(xù)到 5 月 20 日,所有人都可以免費(fèi)參與,讓你足不出戶(hù),享受科技盛宴,觀眾也可查看大會(huì)開(kāi)幕式主題演講回放。
在 AR 方面,本次大會(huì)展示了在 Google 搜索,直接查找觀看運(yùn)動(dòng)員的 3D 模型,并用 AR 展示動(dòng)作的實(shí)時(shí)演示。在 AR 平臺(tái)方面,也發(fā)布了跟 ARCore 有關(guān)的最新進(jìn)程。從擴(kuò)大兼容設(shè)備,到跟蹤改進(jìn)和新功能,特別是兩個(gè)主要功能——Raw Depth API,Record and Playback API。除了 3 場(chǎng)演講,workshop 和 Codelabs 還展示了如何使用主要的 ARCore 功能,如 WebXR API、Cloud Anchors、ARCore Depth、ARCore Record and Playback,并通過(guò)代碼樣本一步步構(gòu)建一個(gè) AR 應(yīng)用。
Google 搜索加入 3D 及 AR 展示網(wǎng)球運(yùn)動(dòng)員大阪直美的動(dòng)作實(shí)時(shí)演示
ARCore 新進(jìn)更新
創(chuàng)建 ARCore 的初衷就是為了給開(kāi)發(fā)者提供操作簡(jiǎn)單,且功能強(qiáng)大的工具,幫助人們將數(shù)字世界與現(xiàn)實(shí)世界無(wú)縫融合。作為 Google 搭建的增強(qiáng)現(xiàn)實(shí)體驗(yàn)平臺(tái),ARCore 自 2017 年發(fā)布至今,成功兼容 8.5 億臺(tái)設(shè)備,讓諸多開(kāi)發(fā)者成功打造體驗(yàn)有趣的應(yīng)用程序,改變?nèi)藗冊(cè)?Google 范圍內(nèi)一起玩樂(lè)、購(gòu)物、學(xué)習(xí)、創(chuàng)造和體驗(yàn)世界的方式。
在今年的 Google I/O 大會(huì)上,我們繼續(xù)優(yōu)化并構(gòu)建 AR 開(kāi)發(fā)工具。ARCore 1.24 上線后,我們陸續(xù)推出了 Raw Depth API 和 Recording and Playback API。這些新的 API 將幫助開(kāi)發(fā)者創(chuàng)建新的 AR 體驗(yàn),并加快他們的開(kāi)發(fā)周期。
Raw Depth API——讓深度和空間意識(shí)更加真實(shí)
2020 年,Depth API 初次與大家見(jiàn)面。讓數(shù)以?xún)|計(jì)的安卓設(shè)備,無(wú)需使用專(zhuān)門(mén)的深度傳感器,就能實(shí)時(shí)生成深度圖。這些深度圖中的數(shù)據(jù)經(jīng)過(guò)平滑處理,成功填補(bǔ)了因視覺(jué)信息缺失而產(chǎn)生的空白,讓開(kāi)發(fā)者能夠輕松創(chuàng)建“遮擋”這樣的深度效果。
全新的 ARCore Raw Depth API 可以生成帶有“置信圖(corresponding confidence images)”的“原始深度圖”,從而針對(duì)場(chǎng)景中的物體,提供更詳細(xì)的幾何形狀。原始深度圖包括非平滑數(shù)據(jù)點(diǎn),置信圖則為原始深度圖中的每個(gè)像素,提供了深度估計(jì)的置信度。
Raw Depth API 改進(jìn)后的幾何圖形讓深度測(cè)量和空間意識(shí)更加精確。此外,Raw Depth API 的置信圖為開(kāi)發(fā)者提供實(shí)時(shí)過(guò)濾深度數(shù)據(jù)。例如,TikTok 最新的濾鏡讓用戶(hù)能夠上傳圖像,并將圖像包覆在真實(shí)世界的物體上。使圖像素材于現(xiàn)實(shí)物體表面高度契合。
開(kāi)發(fā)者過(guò)濾高置信度深度數(shù)據(jù)的能力對(duì)于三維物體和場(chǎng)景重建也是至關(guān)重要的。3D Live Scanner 應(yīng)用程序能夠幫助用戶(hù)掃描他們的空間并創(chuàng)建、編輯和分享 3D 模型。
除了應(yīng)用程序之外,ARCore 深度實(shí)驗(yàn)室中同樣更新了 Raw Depth API 和深度命中測(cè)試的實(shí)例。你可以在“適用于 Android 的深度 API 概述”網(wǎng)頁(yè)中上找到與之相關(guān)的更多內(nèi)容,并利用 Android 和 Unity 建構(gòu)你的 AR。
Recording Playback API——場(chǎng)景輕松復(fù)制,提升開(kāi)發(fā)速度
對(duì)于 AR 開(kāi)發(fā)者來(lái)說(shuō),一個(gè)反復(fù)出現(xiàn)的痛點(diǎn)是,需要在特定的地方和場(chǎng)景中不斷進(jìn)行測(cè)試,不但耗時(shí)耗力,許多地點(diǎn)并不允許開(kāi)發(fā)者隨時(shí)隨地進(jìn)出。此外,由于時(shí)間不同照明會(huì)存在差異和變化,不能確保傳感器在每次現(xiàn)場(chǎng)攝像時(shí)都捕捉到完全相同的信息,這就對(duì)后期開(kāi)發(fā)的調(diào)較帶來(lái)了挑戰(zhàn)。
新的 ARCore Recording and Playback API 就是針對(duì)這一挑戰(zhàn)推出的。利用這個(gè)功能,開(kāi)發(fā)者不僅可以錄制視頻片段,同時(shí)還可以記錄 IMU 和深度傳感器數(shù)據(jù)。在回放時(shí),開(kāi)發(fā)者可以回訪相同的數(shù)據(jù),真正實(shí)現(xiàn)場(chǎng)景復(fù)制,并在任何舒適的工作空間中測(cè)試體驗(yàn)。這項(xiàng)功能在非常時(shí)期,讓無(wú)法親臨現(xiàn)場(chǎng)的遠(yuǎn)端開(kāi)發(fā)測(cè)試變成了可能。
滴滴率先嘗鮮這一技術(shù),使用 Recording and Playback API 在“滴滴出行 ”App 中建立并測(cè)試 AR 指向功能。由于能完全復(fù)制場(chǎng)景及數(shù)據(jù),滴滴節(jié)省了 25% 的研發(fā)和測(cè)試成本和 60% 的差旅費(fèi)用。不僅如此,開(kāi)發(fā)周期更是縮短了 6 個(gè)月。
Post - Capture AR
除了縮短研發(fā)周期,錄制和回放還為 AR 體驗(yàn)帶來(lái)了更多的新機(jī)遇,Post-Capture AR就是基于 Recording and Playback API 的另一項(xiàng)強(qiáng)大功能:使用記錄了IMU 和深度傳感器數(shù)據(jù)的視頻,帶來(lái)不同步的 AR 體驗(yàn),消除時(shí)間和地點(diǎn)限制。例如,在放置虛擬 AR 家具時(shí),用戶(hù)不需要待在一直待在家里,只要調(diào)出家中的視頻,就能準(zhǔn)確地放置 AR 家具。通過(guò)這種方式,你可以 把 AR 帶到任何地方。
SK 電信的 Jump AR 使用 Recording and Playback API,成功將場(chǎng)景從韓國(guó)傳輸?shù)接脩?hù)家中,增強(qiáng)與文化宣傳相關(guān)的 3D AR 內(nèi)容。
新升級(jí)的 API 正在讓 ARCore 日漸強(qiáng)大,幫助開(kāi)發(fā)者打造出更加逼真的 AR 體驗(yàn)。隨著兼容設(shè)備數(shù)量增加,ARCore 讓幾乎所有擁有智能手機(jī)的人都能體驗(yàn)增強(qiáng)現(xiàn)實(shí)技術(shù)。我們期待有更多的開(kāi)發(fā)者可以利用 ARCore 進(jìn)行創(chuàng)新,讓用戶(hù)體驗(yàn) AR 的強(qiáng)大。
原文標(biāo)題:一起看 I/O|ARCore 1.24 版本上線,亮點(diǎn)更新一次看全
文章出處:【微信公眾號(hào):谷歌開(kāi)發(fā)者】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
責(zé)任編輯:haq
-
3D
+關(guān)注
關(guān)注
9文章
2843瀏覽量
107184 -
谷歌
+關(guān)注
關(guān)注
27文章
6105瀏覽量
104796 -
Ar
+關(guān)注
關(guān)注
24文章
5065瀏覽量
169003
原文標(biāo)題:一起看 I/O|ARCore 1.24 版本上線,亮點(diǎn)更新一次看全
文章出處:【微信號(hào):Google_Developers,微信公眾號(hào):谷歌開(kāi)發(fā)者】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論