從 1 月份在 CES 發(fā)布全球首款屏幕指紋手機(jī) X20 Plus UD,到 2 月份發(fā)布集超高屏占比、升降式前置攝像頭、半屏屏幕指紋等「黑科技」于一身的概念機(jī) APEX,再到兩周前發(fā)布驚艷程度不輸 APEX 的「量產(chǎn)概念機(jī)」NEX 以及剛剛展示的 vivo ToF 3D超感應(yīng)技術(shù),vivo 用一個(gè)個(gè)領(lǐng)先行業(yè)的技術(shù)在過(guò)去的幾個(gè)月持續(xù)「刷屏」。
與此同時(shí),在最近熱門(mén)的手機(jī) AI 領(lǐng)域,vivo 也做出來(lái)了不少值得一提的東西。
在今年 3 月底發(fā)布的主力產(chǎn)品 X21 上,vivo 推出了叫做 Jovi(Enjoy vivo‘s AI)的 AI 助理,包含了智慧引擎、智慧場(chǎng)景、智慧識(shí)屏、智慧桌面、智慧駕駛在內(nèi)的 5 大功能。
經(jīng)過(guò)兩個(gè)多月的努力,到了 NEX 這一代產(chǎn)品上,vivo 對(duì) Jovi 進(jìn)行了全面的升級(jí),大幅擴(kuò)充了 Jovi 的「技能包」,更加充分地利用了手機(jī)的 AI 能力。
這一切要先從一顆按鍵說(shuō)起。
一顆按鍵引發(fā)的思考
按鍵是手機(jī)交互的第一層級(jí),它高于觸摸操作,可以讓用戶在不接觸手機(jī)屏幕的情況即可完成特定的操作。
目前智能手機(jī)中最常見(jiàn)的設(shè)計(jì)是電源鍵、音量加、音量減三大「金剛」,除此之外,一些手機(jī)廠商也嘗試增加額外的按鍵讓用戶更快捷地完成部分操作,比如 iPhone 上的靜音按鍵、一加手機(jī)上的三段式模式按鍵、錘子手機(jī)的「閃念膠囊」鍵、索尼手機(jī)上的實(shí)體拍照鍵、三星手機(jī)的 Bixby 按鍵。
在 NEX 的機(jī)身左側(cè),vivo 也增加了一顆實(shí)體按鍵,叫做「Jovi AI 獨(dú)立按鍵」。
顧名思義,這顆按鍵是用來(lái)啟動(dòng) Jovi 的,具體的功能有兩個(gè):長(zhǎng)按啟動(dòng) Jovi 智能語(yǔ)音助手,短按啟動(dòng) Jovi 智慧識(shí)屏。
Jovi 智能語(yǔ)音助手
我們先從 Jovi 智能語(yǔ)音助手說(shuō)起。
大家知道,對(duì)于智能手機(jī)來(lái)說(shuō),智能語(yǔ)音助手早就算不上什么新鮮功能了,蘋(píng)果早在 2010 年發(fā)布的 iPhone 4S 上就搭載智能語(yǔ)音助手 Siri。之后,谷歌、亞馬遜、微軟、三星以及眾多國(guó)產(chǎn)手機(jī)廠商也紛紛推出了自家的語(yǔ)音助手。
作為一位「新人」,Jovi 智能語(yǔ)音助手有兩個(gè)特別的地方:第一個(gè)是喚醒方式,第二個(gè)是可實(shí)現(xiàn)的功能。
Jovi 智能語(yǔ)音助手有兩種喚醒方式,第一種是按住側(cè)面的 Jovi AI 獨(dú)立按鍵同時(shí)來(lái)說(shuō)話,第二種是用喚醒詞進(jìn)行遠(yuǎn)場(chǎng)語(yǔ)音喚醒。
Jovi 提供了兩個(gè)喚醒熱詞,分別是擬人的「小 V 小 V」和更加國(guó)際范兒的「Hi,Jovi」,用戶在錄入自己的語(yǔ)音后,即可通過(guò)自己的語(yǔ)音來(lái)喚醒 Jovi。為此,NEX 內(nèi)置了一顆專屬的 S801 AI 語(yǔ)音芯片,日常使用中可以以極低的功耗待機(jī),在聽(tīng)到用戶的聲音后快速進(jìn)行響應(yīng)。
功能方面,除了查天氣、設(shè)鬧鐘、設(shè)置日程提醒、搜索音樂(lè)、聽(tīng)新聞等語(yǔ)音助手的基本功能,Jovi 智能語(yǔ)音助手還可以完成包含了 app 內(nèi)多個(gè)步驟的復(fù)雜指令。
以生活中常見(jiàn)的微信發(fā)紅包功能為例,Jovi 智能語(yǔ)音助手已經(jīng)可以完成「給德赫亞發(fā) 5 元紅包并留言恭喜西班牙小組第一晉級(jí)」這種操作。
這句話中,包含了打開(kāi)微信、在聯(lián)系人中搜索「德赫亞」、點(diǎn)擊聯(lián)系人頭像、點(diǎn)擊發(fā)消息、點(diǎn)擊對(duì)話框右下角的加號(hào)、點(diǎn)擊紅包、在金額中輸入「5」、金額下面的對(duì)話框中輸入「恭喜西班牙小組第一晉級(jí)」、點(diǎn)擊「塞錢(qián)進(jìn)紅包」等接近 10 個(gè)步驟。
為了實(shí)現(xiàn)這個(gè)復(fù)雜的指令,除了需要強(qiáng)大的深度自然語(yǔ)言理解能力,還需要在應(yīng)用層和主流 app 進(jìn)行打通,目前 Jovi 已經(jīng)覆蓋了包括導(dǎo)航、社交、音樂(lè)、視頻、旅行、購(gòu)物、天氣、打車(chē)等在內(nèi)的多個(gè)頭部 app,包括大家熟悉的百度地圖、京東、淘寶、微信、大眾點(diǎn)評(píng)、QQ 音樂(lè)、滴滴出行等常用 app。
除了這些 vivo 官方準(zhǔn)備好的「技能包」,用戶還可以根據(jù)自己的需求來(lái)為 Jovi 語(yǔ)音助手定制屬于自己的功能。
打開(kāi) NEX 預(yù)裝的 Jovi 語(yǔ)音 app,在右上角可以看到一個(gè)「教」的字樣,點(diǎn)開(kāi)后就可以呼出 Jovi 的命令教學(xué)功能了。
在這里,用戶可以添加專屬的語(yǔ)音指令,然后為它定制自己所需要的功能,目前 Jovi 可以支持單個(gè)應(yīng)用內(nèi)的「點(diǎn)擊」以及「文本輸入」這兩種屬性的操作,已經(jīng)可以覆蓋大部分的 app 內(nèi)功能,vivo 表示之后會(huì)讓 Jovi 支持更多屬性的操作。
如果你懶得「手把手」教 Jovi,還可以直接使用 Jovi 內(nèi)建的「命令廣場(chǎng)」功能,這里匯集了用戶分享的自己教 Jovi 學(xué)會(huì)的語(yǔ)音指令。
目前「命令廣場(chǎng)」里已經(jīng)有了不少頗為實(shí)用的指令,比如「我要看世界杯」(打開(kāi)優(yōu)酷,點(diǎn)擊世界杯專題),「支付寶收能量」(打開(kāi)支付寶,點(diǎn)擊更多、財(cái)富管理、螞蟻森林),「招行信用卡還款」(打開(kāi)招商銀行,點(diǎn)擊信用卡還款)。
未來(lái),隨著 Jovi 智能語(yǔ)音助手的用戶越來(lái)越多,「命令廣場(chǎng)」的內(nèi)容會(huì)快速得到豐富,vivo 也會(huì)選擇將受用戶歡迎的指令直接集成到 Jovi 的默認(rèn)功能中,從而讓 Jovi 的功能更快速度地進(jìn)行迭代和進(jìn)化。
Jovi 智慧識(shí)屏
聊完 Jovi 智能語(yǔ)音助手,我們來(lái)看一下 NEX 側(cè)面 AI 按鍵的另外一個(gè)功能:短按呼出 Jovi 智慧識(shí)屏。
和智能語(yǔ)音助手類(lèi)似,識(shí)別屏幕內(nèi)容也不是什么新功能,比較早的嘗試可以追溯到谷歌在 Android 6.0 時(shí)發(fā)布的 Now On Tap 功能。到了 AI 時(shí)代,通過(guò)使用大量的數(shù)據(jù)對(duì)神經(jīng)網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練,手機(jī)在圖像和文本識(shí)別的速度和準(zhǔn)確性上有了巨大的提高。
NEX 搭載的是高通最新的旗艦 SoC 驍龍 845,利用配套的 AI Engine 提供的強(qiáng)大的 AI 運(yùn)算能力,NEX 可以快速完成對(duì)屏幕內(nèi)容的準(zhǔn)確識(shí)別。不過(guò)能識(shí)別出內(nèi)容只是一個(gè)前提,Jovi 智慧識(shí)屏的不同之處在于它的「智慧」部分。
在按下這顆 AI 按鍵后,Jovi 智慧識(shí)屏能夠根據(jù)屏幕上的內(nèi)容,智能地進(jìn)行識(shí)別。
當(dāng)你在查看一張花的照片的時(shí)候,Jovi 智慧識(shí)屏?xí)R(shí)別花的名稱并給出相關(guān)的信息。當(dāng)你在看一張產(chǎn)品照片的時(shí)候,Jovi 智慧識(shí)屏又會(huì)識(shí)別出產(chǎn)品的型號(hào)并列出淘寶的購(gòu)買(mǎi)鏈接。當(dāng)你在閱讀文章的時(shí)候,Jovi 智慧識(shí)屏?xí)⑽淖指鶕?jù)語(yǔ)義智能地分開(kāi),方便用戶精確選擇文字。
此外,如果屏幕上包含了多種文字信息,Jovi 智慧識(shí)屏還可以智能地對(duì)人名地名等專有名詞、電話號(hào)碼、日常安排、快遞單號(hào)等信息進(jìn)行提取,將不同類(lèi)型的信息匯總成一個(gè)個(gè)簡(jiǎn)潔清晰的小卡片,方便用戶查閱。
Jovi 智慧識(shí)屏還可以和更多的信息和功能進(jìn)行聯(lián)動(dòng),比如當(dāng)你和朋友在微信上約看電影,Jovi 智慧識(shí)屏可以智能地展示出最近的行程,電影的介紹資料、評(píng)分,甚至是去電影院的導(dǎo)航信息,所有操作均在一個(gè)界面進(jìn)行展示,大幅提高效率。
有了這些「智慧」的功能加入,Jovi 智慧識(shí)屏所能做的已經(jīng)遠(yuǎn)不是一個(gè)簡(jiǎn)單的「識(shí)屏」,而是更加接近一個(gè)無(wú)聲的個(gè)人助理,它可以根據(jù)屏幕正在顯示的信息給你自動(dòng)「整理」出你需要的東西。
智慧場(chǎng)景、智慧桌面
除了 Jovi 智能語(yǔ)音助手、Jovi 智慧識(shí)屏這兩個(gè)重要新增功能,Jovi 智慧場(chǎng)景、智慧桌面等原有的智能功能也得到了進(jìn)一步的完善。
Jovi 智慧場(chǎng)景位于通知欄的右上角,可以根據(jù)信息智能地生成卡片并在必要時(shí)推送,覆蓋的信息有天氣、交通、日常、電影、酒店、運(yùn)動(dòng)、快遞、紅包、賽事等等,而智慧桌面則位于桌面負(fù)一屏,這里包含了多種由 vivo 和第三方提供的聚合了多重信息的卡片,其中也包括了 Jovi 智能場(chǎng)景智能生成的事件。
值得一提的是,在最近的更新中,vivo 特別優(yōu)化了 Jovi 在世界杯期間的體驗(yàn)。
在 Jovi 智慧場(chǎng)景中,用戶可以實(shí)時(shí)查看賽事比分,也可以點(diǎn)擊進(jìn)去看實(shí)時(shí)的文字和視頻直播(接入的是優(yōu)酷)。此外,用戶還可以選擇自己喜愛(ài)的球隊(duì),Jovi 會(huì)根據(jù)比賽安排提醒你觀看直播,同步賽況。
在 NEX 上,vivo 還進(jìn)一步提高了 AI 對(duì)拍照相關(guān)體驗(yàn)的加成。
在拍照時(shí),NEX 可以快速識(shí)別場(chǎng)景然后進(jìn)行針對(duì)性的參數(shù)調(diào)整,在遇到逆光場(chǎng)景時(shí),NEX 可以根據(jù)場(chǎng)景只能選擇多幀合成張片的數(shù)量,進(jìn)一步提升逆光拍照效果,可以實(shí)現(xiàn)高達(dá) 11.3eV 的動(dòng)態(tài)范圍。
在 NEX 自帶的相冊(cè)中,vivo 也賦予了更多的 AI 元素,比如使用 AI 算法自動(dòng)將照片根據(jù)地點(diǎn)、時(shí)間、事件、照片親密度等維度自動(dòng)聚合,基于 AI 算法和圖像識(shí)別技術(shù)提出的關(guān)鍵詞來(lái)通過(guò)關(guān)鍵詞快速搜索照片。
AI 背后的高通 AI Engine
要實(shí)現(xiàn)以上這些和 AI 相關(guān)的功能,需要有一個(gè)強(qiáng)大的硬件平臺(tái)作為支撐,而這個(gè)支撐就是高通 AI Engine(AIE)。
今年的 2 月 21 號(hào),在 MWC 2018 開(kāi)幕前,高通正式推出了自家的人工智能引擎 AI Engine(Qualcomm Artificial Intelligence Engine,AI Engine),用于提高設(shè)備端(比如采用驍龍 SoC 的手機(jī))上 AI 相關(guān)的運(yùn)算能力。
AI Engine 包含了 3 個(gè)硬件和 3 個(gè)核心軟件,硬件部分為 CPU、GPU、DSP 三個(gè)部分,通過(guò)配套的驍龍神經(jīng)處理引擎(NPE)軟件框架,可以幫助開(kāi)發(fā)著根據(jù)任務(wù)的需要,從 DSP、GPU、CPU 中智能選擇合適的內(nèi)核。
在此基礎(chǔ)上,高通和多家算法提供商聯(lián)合推出了多個(gè)利用 AI Engine 的應(yīng)用優(yōu)化,比如商湯科技和曠視 Face++提供的多種預(yù)先訓(xùn)練的用于背景虛化、面部解鎖、場(chǎng)景識(shí)別的神經(jīng)網(wǎng)絡(luò),虹軟提供的單攝和雙攝算法,創(chuàng)通聯(lián)達(dá)針對(duì)人工智能視覺(jué)用例和終端提供完整的解決方案,而騰訊、百度等云服務(wù)廠商也在利用 AI Engine 進(jìn)行應(yīng)用優(yōu)化。
目前支持高通 AI Engine 的 SoC 有驍龍 845、835、820、660、710,早在三月份發(fā)布的 X21 上,vivo 就使用了驍龍 600 的 AI Engine 引擎,這也是行業(yè)最早使用 AI Engine 的智能手機(jī)之一。而相比起驍龍 660,NEX 旗艦版上采用的驍龍 845 在 AI 性能上又有了數(shù)倍的提升,為 NEX 的 AI 功能提供了更加充裕的硬件基礎(chǔ)。
除了高通,在 NEX 的 AI 方案中,還可以看到很多行業(yè)頭部「玩家」的名字。
在語(yǔ)音方面,vivo NEX 搭載了由「婁氏公司」提供的聲音采集、話筒、音響等硬件處理芯片,這讓 NEX 成為全球唯一一家配置語(yǔ)音硬件芯片的手機(jī),為 Jovi 智能語(yǔ)音助手的體驗(yàn)打下了更好的硬件基礎(chǔ)。此外,vivo 還與國(guó)內(nèi)的訊飛和百度達(dá)成合作,來(lái)提高 NEX 的自然語(yǔ)言理解能力,讓 NEX 可以識(shí)別復(fù)雜的語(yǔ)音指令。
以解決用戶需求為出發(fā)點(diǎn)的實(shí)用派 AI
過(guò)去一年里,手機(jī)行業(yè)有兩個(gè)趨勢(shì)最為顯著,一個(gè)是屏占比的不斷提高,一個(gè)是全面的 AI 化。
相比起屏占比提高帶來(lái)的視覺(jué)沖擊,手機(jī) AI 帶來(lái)的體驗(yàn)要「隱性」不少,甚至在一些手機(jī)廠商前期對(duì) AI 的過(guò)度宣傳下,一度被不少消費(fèi)者認(rèn)為是個(gè)「噱頭」。不過(guò)在高通、海思等上游廠商以及 vivo 等手機(jī)廠商的聯(lián)合推動(dòng)下,手機(jī) AI 正在快速發(fā)展,AI 對(duì)用戶日常體驗(yàn)的加成正在越來(lái)越明顯。
在這一波的手機(jī) AI 大潮中,vivo 是行動(dòng)最早、重視程度最高的廠商之一。在保持技術(shù)前瞻性的同時(shí),vivo 在 AI 應(yīng)用上更加強(qiáng)調(diào)解決用戶的實(shí)際需求。
這次 NEX 上搭載的 Jovi 智能語(yǔ)音助手和 Jovi 智慧識(shí)屏就是兩個(gè)典型的應(yīng)用,語(yǔ)音助手和識(shí)屏都不是開(kāi)創(chuàng)性的功能,不過(guò)通過(guò)和 AI 的結(jié)合,vivo 把它落地成了更多實(shí)用的功能,讓用戶可以通過(guò)方便地按下手機(jī)側(cè)面的獨(dú)立按鍵,通過(guò)語(yǔ)音或識(shí)屏的方式更高效地完成很多日常生活中的高頻操作。
NEX 的 Jovi 體現(xiàn)了 vivo 這家樂(lè)于和用戶溝通的手機(jī)廠商在產(chǎn)品研發(fā)時(shí)對(duì)用戶的「關(guān)懷」,而對(duì)于現(xiàn)在的手機(jī) AI 來(lái)說(shuō),這種實(shí)用派 AI 可能也是目前最合適的落腳點(diǎn)了。
-
AI
+關(guān)注
關(guān)注
87文章
29435瀏覽量
267747 -
vivo
+關(guān)注
關(guān)注
12文章
3287瀏覽量
62991 -
語(yǔ)音助手
+關(guān)注
關(guān)注
7文章
235瀏覽量
26781
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論