0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于芯片的AI攝影到底有哪些體驗(yàn)?zāi)兀?/h1>

在咱們身邊,有一個(gè)鐵打的定律,那就是一個(gè)東西或者名稱火了,馬上就會(huì)群起而模仿之。久而久之,這種“微創(chuàng)新”甚至“不用創(chuàng)新”的方式,被國(guó)人冠名為“山寨文化”。

互聯(lián)網(wǎng)領(lǐng)域則更是如此,團(tuán)購(gòu)火了能百團(tuán)大戰(zhàn),O2O火了能全面“開O”,共享經(jīng)濟(jì)火了,愣是連男友女友都能“共享”。

山寨得多,就連技術(shù)都可以山寨。比如到了今年,全面屏等技術(shù)普及之后,AI似乎成為了各手機(jī)廠商普遍希望蹭到的熱點(diǎn)。

那么問(wèn)題來(lái)了,到底實(shí)現(xiàn)AI有哪些方法,各種方法最終又會(huì)得到什么結(jié)果呢?讓我們先從攝影說(shuō)起,聊一聊手機(jī)AI攝影的三個(gè)流派。

流派一:用芯片提供AI攝影通用加速

去年,華為發(fā)布了搭載NPU的麒麟970芯片開始,之后蘋果也公開了A11仿生神經(jīng)芯片。從后來(lái)華為、榮耀的相關(guān)搭載產(chǎn)品,以及蘋果iPhoneX來(lái)看,基于AI專用芯片來(lái)實(shí)現(xiàn)手機(jī)的AI攝影功能,是這類手機(jī)的核心AI能力。

這可以看做是手機(jī)AI攝影的第一個(gè)流派:芯片派。

從底層芯片開始做AI處理能力。有兩個(gè)層面的目的,一是在硬件里完成終端AI計(jì)算,可以保證攝像任務(wù)的實(shí)時(shí)性和安全性。畢竟攝影任務(wù)上傳到云端計(jì)算有卡頓可能,斷網(wǎng)后無(wú)法工作,圖片上傳服務(wù)器面臨的數(shù)據(jù)危險(xiǎn)也是顯而易見的。

另一方面,芯片派容易被忽略的目的,在于對(duì)AI攝影任務(wù)進(jìn)行通用加速。比如有的玩法要人臉識(shí)別,有的直播要讀取動(dòng)作指令,有的濾鏡要搞空間處理,把這些全擠在CPUGPU上手機(jī)馬上會(huì)進(jìn)入龜速狀態(tài),用云處理無(wú)法支持不說(shuō),更喪失了實(shí)時(shí)體驗(yàn)。APP的攝影需求有千千萬(wàn),目前來(lái)看只有在終端有AI處理單元才能滿足這些“未知需求”。

說(shuō)到底,基于芯片的AI攝影到底有哪些體驗(yàn)?zāi)兀?/p>

華為Mate10、榮耀V10以及iPhone X的能力數(shù)據(jù)說(shuō)明,AI攝影可以體現(xiàn)在識(shí)別、動(dòng)作捕捉、光影分析、AR等幾個(gè)方面。

比如iPhoneX利用A11仿生芯片,可以與結(jié)構(gòu)光傳感器、深度陀螺儀進(jìn)行結(jié)合,處理人臉、AR等任務(wù),并可以快速處理圖像識(shí)別。

接下來(lái),榮耀、華為的新產(chǎn)品,以及新一代iPhone必然會(huì)繼續(xù)這條路。

這個(gè)流派的優(yōu)點(diǎn)在于,用戶可以體驗(yàn)到AI的多樣化和增長(zhǎng)性,手機(jī)里不是一成不變的AI體驗(yàn),而是可以隨著生態(tài)和技術(shù)的發(fā)展不斷進(jìn)化。但問(wèn)題是芯片流的門檻很高,需要研發(fā)的巨大投入和長(zhǎng)達(dá)幾年的等待周期。

流派二:基于攝像頭搞AI

第二個(gè)AI手機(jī)攝影流派,不能不提到讓人愛恨糾葛的谷歌。

眾所周知,谷歌是不大力押注硬件技術(shù)的,而是在戰(zhàn)略上選擇強(qiáng)打AI算法優(yōu)勢(shì)和云計(jì)算強(qiáng)項(xiàng)。這個(gè)被谷歌稱為AI First的戰(zhàn)略,已經(jīng)體現(xiàn)在谷歌各種穿戴、家庭以及移動(dòng)設(shè)備上,其中pixel系列手機(jī)也不例外。

去年推出的谷歌pixel2,給出了一個(gè)非常特別的AI攝影模式,它沒有專屬的AI芯片,卻利用算法和AI圖像處理單元完成了動(dòng)態(tài)模糊攝影等攝影能力的補(bǔ)償。甚至把攝像頭切割成非常復(fù)雜的成像單元,來(lái)供給算法端實(shí)現(xiàn)對(duì)景深、空間感的AI計(jì)算。

這種“吃力不討好”的方式,大概也只有谷歌會(huì)做。背后的核心原因,一方面是谷歌希望用戶適應(yīng)所有數(shù)據(jù)都上傳到谷歌云的生活方式,另一方面也是希望加強(qiáng)AI優(yōu)勢(shì)的商業(yè)化通道。

谷歌手機(jī)的AI秘訣,不在底層芯片里,而是在攝像頭區(qū)域里藏了一顆專用圖像處理協(xié)處理器,即ImageProcessing Unit (IPU),專門用來(lái)結(jié)合云計(jì)算與算法集群處理AI拍照與視頻任務(wù)。

但這樣做的問(wèn)題是圖像任務(wù)會(huì)在專門的部件里處理,并且極大程度依賴云計(jì)算。但確實(shí)一定程度上繞開了開發(fā)芯片的難度,彌補(bǔ)了谷歌硬件上的弱勢(shì)。這種劍走偏鋒,讓手機(jī)各部件自行AI的思路,有賴于谷歌強(qiáng)絕天下的算法積累,以及云計(jì)算處理能力。缺點(diǎn)是:除了谷歌大概沒有人可以嘗試。

流派三:搞個(gè)帶算法的APP算了

在手機(jī)AI概念火熱起來(lái)之后,國(guó)內(nèi)手機(jī)廠商似乎很快就按耐不住了。雨后春筍版的“AI攝影”字樣應(yīng)運(yùn)而生,于是也催生了AI攝影的第三個(gè)流派:APP派。

所謂APP派很好理解,想一想我們用的各種美顏拍照相機(jī)、動(dòng)態(tài)美顏錄制應(yīng)用等等,這些能力,在今天基本都要用到AI算法來(lái)實(shí)現(xiàn)更好的效果。比如美圖秀秀旗下的美圖相機(jī),就是在APP里集成了機(jī)器學(xué)習(xí)算法,用來(lái)識(shí)別拍攝人像和背景、光源間的關(guān)系,從而把人像分離出來(lái)。

假如把這種基于算法的“AI應(yīng)用”或者“AI濾鏡”,直接搭載到產(chǎn)品攝像頭里,說(shuō)這是AI攝影功能,行不行呢?

好像,大概,可能,也可以吧?

前不久,紅米Note5主打了所謂“千元AI雙攝”打開了這場(chǎng)關(guān)于AI的宣傳戰(zhàn)序幕。隨后vivo X21也以AI攝影能力作為宣傳。從產(chǎn)品說(shuō)明中可見,這兩部手機(jī)的解決方案基本就是上文所說(shuō)的“AI濾鏡”模式:開發(fā)具有一定識(shí)別特性的攝影功能,然后在不卡的前提下部署在手機(jī)中就可以了。

剛剛發(fā)布的小米Mix2S,也是走這種解決方案。即在手機(jī)相機(jī)中初始化搭載“美圖相機(jī)”之類APP的算法功能。比如場(chǎng)景識(shí)別拍照、用機(jī)器學(xué)習(xí)進(jìn)行人臉和人體輪廓識(shí)別,自動(dòng)進(jìn)行背景虛化和摳圖等等。

這類手機(jī)的問(wèn)題,在于芯片和攝像頭中缺乏專項(xiàng)處理AI任務(wù)的單元,一旦運(yùn)行高負(fù)載的AI任務(wù)就需要呼喚云端。而云端的響應(yīng)速度不夠,就可能導(dǎo)致AI攝影的識(shí)別率和準(zhǔn)確率下降。

舉個(gè)例子,處理夜拍效果時(shí),手機(jī)需要運(yùn)用光源捕捉、空間捕捉等AI算法,從而實(shí)現(xiàn)夜晚中清晰拍照和光源還原。

而這類APP派假如要加載夜拍類的AI應(yīng)用就有點(diǎn)尷尬了。因?yàn)檫@類深度學(xué)習(xí)的負(fù)載很大,用傳統(tǒng)移動(dòng)芯片+云計(jì)算來(lái)跑這類AI拍攝任務(wù),會(huì)出現(xiàn)黑夜一層層褪去,半天無(wú)法對(duì)焦。拍照之后又要上傳到云端進(jìn)行很長(zhǎng)時(shí)間“處理”,精準(zhǔn)度和體驗(yàn)都很差。而一旦沒網(wǎng)就更麻煩了。所以我們能看到的是,目前大部分國(guó)產(chǎn)手機(jī)宣傳所謂的AI拍照時(shí),都絕口不提夜拍、動(dòng)作捕捉等復(fù)雜任務(wù)。

于是,這個(gè)流派中消費(fèi)者看到的宣傳材料里的“AI拍照”,也就變成了整個(gè)手機(jī)的全部AI能力。其實(shí)這些能力弄個(gè)不算太差的手機(jī)下載個(gè)相關(guān)APP就可以實(shí)現(xiàn)了,單獨(dú)作為一款產(chǎn)品的主要宣傳材料就有點(diǎn)奇怪。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 芯片
    +關(guān)注

    關(guān)注

    452

    文章

    49937

    瀏覽量

    419591
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    29350

    瀏覽量

    267631
  • iphonex
    +關(guān)注

    關(guān)注

    3

    文章

    614

    瀏覽量

    30460

原文標(biāo)題:AI手機(jī)攝影暗藏三大流派,其中一類是假AI

文章出處:【微信號(hào):worldofai,微信公眾號(hào):worldofai】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    CMOS運(yùn)放的輸入阻抗到底有多高

    都說(shuō)CMOS運(yùn)放輸入阻抗高,到底有多高?可有一個(gè)量化指標(biāo)?
    發(fā)表于 09-06 06:59

    求助,這個(gè)電路U1A運(yùn)放同相端的R1電阻到底有什么作用?。?/a>

    想問(wèn)下這個(gè)電路U1A運(yùn)放同相端的R1電阻到底有什么作用?。亢苡魫?。
    發(fā)表于 08-27 07:09

    無(wú)人機(jī)智能巡檢系統(tǒng)到底有哪些作用

    系統(tǒng)到底有哪些作用? 無(wú)人機(jī)智能巡檢系統(tǒng)主要由無(wú)人機(jī)、無(wú)人機(jī)機(jī)庫(kù)、AI算法、紅外相機(jī)、紅外傳感器、無(wú)人機(jī)智能巡檢平臺(tái)等設(shè)備共同構(gòu)成,這些設(shè)備能夠?qū)崟r(shí)收集并傳輸巡檢圖像和視頻信息至系統(tǒng)后臺(tái),極大提升了巡檢的效率和
    的頭像 發(fā)表于 08-19 16:49 ?196次閱讀
    無(wú)人機(jī)智能巡檢系統(tǒng)<b class='flag-5'>到底有</b>哪些作用

    網(wǎng)線到底有多少種連接器

    我們?cè)谡務(wù)摼W(wǎng)線的時(shí)候,聊得最多的,一定是它的連接器,它在連接過(guò)程中扮演著極為重要的角色。網(wǎng)線到底有多少種連接器?本期我們將從工業(yè)級(jí)使用出發(fā),來(lái)看看這根似乎普通的網(wǎng)線,在連接器上有多么努力。
    的頭像 發(fā)表于 01-26 10:06 ?518次閱讀

    AD7280AWBSTZ和AD7280ABSTZ之間到底有什么區(qū)別?

    替代嗎?在網(wǎng)上找到的兩個(gè)芯片的相關(guān)數(shù)據(jù)都是一樣的,AD7280AWBSTZ和AD7280ABSTZ之間到底有什么區(qū)別?
    發(fā)表于 01-08 06:36

    COB與SMD到底有什么不同?

    COB與SMD到底有什么不同?? COB和SMD是兩種常見的電子元器件封裝技術(shù)。它們?cè)陔娮有袠I(yè)中被廣泛應(yīng)用,尤其在LED照明領(lǐng)域。雖然它們都用于將芯片連接到電路板上,但它們?cè)诜庋b技術(shù)和應(yīng)用方面有一些
    的頭像 發(fā)表于 12-29 10:34 ?1561次閱讀

    什么是靜態(tài)IP地址?什么是DHCP?DHCP與靜態(tài)IP到底有何區(qū)別

    什么是靜態(tài)IP地址?什么是DHCP?DHCP與靜態(tài)IP到底有何區(qū)別?DHCP與靜態(tài)IP地址哪個(gè)好? 靜態(tài)IP地址是為網(wǎng)絡(luò)設(shè)備(如計(jì)算機(jī)、服務(wù)器、路由器等)手動(dòng)配置的固定IP地址。它不會(huì)改變,除非
    的頭像 發(fā)表于 12-27 14:09 ?5526次閱讀

    到底有哪些原因會(huì)導(dǎo)致電樞絕緣阻值為零?

    對(duì)電機(jī)多大影響,現(xiàn)在這樣用能安全使用多長(zhǎng)時(shí)間,為什么電樞會(huì)是零,到底有哪些原因會(huì)導(dǎo)致電樞絕緣阻值為零?
    發(fā)表于 12-14 08:30

    dB到底有多少種不同的含義?

    此同時(shí),我們?cè)诤芏嘤性肼暠O(jiān)控的十字路口也可以看到這樣的指示牌:目前路口噪音60dB。那么dB到底有多少種不同的含義? 首先要說(shuō)到dB的起源,所謂dB,指的就是Deci-Bel,也就是1/10個(gè)“Bell
    發(fā)表于 11-27 08:26

    電阻的作用到底有哪些

    電阻作為電子電路最基本的元器件,被應(yīng)用在各個(gè)電子電路中。 那為什么電阻可以應(yīng)用在電子電路的各個(gè)地方?它的作用到底有哪些?本篇文章將會(huì)做一個(gè)精講。 根據(jù)官方對(duì)于電阻的百科是——導(dǎo)體對(duì)電流的阻礙作用
    的頭像 發(fā)表于 11-06 11:43 ?1287次閱讀
    電阻的作用<b class='flag-5'>到底有</b>哪些

    請(qǐng)問(wèn)MSP430到底有幾個(gè)時(shí)鐘呀?

    請(qǐng)問(wèn)MSP430到底有幾個(gè)時(shí)鐘呀
    發(fā)表于 11-03 06:36

    COB與SMD到底有什么不同

    如今在應(yīng)用領(lǐng)域,COB和SMD兩種技術(shù)正在“平分春色”,但在微小間距LED領(lǐng)域,COB正在成為各大廠商都在爭(zhēng)相研發(fā)的行業(yè)主流技術(shù)。那么COB與SMD到底有什么不同?
    的頭像 發(fā)表于 11-02 09:37 ?2363次閱讀
    COB與SMD<b class='flag-5'>到底有</b>什么不同

    同步整流和非同步整流到底有什么差別?

    同步整流和非同步整流到底有什么差別? 在電子電路中,整流電路是非常重要的一部分。整流電路的主要作用是將交流信號(hào)轉(zhuǎn)換為直流信號(hào),以便進(jìn)一步處理。整流電路通常使用二極管組成,其中有兩個(gè)主要類型,同步
    的頭像 發(fā)表于 10-31 14:43 ?1377次閱讀

    服務(wù)機(jī)器人的核心技術(shù)到底有哪些

    機(jī)器人的基本架構(gòu)通常包括中央處理器 (CPU)、電源/電池管理單元、電池充電器、無(wú)線通信 (COM) 模塊、人機(jī)界面 (HMI)、傳感器及驅(qū)動(dòng)模塊(刷和無(wú)刷電機(jī))。那么,服務(wù)機(jī)器人的核心技術(shù)到底有哪些?
    發(fā)表于 10-26 10:23 ?511次閱讀
    服務(wù)機(jī)器人的核心技術(shù)<b class='flag-5'>到底有</b>哪些

    什么是ESD器件和TVS管?它們到底有什么作用?何區(qū)別?

    什么是ESD器件和TVS管?它們到底有什么作用?何區(qū)別? ESD器件和TVS管都是電子保護(hù)器件,但它們的作用和應(yīng)用場(chǎng)景略有不同。ESD(Electrostatic Discharge)器件主要
    的頭像 發(fā)表于 10-24 10:25 ?2237次閱讀