?
2017年9月,蘋果推出第一部具有3D視覺功能的iPhone X,其最大的亮點(diǎn)就在于Face ID。劉海屏里藏著的Flood illuminator (泛光感應(yīng)元件),可以投射出人眼看不到的光,并讀取用戶臉部的3D幾何結(jié)構(gòu)圖,且蘋果還為此開發(fā)了Neural Engine(神經(jīng)引擎),用神經(jīng)網(wǎng)絡(luò)處理和點(diǎn)陣模式,建立人臉數(shù)學(xué)模型。
(iPhone X原深度攝像頭系統(tǒng))
除了Face ID,蘋果還實(shí)現(xiàn)了臉部動(dòng)態(tài)AR貼紙以及動(dòng)態(tài)追蹤人臉表情的Animoji等等。3D建模賽道悄悄拉開了序幕,各大手機(jī)廠商依次進(jìn)場(chǎng)。
2018年6月,OPPO發(fā)布OPPO Find X,搭載由礦視提供3D結(jié)構(gòu)光技術(shù);vivo在MDC發(fā)布TOF 3D超感應(yīng)技術(shù),由曠視科技提供3D人臉建模算法支持。目前,曠視已和許多廠商達(dá)成合作。曠視科技Face++高級(jí)副總裁吳文昊介紹稱,“手機(jī)3D視覺領(lǐng)域雖然已有多種類型的應(yīng)用案例出來,但該領(lǐng)域包含算法和模組的軟硬一體整體解決方案仍是缺位的,曠視科技正在嘗試一種從上往下的整合方案?!?/p>
由此,曠視發(fā)布了“軟硬一體移動(dòng)端智能3D產(chǎn)品解決方案”。包括從3D應(yīng)用到AI算法、解決方案、傳感器、芯片等。
3D應(yīng)用層:人臉識(shí)別解鎖、3D人像光效、3D美顏、3D整形、AR游戲、虛擬試穿等;
3D算法:MegBrain深度學(xué)習(xí)引擎、3D識(shí)別/重建算法、人臉識(shí)別、活體檢測(cè)、注意力檢測(cè)追蹤等、人像3D建模、人體3D建模。在這個(gè)領(lǐng)域與Bellus 3D、Altizure等企業(yè)聯(lián)合研發(fā);
解決方案:根據(jù)不同應(yīng)用場(chǎng)景中對(duì)深度計(jì)算、深度修復(fù)、深度優(yōu)化、標(biāo)定、畸變校正等能力的需求,設(shè)計(jì)基于雙攝、三攝、深攝的解決方案;
硬件模組:攝像頭、傳感器、芯片等硬件模組的研發(fā),曠視聯(lián)合艾邁斯半導(dǎo)體等3D硬件模組廠商展開合作,此外,還將聯(lián)合主要芯片廠商合作研發(fā)算法適配性更強(qiáng)的芯片。
目前手機(jī)3D視覺的機(jī)遇和挑戰(zhàn)
Bellus3D執(zhí)行總裁Eric Chen介紹了未來3D視覺可能的殺手級(jí)應(yīng)用,包括:
VR里的人臉建模,可以把真實(shí)的人臉放進(jìn)VR游戲里,提升沉浸感。
3D視覺幫助用戶選配眼鏡,根據(jù)人臉的情況做完全的定制化,以后用手機(jī)就能配眼鏡。
AR試妝、試穿。
( Bellus3D是一家來自于美國(guó)硅谷的移動(dòng)端3D面部掃描企業(yè),專注于為手機(jī)等移動(dòng)設(shè)備提供高解析度的3D人臉掃描、建模技術(shù)和產(chǎn)品。)
吳文昊認(rèn)為新的殺手級(jí)應(yīng)用有三個(gè)層面:
新的硬件形態(tài),手機(jī)已經(jīng)陪伴我們10多年,將來會(huì)有新的消費(fèi)電子產(chǎn)品出現(xiàn),我認(rèn)為一定是以3D、AR為主要賣點(diǎn)的產(chǎn)品,這個(gè)離我們并不遙遠(yuǎn)。
3 D一定要跟智能化結(jié)合起來,AI+3D一定是非常大的殺手級(jí)應(yīng)用場(chǎng)景?,F(xiàn)在已經(jīng)在做這樣的事情,像AI Camera拍張照片,我們識(shí)別理解這是藍(lán)天,這是草地。加上我們3D的物理信息,一定會(huì)做出非常好非??岬呐恼招Ч?。
當(dāng)然除了手機(jī)廠商大佬們,各行業(yè)各領(lǐng)域也都在悄悄布局自己的3D視覺產(chǎn)業(yè)。像谷歌的Tango,能精準(zhǔn)描繪關(guān)于周圍環(huán)境的3D地圖,能讓移動(dòng)設(shè)備擁有和人類一樣的空間和運(yùn)動(dòng)感知能力。Tango開創(chuàng)的是基于視覺的3D運(yùn)動(dòng)跟蹤和場(chǎng)景建模,谷歌為3D跟蹤和場(chǎng)景建模設(shè)計(jì)了傳感器和移動(dòng)計(jì)算平臺(tái)。
目前,3D機(jī)器視覺獲取深度信息的辦法主要有三種:結(jié)構(gòu)光、TOF時(shí)間光、雙目立體成像。
剛獲3.6億元D輪融資的「超級(jí)猩猩」推出了1對(duì)1私教和私教小團(tuán)課,購(gòu)買私教課的用戶能使用3D體測(cè)儀,進(jìn)行身體成分測(cè)量、圍度數(shù)據(jù)測(cè)量、體態(tài)評(píng)估和體型預(yù)測(cè)等服務(wù),教練根據(jù)學(xué)員的身體情況、運(yùn)動(dòng)基礎(chǔ)以及健身需求,提供個(gè)性化、周期性的訓(xùn)練計(jì)劃。
千億級(jí)自動(dòng)駕駛市場(chǎng),也在進(jìn)行3D化布局,為客戶提供多場(chǎng)景解決方案,例如3D建模、3D地形測(cè)繪、3D人臉識(shí)別等。