文章摘要: 而遠距離則是vivo TOF 3D 超感應技術更有優勢vivo TOF 3D 超感應技術的很多技術能力可以應用在拍照領域
一年一度、為期 3 天的 MWC 2018 上海(世界行動通訊大會,下文簡稱:MWCS 2018)在 6 月 27 日上午於上海新國際博覽中心隆重開幕。來自全球各地的 104 個國家、600 多家企業都在本次大會上展示了自家的新品、新技術。
而在這些廠商當中,我們也依然能看到不少國內知名廠商參展。
就在剛過不久的 6 月 12 日,vivo 正式釋出了「未來」旗艦 ——vivo NEX,並公佈了「零界全面屏」和「第三代螢幕指紋識別」等幾項新技術,成功吸引到了不少人的眼球。
時隔兩週後的今天,vivo 除了在本屆 MWCS 2018 大會上展出了 vivo X21 FIFA 世界盃非凡版和 NEX 兩款新機以外,還在現場首次釋出了「TOF 3D 超感應技術」。作為國內數一數二的智慧手機廠商,這項新技術的釋出也自然成爲了大會首日開展的焦點之一。
有效深度資訊量比結構光高 10 倍
相比去年在 MWCS 上釋出的「螢幕指紋識別」,今年 vivo 則是將重心放在了智慧手機的另一個風口——人臉識別技術上。
雖然人臉識別功能在如今看來已經不算是個特別新鮮的新事物,即便是在單純的軟體層,我們同樣也可以在 2D 影象的支援下進行各種「刷臉」。
但在體驗和安全的層面上,2D 影象驗證只是一個形態上的人臉識別,真正做到可靠的還是需要硬體層上的支援。因此,目前主流的 3D 驗證方案主要有兩種,一種是結構光,一種是這次 vivo 釋出的 FOT 3D 超感應技術。
根據官方介紹, vivo TOF 3D 超感應技術的原理是通過元件發射近紅外光,通過感測器計算出紅外光與目標觸達、返回的時間差,從而得到 3D 立體視覺識別。相比於結構光方案,TOF 的有效深度資訊點達到了 30 萬個,為結構光方案的 10 倍數。
而與此同時,TOF 的工作距離也較結構光方案提升到了 3 米之遠,讓手機在 TOF 技術的支援下,為使用者實現 3D 試衣、拍照以及 MR 體感遊戲等功能。
FOT 方案的應用
在發佈會上,vivo 的產品經理給我們舉出了 TOF 方案的三個場景應用例子。
首先是 3D 試衣。我們現在在網購衣褲時,往往除了考慮衣服尺碼是否合適以外,還會想 A 衣跟 B 褲的搭配是否好看。但由於目前缺少在硬體層上的支援,因此即便是有著相對成熟的 AR 技術,可以給 AR 提供施展的空間也仍然相當有限。
而在 FOT 技術的支援下,手機可以 3 米距離內對使用者進行識別,從而實現 1:1 的 3D 線上試衣,為使用者免去不少退換貨的麻煩。
不過,「3D 試衣」並非僅僅只是通過以上 50 個字就能完美實現。使用者除了需要提前輸入個人資訊、讓手機進行建模以外,還需要平臺商家將產品資訊進行錄入。所以就目前來看,3D 試衣的確是個很不錯的概念功能,但距離真正且完美地實現,相信 vivo 的前方仍有一段長路要走。
相比前面的 3D 試衣,MR ( 混合現實) 體感遊戲和 3D 美顏似乎要更貼近現實一些。
在 FOT 的特性加持下,使用者可將手機變成 MR 體感遊戲主機,在有限範圍內通過手勢、肢體來操控遊戲角色,以獲得更沉浸有趣的遊戲體驗。
再一個是在獲取精細臉部、身體資料的基礎上,系統會藉助 AI 美顏演算法為使用者進行「精修」美顏、打光、背景虛化等,以獲得更細緻的美顏甚至美體的效果。
宣佈與微信團隊合作,公佈 3D 視覺開發者計劃
在本次發佈會上,vivo 除了釋出 vivo TOF 3D 超感應技術外,還宣佈目前已經與微信團隊達成深度合作。
根據 vivo 介紹,目前,TOF 技術已成功支援微信人臉識別支付,預計將會在 2018 年下半年投入商用,併成為國內首家支援微信人臉識別支付的手機廠商。
另外有一點值得一提,vivo 爲了能讓 TOF 技術儘快投入實際應用,目前 vivo 官方已經開啟了「3D 視覺開發者」計劃。在會上,官方表示歡迎行業開發者、服務供應商以及手機使用者一體探討、開發並不斷提升 3D 視覺的效能表現和體驗。
TOF 技術的原型機和初體驗
去年,vivo 在 MWCS 大會上用了兩臺與 Xplay6 有著 90% 相似的技術展示機作為超聲波螢幕指紋技術的搭載裝置。而在今年,我們同樣也在展臺上看到了兩款搭載 TOF 技術的原型機——一款是「魔改」版的 vivo X20,另一款則是外觀足夠「硬核」的技術展示機。
筆者在 vivo 的展臺上體驗了一次 FOT 的 3D 建模,手機在經過工作人員配對調校後,開始藉助支架進行 360 度錄製。整個錄入過程為 36 秒,期間我需要摘下眼鏡,且目視前方並保持固定姿勢。
錄入成功後,影象會被髮到另一臺裝置上,在特定程式中,能看到建模後的影象。
在 3D 建模體驗區的旁邊的是 MR 體感遊戲體驗,遊戲的主機是前面所說的「魔改」版的 vivo X20。筆者圍觀了幾分鐘其他觀眾的試玩,發現 FOT 在動作追蹤方面其實已經是有一個比較好的表現。
不過,這並不意味著新技術已經符合推出市場大量應用的條件。因為就目前來講,FOT 在軟體層方面仍然只是在 Beta 測試階段而已。所以,最完整、完美的 FOT 技術體驗我們最快還得等到今年的下半年。
vivo 臧亞奎: vivo TOF 3D 超感應技術已經達到了可量產的狀態。
會後,愛範兒參加了 vivo 舉辦的媒體 QA 專訪。對於新技術的發展歷程、vivo 在未來的發展計劃等問題,vivo 軟體部門負責人劉旭東、技術專家臧亞奎為現場媒體進行了解答。
媒體:我們在業內看到有很多類似的人臉識別方案,vivo 為什麼會選用 TOF 技術,有什麼優勢?
劉旭東:其實技術發展的路程是動態的,所以在蘋果iPhone X時期,結構光可能是比較好的選擇,現在在我們的技術上有更多的優點,vivo TOF 3D 超感應技術有更優的效能,更重要的一點是對 ID 的影響更小,我們堅定地選擇了 vivo TOF 3D 超感應技術的方案。
劉旭東:這項技術三個優點,第一有效深度資訊高,一般的結構光技術方案是DOE衍射,衍射現在做的最好只有三萬個點,我們有30萬個點,比競爭對手多了10倍;第二個優點測距遠,是由於結構光本身的限制,目前只能做一些近距離的識別,而遠距離則是vivo TOF 3D 超感應技術更有優勢;第三個優點體積小,如果結構光要做的好需要更大的元器件,這一點是vivo TOF 3D 超感應技術能達到的。
媒體:現在已經到了能量產的程度了嗎?
臧亞奎:現在 vivo TOF 3D 超感應技術已經達到了可量產的狀態。
媒體:目前看到 vivo TOF 3D 超感應技術所需要的硬體模組還比較大,vivo 又是以外觀為首要設計,怎麼解決這二者之間的衝突?
劉旭東:現場展示的方案只是對於使用者技術展示,並不意味著量產機上會採用這樣的形式,目前我們內部已經有解決方案,更具體的細節因為涉及到產品的保密還不方便透露,請看今年下半年的產品。(莫非今年 vivo 要發三款明星新機?)
媒體:現在vivo已經做到了第三代螢幕指紋解鎖技術,vivo TOF 3D 超感應技術也達到量產狀態的話,今後在產品規劃上這兩個技術是如何規劃的?之前我們看到華為手機 RS 上出現了三種解鎖方式,不知道兩位對這個怎麼看待?
劉旭東:vivo TOF 3D 超感應技術是有四方面功能:
1.基礎拍照功能,TOF 可實現立體影像拍攝,也可以將人像拍的更好更美,在虛化、打光這些細節上不斷除錯;2.增強手機的感知能力,類似 Slim 跟 AR 功能的增強;3.通過技術改變使用者的互動方式,今天展示了體感遊戲以及手勢控制的一些應用。4.高精度,需要能識別的細節非常多,所以(這個技術)額外的附加值是能做人臉識別、生物識別。
螢幕指紋解鎖技術跟 vivo TOF 3D 超感應技術從技術端來看是兩個獨立的技術。從消費端來看每一位使用者對產品是有不一樣需求的,使用者對於指紋解鎖還是有非常強的需求,這兩個需求是不衝突的,但是具體產品上怎麼搭配請大家拭目以待。
媒體:之前提到 vivo TOF 3D 超感應技術主要會應用在最核心的幾個技術上,目前拍照部分有沒有展示?想問一下此外 vivo 這邊還有哪些業務在拓展?
臧亞奎:剛剛我們也說到 vivo TOF 3D 超感應技術因為高深度資訊以及好的理解能力,在拍照這一點上它可以改變面部容貌以及實現很自然的光效,這是基礎應用。
其次大家在行業這麼多年一直想把拍照拍得更好,無非從幾方面:
1.把人拍的更好;2.把景拍的更好。為此我們引入了雙目和 DSP 技術,這一次我們又再一次引入 TOF 技術把拍照做的更好,比如說增強虛化是我們非常顯性、非常突出的應用。
拍照還有很多場景大眾可能沒有那麼強的感知,但是我們做了很多細節的提升,比如它能夠幫助產品提升快速對焦。這些都是基礎技術,但在消費者方面我們不會重點宣傳,vivo TOF 3D 超感應技術的很多技術能力可以應用在拍照領域。
那麼,FOT 技術在未來還能給我們帶來什麼驚喜?它有能實現什麼功能?不久後,我們也會對 vivo 這項新技術進行詳細解讀。