820
人物
厲害了!iPhone X “劉海”裏的黑科技,將顛覆自拍P圖和AR相機
蘋果今天發布的 iPhone X,即將給自拍美顏界帶來顛覆性的改變。
如今,很少有人會貼自拍原圖出來,最少都要加個濾鏡,更多則是要動用修圖軟件,磨皮、瘦臉、調光線,還有各種 AR 玩法。所以我們看到的自拍照,輕則磨皮美白,重則各種貴妃妝、煙熏妝、老年人特效。
很多人覺得這已經很好玩了,但是等他們用上 iPhone X 後,想法很可能會改變。下麵是今天蘋果發布會上,新品體驗區一位用戶在玩一項新的 AR 自拍功能——天天 P 圖開發的京劇臉譜。
在 iPhone X 的屏幕上可以看到,用戶的臉戴上了虛擬的臉譜。但和上麵的萌寵 AR 效果簡單地把一些元素添加到用戶頭像上(兩個耳朵的位置明顯有些歪)不同,iPhone X 上臉譜和人臉實現了立體的融合,而且貼合很好,追蹤也相當迅速,以至於用戶眨眼的瞬間臉譜都可以實時地進行反應,見視頻中第 2 秒開始處。
除此之外,鏡頭晃動和突然的遮擋對於對於追蹤的影響非常小,用戶用手一揮,臉譜換了一張,但仍然移穩穩地停留在用戶臉上,沒有錯位,這是目前手機上 AR 自拍效果所根本不能比的。
這種程度的 AR 效果是如何實現的?
核心在於 iPhone X 的“劉海”部分(就是前置攝像頭、聽筒等部件所在的地方),蘋果對這裏進行了一次大變革,塞進很多用戶之前沒聽過的一些傳感器。
在這個被很多人詬病的小“劉海”上,蘋果塞進了 8 顆傳感器,除了麥克風、揚聲器、前置攝像頭、環境光傳感器、距離感應器等我們熟知的部分,還集成了紅外鏡頭、泛光感應元件(Flood illuminator)、點陣投影器。
蘋果將整個係統稱之為真深度攝像頭係統(TrueDepth Camera System),而整個係統除了能用於 Face ID 人臉驗證,也可以擴展自拍功能,實現動畫表情發布,和 AR 效果疊加。
具體而言,上述的感應器會投射人眼看不見的光,並讀取用戶的臉部 3D 幾何結構圖,而這一切都是實時發生的。蘋果甚至為此開發了一個神經引擎(Neural Engine),可即時處理人臉識別數據。蘋果高級副總裁 Phil Schiller 在發布會上解釋稱,“我們用神經網絡處理圖像和點陣模式,來建立人臉數學模型。”
現場特別演示了臉部追蹤技術,可用於 Animoji。通過實時追蹤用戶麵部非常細微的表情動作,將其放入各種動物形象表情中,記錄下的表情和語音可以信息的形式發送給朋友。
現場還演示了AR 相機效果,和前麵京劇臉譜玩法一樣,用戶將虛擬巴西國旗貼到臉上,看起來就像是真的畫上去一樣,逼真度遠超之前的 AR 相機。
上圖為現場演示的 AR 相機功能,下圖為傳統的 AR 相機。差距顯而易見,上圖在質感、真實度方麵遠超下圖。
開發京劇臉譜的天天P圖對雷鋒網表示:“通過基於FaceKit、 SceneKit以及Metal 2等軟件架構進行開發,我們可以通過iPhone X的前置攝像頭為用戶帶來AR自拍。天天P圖的用戶現在可以獲得更接近現實的麵譜和3D裝飾效果,得到更真實的AR自拍體驗。”
實現這種程度的AR效果,需要軟件和硬件的深度結合。
未來:AR 畫妝以假亂真,人工智能看懂你的表情
目前 AR 相機玩法非常多,特別是在 P 圖軟件 、直播應用等方麵,而即便在效果質量一般的情況下,還是廣受歡迎。
隨著 iPhone X 的到來,這類應用的體驗將實現飛躍。上圖中的第三個畫麵,這位女生用 AR 相機給自己的臉部進行修飾,外人可以很明顯地分辨出這是 AR 效果做的;但在 iPhone X 上,配合優秀的軟件,我們將可以做到以假亂真的效果,因為 iPhone X 的“劉海”精確記錄了用戶人臉的三維圖像信息,因而當 P 圖軟件在給人臉 P 圖時,是可以精確到臉上的某一個點的。
另一方麵,這種對人臉的精確追蹤,還將在表情追蹤方麵實現大躍進。以前,軟件可以根據你的二維肖像圖知道用戶的一些基本表情,比如喜、怒、哀、樂。到了 iPhone X 上,對用戶表情的追蹤將達到消費設備上從未有過的水平,用戶的一顰一動手機都將感知得到。未來,一個聊天機器人通過手機前置攝像頭看著你和你對話時,它將能夠根據你的細微表情作出不同的回應。
以上僅是兩個幾乎肯定將會到來的應用案例,iPhone X 的這個劉海,配合蘋果優秀的軟件以及芯片,所能帶來的可能性將是無限的,Face ID 和 Animoji 僅僅隻是個開始,未來也許又有現象級的應用會誕生。
而率先這場創意盛宴當中的,正是天天P圖這類相機應用。iPhone X 將在 11 月正式上市,讓我們一起期待吧。
最後更新:2017-10-08 11:12:56