蘋果向來擅長把用戶界面從個人電腦推廣到手機和智能手表上。目前，蘋果的工程師正在考慮將手機觸屏轉(zhuǎn)變?yōu)榛旌犀F(xiàn)實(Mixed Reality，MR)，很可能會構(gòu)建出良好的用戶體驗。最近，蘋果正在申請手勢控制專利，這似乎也透漏出了蛛絲馬跡，表明公司對混合現(xiàn)實已做出了方方面面的考量。混合現(xiàn)實是一種可穿戴系統(tǒng)，該系統(tǒng)可以在真實環(huán)境中呈現(xiàn)虛擬場景，通過感知手指運動，就能控制混合現(xiàn)實空間中的數(shù)字內(nèi)容。
過去幾年，蘋果一直在為混合現(xiàn)實的工作打基礎(chǔ)。2017年，該公司發(fā)布了ARKit框架，幫助開發(fā)人員構(gòu)建了數(shù)千個增強現(xiàn)實應(yīng)用。這些應(yīng)用必須通過iPhone或iPad來體驗，所以使用起來有點笨重。而且，這類應(yīng)用很快就會嵌入到眼部設(shè)備中，蘋果肯定不會設(shè)計笨重的頭戴設(shè)備，所以只有等到出現(xiàn)合適的增強眼鏡，能把所有混合現(xiàn)實部件組合在一起時，混合現(xiàn)實應(yīng)用才能有用武之地。
控制和駕馭混合現(xiàn)實的裝置與方式雖然稍顯笨拙，但卻在不斷發(fā)展。混合現(xiàn)實領(lǐng)域中的領(lǐng)先設(shè)備(例如Hololens和Magic Leap)可以讓用戶使用手勢進行導(dǎo)航和控制。但跟蹤所需的深度攝像頭和傳感器需要容納空間，因此這類頭戴設(shè)備并不小巧。而將手部動作傳感器移動到身體上的其他地方則能有效減小頭戴設(shè)備的規(guī)格。蘋果此次申請的專利稱為“含傳感器和觸覺反饋的指戴式設(shè)備(Finger-mounted Device with Sensors and Haptics)”，是一種包含了多種傳感器的指戴系統(tǒng)。每個手指上都配備了多種類型的傳感器，光學(xué)傳感器可以測量指尖的運動，加速度傳感器計有助于測量手勢。
指戴式設(shè)備讓指尖保持裸露，指節(jié)上的傳感器用于檢測指尖“按壓”或“滾動”等操作。指戴式設(shè)備可以通過內(nèi)置的觸覺反饋單元響應(yīng)用戶的觸摸或手勢。專利稱，指戴式設(shè)備可用于控制虛擬現(xiàn)實或增強現(xiàn)實系統(tǒng)，當用戶在桌面上進行手指點擊時，可以為用戶提供在物理鍵盤上進行交互的感覺。
蘋果并不是唯一一家考慮混合現(xiàn)實輸入問題的大公司。谷歌近幾年來一直在開發(fā)一種基于手勢的控制系統(tǒng)“Project Soli”。Soli的傳感器使用微型雷達系統(tǒng)捕獲三維空間內(nèi)的手部運動。到目前為止，谷歌已經(jīng)將雷達傳感器應(yīng)用在智能手表和電視等中，實現(xiàn)了手勢控制，所以該技術(shù)有望在更復(fù)雜的現(xiàn)實背景下跟蹤手勢。一位專家表示，像智能手表這樣的可穿戴設(shè)備也有可能嵌入雷達傳感器，然后雷達傳感器會向用戶的手發(fā)出雷達波束以檢測手勢。谷歌顯然對Soli非常看重，公司最近請求聯(lián)邦通信委員會(Federal Communications Commission，F(xiàn)CC)批準項目在更高功率的頻段上運行，以獲得更精確的手勢。去年年底，聯(lián)邦通信委員會批準了這一請求。
三星也在積極開發(fā)混合現(xiàn)實的手勢控制系統(tǒng)。美國專利局公布了三星的專利申請，該專利提出了一款虛擬現(xiàn)實頭戴設(shè)備，結(jié)合三維傳感器和紅外傳感器來檢測用戶手部的復(fù)雜動作。三星提交了另一份專利申請，其中也使用了類似的技術(shù)來控制增強現(xiàn)實系統(tǒng)中的內(nèi)容。
目前，蘋果的ARKit和谷歌的ARCore都是借助手機背面的普通2D攝像機，實現(xiàn)了基于手機的增強現(xiàn)實(如Pokémon Go)。不過，把增強現(xiàn)實從手機推向眼鏡之前，仍存在可開發(fā)的空間。目前，3D攝像頭已能繪制出3D數(shù)字內(nèi)容，智能手機制造商顯然也希望將它們用作后置攝像頭。彭博社去年12月的報道稱，華為計劃在2019年將索尼3D攝像頭用作幾款新手機的后置攝像頭。報道援引消息人士的話，3D攝像頭不僅僅能用于拍攝3D照片和空間掃描，還能用于跟蹤手勢。
iPhone X把3D攝像頭用作前置攝像頭進行面部識別，也因此誕生了Animoji和Memoji。但如果把3D攝像頭用作后置攝像頭，則能實現(xiàn)更多功能。如果房間的3D圖更加精確，那么ARKit應(yīng)用程序就能以更逼真和功能性更強的方式來部署內(nèi)容。與之類似，3D攝像頭也可用于跟蹤手勢。
蘋果專利中的技術(shù)常常沒有進入市場，即便成功了，最終的形式也與專利中所描述的截然不同。蘋果的“指戴式”設(shè)備專利是公司所解決過的最有趣的問題。蘋果正在認真考慮用戶界面的下一個潮流，期待憑借合適的時機和技術(shù)引領(lǐng)混合現(xiàn)實，就像最初引領(lǐng)移動體驗一樣。(獵云網(wǎng)注：本文作者馬克·蘇利凡(Mark Sullivan)為Fast Company的記者。)
關(guān)鍵詞：
