蘋果被傳出正在研發VR或AR頭顯已經有一段時間了，各種報道和專利申請都表明它可能會有很多研發方向。周二美國專利和商標局授予蘋果的一對專利中，又透露了該系統的兩種功能方式，即蘋果的AR頭顯或未來的iPhone可以利用顯示屏光線來追蹤幾乎任何表面的運動，而手指設備可能會向系統提供用戶可能接觸到的物體細節。

AR頭顯的優勢之一是在設置中加入了攝像頭。通常用于拍攝場景的圖像和物體識別，同樣的硬件可以用于執行物體跟蹤，查看物品相對于頭顯位置的實時位置變化。然而，對象識別和對象跟蹤所需的資源，完成確定方向，對系統來說是相當沉重的負擔，因此蘋果在這2項新專利當中可以解決此問題。

在名為 “帶有事件攝像頭的AV/VR控制器 ”專利中，蘋果提出了這樣的想法：攝像頭系統不一定需要時刻跟蹤與被跟蹤對象相關的所有像素，在只需要粗略檢查的時候進行像素跟蹤報，將跟蹤數量減少到最低限度。蘋果提出，系統會選擇圖像中與被追蹤物體相關的特定像素，進而提供光照強度和其他屬性的讀數。在攝像頭或物體移動或改變位置的情況下，這幾個像素的光照強度變化會超過設定的限制，從而觸發整個系統開始使用更多的資源搜索物體的變化情況。另外，系統可以不嘗試檢測物體，而是簡單地搜索相同的光點。如果物體上有多個光點，而系統只跟蹤這些光點，那么它可以使用很少的資源來確定位置和方向的變化。

雖然這些光點很容易是環境照明在物體外殼上的反射，但蘋果似乎正在考慮可以使用其他物體產生的光源，比如LED指示燈或顯示圖案的顯示屏。如果是后者，只要屏幕可見，就能為系統提供充足的定位和方向數據。這種基于光的參考點不一定是針對可見光，因為蘋果建議照明模式可以包括非可見波長。這將提供一個不會被用戶看到的隱藏系統，也有可能是一個可以隱形且使用不同光波長的系統，讓系統可以與多個用戶或物體一起工作。

第二項專利涉及數據收集，具體涵蓋了系統如何獲取用戶觸摸的信息。這樣的系統需要知道如何重現用戶觸摸現實世界物品時可能感受到的感覺，讓它能夠用觸覺反饋工具來模擬效果。在這項名為 “帶有手指設備的計算機系統，用于采樣對象屬性 ”的專利中，蘋果提出了使用手指佩戴的設備，它能夠檢測用戶可能接觸到現實世界物體的特征。每一個手指設備內的傳感器都能夠讀取用戶所接觸的現實世界物體表面的效果，例如表面輪廓、紋理、物體顏色和圖案、聲學屬性以及重量。當與其他元素相結合時，例如頭顯上的攝像頭，系統將能夠收集到很多關于物體的數據，然后再提供給用戶。

雖然戴在手指末端，但該專利表明用戶仍能體驗到觸摸物體的感覺，因為指墊將保持暢通無阻。傳感器可以通過接觸延伸到指尖以外的突起物進行檢測，或者通過檢測用戶手指觸摸物體的方式變化進行檢測。收集到的有關物體的數據可以被編譯和歸檔，供系統以后使用，并可能作為數據庫進行共享。然后，這些信息可以與觸覺反饋元素一起使用，以模擬觸摸用戶或其他用戶的對象。

蘋果每周都會提交大量的專利申請，但雖然專利申請的存在表明了蘋果研發工作感興趣的領域，但并不能保證這些想法會出現在未來的產品或服務中。

責編AJX