近日，Facebook Reality Labs的研究人員演示了一種新穎的文本輸入方法，該方法可以實現無需手柄的手動跟蹤，使用戶可以通過捏拿的手勢來選擇字母進行文本輸入。

目前，在VR/AR頭顯中進行文本輸入仍然是一項艱巨的任務。這是因為當用戶戴上VR頭顯后是看不到鍵盤的，雖然對于盲打高手來說，這或許并不是問題，但對于大多數人來說，打字將會變得異常困難。即使是用戶戴著AR頭顯在可以看到鍵盤的情況下打字，也不可避免要花費大量時間。

除了文本輸入法，語音輸入也是目前流行的輸入方式，但這種方式也存在幾大問題。首先，其智能語言判斷機制還不夠完善，以及容易暴露隱私——對方不僅要聽你說的語音內容，而且還要聽清楚和聽明白。其次，與打字相比，語音輸入在某種程度上是一種不同的思維方式，其輸入效率不能與打字相比。

此外，虛擬鍵盤也是文本輸入的另一種選擇，你可以通過手指點擊虛擬鍵盤來進行文本輸入，但虛擬鍵盤的打字速度太慢，無法完成繁重的書寫任務并且缺乏敲打鍵盤時產生的物理反饋。

以上主流的幾大文本輸入方式或多或少都存在著一些弊端。為此，Facebook Reality Labs的研究人員創建了一個手動跟蹤文本輸入原型，該原型專為VR/AR頭顯而設計，而無需使用傳統鍵盤。

該手動跟蹤文本輸入法讓用戶無需觸摸鍵盤上的按鍵，按鍵組則映射到用戶的每根手指上。同時用戶在輸入時不是選擇一個特定字母，而是使用與包含所需鍵入的顏色編碼組相對應的手指進行按壓。當用戶進行按壓輸入時，系統會根據用戶輸入的上下文來預測用戶想要輸入的單詞，研究員稱該系統為“PinchType”。

PinchType系統可以解決虛擬鍵盤和語音輸入的諸多問題，其輸入無聲、隱私性高，比通過虛擬鍵盤進行頁面搜索的速度還要快，同時該系統還支持觸摸物理反饋。

以下是研究人員分享的在測試PinchType系統時發現的一些情況：

在一項有14名參與體驗用戶參與的初步研究中，我們調查了PinchType在體驗用戶初次使用時的速度和準確性，以及它相對于虛擬鍵盤所帶來物理反饋舒適性。在輸入了40個短語后，大多數體驗用戶表示，使用PinchType比使用虛擬鍵盤更舒適。大多數體驗用戶的平均輸入速度達到了每分鐘12.54個單詞，或每分鐘20.07個單詞，與其他依靠手指輸入的虛擬文本輸入方法相比，PinchType的優勢明顯。

不過，PinchType也存在一些缺點，該系統太依賴于精準的手部跟蹤，通過頭顯攝像頭的角度來看，手指被手背遮擋是比較普遍的現象，那么就會造成用戶文本輸入發生問題。根據下圖顯示，從該角度上看，如果用戶使用小指或無名指進行敲擊，是無法鍵入字母的。

由此我們猜測，PinchType原型很可能是根據帶有外部攝像頭的高端手動跟蹤技術進行開發的。值得注意的是，PinchType原型是Facebook Reality Labs研究人員Jacqui Fashimpaur、Kenrick Kin和Matt Longest共同研究的成果，該研究團隊為此還著作了一篇技術論文——《采用舒適的指尖捏取法實現在VR/AR環境中的文本輸入》。