儘管使用完整增強現實（AR）設定的使用者已經可以用手“接觸並操縱”虛擬物體，但是基於智慧手機的AR系統的使用者僅限於使用手機的觸控式螢幕。不過，由於有了新技術，這種情況很快就會改變。該系統被稱為Portal-ble，由布朗大學的一個團隊開發。

按照目前的形式，它包括Android軟體（正在開發iOS版本），安裝在手機背面的Leap Motion紅外感測器以及插入手機以提供額外處理能力的Compute Stick。研究人員希望最終能夠將整個系統整合到常規的現成智慧手機中。

當用戶將一隻手伸到自己的面前時，感測器會檢測到該手在三維空間中的位置。該軟體透過將計算機生成的手部影象放置在螢幕AR環境中進行響應。當用戶隨後移動他們的實際手時，相應的AR手也會相應地移動，從而使他們能夠拾取，移動或以其他方式操縱至少在手機螢幕上真實存在的虛擬物件。

志願者已經利用該技術執行諸如堆疊虛擬塊和繪製三維虛擬花園之類的功能。有趣的是，儘管握住手機的手不是正在執行動作的手，但透過一種反饋系統可以改善測試物件的效能，該系統可以在觸控物體時使手機振動。

Portal-ble現在正在進一步開發中，希望嘗試使用這項技術的團隊可以免費使用Android原始碼。以下影片演示了該系統。

該專案首席科學家、布朗大學副教授Jeff Huang表示：“我們希望製造出使AR行動式的產品，以便人們可以在任何地方使用而無需笨重的頭戴式裝置。我們還希望人們能夠用手自然地與虛擬世界互動。”