看見籃球的 3D 全息投影差不多不稀奇，但如果你能拍打、觸摸那個籃球幻像，同時能感受到它的彈性呢？

英國格拉斯哥大學的一個工程師團隊提出一種新方法，能創(chuàng)造跟全息投影進行物理交互的感覺。

▲ 超高精度模擬真實觸覺反應，比 VR/AR 更輕便的虛擬交互

當你用不同力度拍這個虛擬籃球時，你的手掌會感受到不同的彈性力道，就像在拍一個真球，你的手、手指和手腕都會有逼確實觸感。

而實現(xiàn)如此宛如科幻片里的互動體驗，完全不需要可穿戴或手持外圍設備，比傳統(tǒng)的 VR/AR 系統(tǒng)更加輕便。

這項研究的論文題目為《交互式立體顯示的偽全息投影和氣動反應》，已發(fā)表于 WILEY 智能系統(tǒng)土地旗艦刊 Advanced Intelligent Systems 上。

論文鏈接：點此直達

三種模式，讓虛擬籃球拍起來像真球

如何做到逼確實籃球彈跳觸感？

研究團隊打造了一個帶有氣動觸覺反饋設備的僞全息投影。

▲ 用于交互式立體顯示的帶有氣動觸覺反應的偽全息投影

如圖，其開發(fā)的系統(tǒng)有 3 個要緊組件，分別是僞全息顯示、手勢識別模塊和觸覺反饋設備。這些組件被連接到主計算機，并通過基于 Unity 平臺的內部構建順序進行控制。

其中，偽全息顯示基于 Pepper 的幽靈投影方案，創(chuàng)造了一種物體“漂蕩”在空中的錯覺；手勢識別模塊使得用戶可用手勢與虛擬對象進行交互。

除了視覺反饋外，該系統(tǒng)通過提供觸覺反饋來提供更真實的交互感。

其觸覺反應設備名為 Aerohaptics，當用戶操縱虛擬物體時，該設備使用指向用戶手上的加壓空氣噴射，來複制觸摸感覺，同時它還提供位置和強度控制，以適應各種交互場景。

依據全息投影與用戶之間的交互性質，Arduino 控制器單元可區(qū)分多種操作模式，包括恒壓模式、手部標志選擇模式和手部跟蹤模式。

在恒壓輸出模式下，無論手的空間位置如何，系統(tǒng)都會向用戶提供恒定的氣動反饋，即用戶會感受到雷同的壓力。

在手部標志選擇模式下，算法可以選擇用戶手的哪個部分（共 6 個標志，每個指尖各 1 個 + 手掌上 1 個）是跟蹤系統(tǒng)的目標，系統(tǒng)可以準確地提供氣動觸覺反應給不同的手部標志。

在手部跟蹤模式下，壓力基于 3D 虛擬成像的拓撲與用戶手的運動交互，Arduino 控制器單元將手指速度值直接映射到壓力調制單元，使用戶感覺像觸碰到一個真實存在的東西。

譬如用戶試圖拍打全息籃球時，將收到與拍打球時“感知”的力度成正比的氣動反饋，能感受到球從指尖滾動時“圓圓”的形狀，以及球彈回手掌時的彈跳壓力變化。

定位精準得益指，拍得越重反彈越猛

隨後，研究團隊用實驗展示了其系統(tǒng)的兩項功能，即觸覺反饋傳遞的準確定位控制和可調觸覺反饋強度。

第一在控制觸覺反饋傳遞的位置方面，系統(tǒng)可控制空氣噴射以非常高的精度指向不同位置。

系統(tǒng)中的商業(yè)手部跟蹤設備可以檢測到用戶手部的不同位置，包括手指、手掌、手腕等，跟蹤系統(tǒng)和氣體噴嘴能準確控制觸覺反饋的傳遞位置。

為了證明這一點，Aerohaptics 系統(tǒng)被編程為按順序瞄準用戶手上的單個指尖，研究人員在用戶指尖上粘了紙條，如此就能清晰看到噴氣的位置是否精準。

從上圖（d）中可以看到，空氣會集中噴在目標手指上，相鄰手指上粘的紙條沒有受到幹擾。

其次，爲了提供不同強度的觸覺反饋，其系統(tǒng)包含一個氣流控制機制，以調節(jié)噴到用戶手部的空氣量。這在很多情況下都很有用。

譬如，當用戶的手離空氣噴嘴越來越近或越來越遠時，觸覺反饋的強度可以保全不變；當用戶試圖敏捷猛拍虛擬籃球，會産生更強的觸覺反應；當用戶拍打幅度很輕時，球的反饋強度也會相應降低。

研究人員在用戶的手掌上放了一個力傳感器，並記錄了觸覺反饋的強度，獲得的圖像結果顯示了虛擬籃球三次硬彈跳後氣流變化，然後是三次較軟的氣流，從而致使傳遞給用戶手的力發(fā)生了變化。

比其他全息顯示功能更全

Aerohaptics 系統(tǒng)由格拉斯哥大學詹姆斯瓦特工程學院的 Ravinder Dahiya 傳授領導的可曲折電子和感應技術（BEST）小組開發(fā)。

Dahiya 傳授說，近年來，觸覺反應和立體顯示技術取得了長足的前進，使我們更靠近于與虛擬對象進行逼真地交互。

但當前的觸覺技術往往要用到可穿戴或手持外圍設備，其高成本與複雜性也許會阻礙該技術的普及。

與其他交互式全息顯示相比，Aerohaptics 系統(tǒng)能將其他系統(tǒng)實現(xiàn)的 360° 視角、空中手勢識別、觸覺等功能合在一起，同時無需用戶連接設備。

相關于其他在 3D 虛擬環(huán)境中提供觸覺反應的技術，啟動觸覺反應系統(tǒng)擁有反應定位和強度控制等優(yōu)勢，並保全較低的複雜性和低成本。

結語：未來或引入嗅覺反饋

總體來看，與在虛擬環(huán)境中提供觸覺反應的其他方法相比，Aerohaptics 系統(tǒng)是一個成本效益高的解決方案，龐大性相對較低。

研究團隊正在考慮給系統(tǒng)添加更多觸覺反饋功能，譬如溫度變化帶來的感覺，嗅覺反饋也可以通過該系統(tǒng)在氣流中引入各種氣味來提供。隨著後續(xù)進一步發(fā)展，Aerohaptics 系統(tǒng)擁有實現(xiàn)多種感官相互作用的潛力。

這在現(xiàn)實生活中的應用有相當廣闊的探索空間，譬如可認為遠程電話會議創(chuàng)造更逼確實 3D 渲染互動，幫醫(yī)生在虛擬空間履行辣手的操作，或者讓醫(yī)生遠程指導機器人進行真正的手術