DJI的未來在香港科技，我們在線的未來在哪裏？我們在線需要全新的人機互動接口，更加智能的操控方法，這將會極大地降低培訓成本
來自香港科技大學的研究人員Shaojie Shen and Chuhao Lio發(fā)布了一個新的、有味的創(chuàng)新，其使用全息增強現(xiàn)實硬件來生成真實的3D地形圖，并同意無人機飛手簡單地指向在職何平面之上可視化的目標。
全息界面使用了多種技術來實現(xiàn)這一點。爲了顯示，微軟全息頭戴式耳機以彩色體素地圖的形式生成AR內(nèi)容，可以從任何角度查看。通過一個自主飛行無人機的深度攝像頭以及實時定位數(shù)據(jù)的光線投射來傳遞這些信息。該系統(tǒng)爲操作員提供了對環(huán)境高度和深度的實時和高度空間感，並使無人機能夠從第三人視角輕松地觀察並重新定位。
全息鏡頭頭戴式耳機將命令反饋給無人機，並通過將佩戴者的手勢和凝視轉換爲點按式控件來確定其在全息地圖中的下一個目標。自主無人機隨後可以飛到新位置，同時在移動時更新3D地圖。
研究人員發(fā)布了一段演示視頻，看起來更靠近科幻電影的感覺，特別是全息方面。然而，由于帶寬的限制，無人機只能向增強現(xiàn)實界面提供3D地圖數(shù)據(jù)，並且不中繼附帶的第一手視頻。
系統(tǒng)測試構架原理圖
在全息無人機控制系統(tǒng)部署之前，研究小組仍然需要進一步研究，無人機的數(shù)據(jù)最初是在室內(nèi)測試空間內(nèi)使用Wi-Fi共享的，但對于室外應用，一旦5G網(wǎng)絡覆蓋可以滿足無人機的使用要求，就有也許使用低延遲的5G蜂窩連接。
測試中第一組測試人員經(jīng)常埋怨視野非常有限，針對這一問題，對于即將到來的全息鏡頭2AR耳機將可以解決。第一組人還被要求練習，以便更熟練地進行三維定位，盡管之前對增強現(xiàn)實硬件並不熟悉，這種情況也許會影響到不完善的3D用戶界面或手勢識別。
然而，與真人視頻相比，3D地圖數(shù)據(jù)具有更好的帶寬功效。當每秒更新10次數(shù)據(jù)時，其僅僅需要272MB的數(shù)據(jù)。實時視頻則需要1.39GB的數(shù)據(jù)才能以每秒30幀的速度傳輸?shù)谝蝗朔Q視頻圖像。未來，該團隊還將致力于將兩種數(shù)據(jù)流類型進行結合，以幫助最終用戶優(yōu)化數(shù)據(jù)以滿足網(wǎng)絡的最低帶寬水平。
盡管存各種問題，全息增強現(xiàn)實系統(tǒng)已經(jīng)顯示出強大的潛力。除了新穎的視覺界面外，還可以提供控制遠程無人機的便利，只需使用一個簡單、便攜的獨立增強現(xiàn)實耳機，而不用依賴傳統(tǒng)的計算機、顯示器和操縱桿。
