DJI的未來在香港科技，我們在線的未來在哪裏？我們在線需要全新的人機互動接口，更加智能的操控方法，這將會極大地降低培訓(xùn)成本
來自香港科技大學(xué)的研究人員Shaojie Shen and Chuhao Lio發(fā)布了一個新的、有味的創(chuàng)新，其使用全息增強現(xiàn)實硬件來生成真實的3D地形圖，并同意無人機飛手簡單地指向在職何平面之上可視化的目標。
全息界面使用了多種技術(shù)來實現(xiàn)這一點。爲了顯示，微軟全息頭戴式耳機以彩色體素地圖的形式生成AR內(nèi)容，可以從任何角度查看。通過一個自主飛行無人機的深度攝像頭以及實時定位數(shù)據(jù)的光線投射來傳遞這些信息。該系統(tǒng)爲操作員提供了對環(huán)境高度和深度的實時和高度空間感，並使無人機能夠從第三人視角輕松地觀察並重新定位。
全息鏡頭頭戴式耳機將命令反饋給無人機，並通過將佩戴者的手勢和凝視轉(zhuǎn)換爲點按式控件來確定其在全息地圖中的下一個目標。自主無人機隨後可以飛到新位置，同時在移動時更新3D地圖。
研究人員發(fā)布了一段演示視頻，看起來更靠近科幻電影的感覺，特別是全息方面。然而，由于帶寬的限制，無人機只能向增強現(xiàn)實界面提供3D地圖數(shù)據(jù)，並且不中繼附帶的第一手視頻。
系統(tǒng)測試構(gòu)架原理圖
在全息無人機控制系統(tǒng)部署之前，研究小組仍然需要進一步研究，無人機的數(shù)據(jù)最初是在室內(nèi)測試空間內(nèi)使用Wi-Fi共享的，但對于室外應(yīng)用，一旦5G網(wǎng)絡(luò)覆蓋可以滿足無人機的使用要求，就有也許使用低延遲的5G蜂窩連接。
測試中第一組測試人員經(jīng)常埋怨視野非常有限，針對這一問題，對于即將到來的全息鏡頭2AR耳機將可以解決。第一組人還被要求練習(xí)，以便更熟練地進行三維定位，盡管之前對增強現(xiàn)實硬件並不熟悉，這種情況也許會影響到不完善的3D用戶界面或手勢識別。
然而，與真人視頻相比，3D地圖數(shù)據(jù)具有更好的帶寬功效。當每秒更新10次數(shù)據(jù)時，其僅僅需要272MB的數(shù)據(jù)。實時視頻則需要1.39GB的數(shù)據(jù)才能以每秒30幀的速度傳輸?shù)谝蝗朔Q視頻圖像。未來，該團隊還將致力于將兩種數(shù)據(jù)流類型進行結(jié)合，以幫助最終用戶優(yōu)化數(shù)據(jù)以滿足網(wǎng)絡(luò)的最低帶寬水平。
盡管存各種問題，全息增強現(xiàn)實系統(tǒng)已經(jīng)顯示出強大的潛力。除了新穎的視覺界面外，還可以提供控制遠程無人機的便利，只需使用一個簡單、便攜的獨立增強現(xiàn)實耳機，而不用依賴傳統(tǒng)的計算機、顯示器和操縱桿。
