香港科技大学的研究员Shaojie Shen和Li Chuhao 公布了一项新颖而有趣的创新技术，该技术使用全息增强现实硬件生成实时3D地形图 ，并使无人机飞行员可以简单地指出已在任何平面上方可视化的目标，virtualrealitytimes.com报道。
全息界面使用多种技术来进行渲染。为了显示，Microsoft HoloLens耳机以彩色体素贴图的形式生成AR内容，可以从任何角度查看。它通过自主无人机的深度摄像头以及实时位置数据的射线广播来进行中继。该系统为操作员提供了实时，高度空间感的环境海拔高度和深度，并且使无人机可以很容易地从第三人称视角看到并重新定位。
HoloLens头戴式耳机将命令反馈给无人机，并通过将佩戴者的手势和注视变为类似点击的控件来确定其在全息图内的下一个目标。随后，自主无人机可以在移动3D地图的同时更新到新位置。
研究人员发布了一个演示视频，看起来更像是科幻电影中的东西，尤其是全息方面。但是，由于带宽限制，无人机只能向增强现实界面提供3D地图数据，而不能中继随附的第一手视频。
在部署全息无人机控制系统之前，研究团队还有一段路要走。无人机的数据最初是在室内测试空间中使用Wi-Fi共享的，但对于室外应用，一旦5G网络超出了其当前的无人机限制阶段，就有可能使用低延迟的5G蜂窝连接。
研究人员指出，第一批测试人员经常抱怨“（AR）视野非常有限”。即将推出的HoloLens 2 AR耳机将解决此问题。尽管先前对增强现实硬件不熟悉，但第一组也需要练习以更加精通3D定位，这种情况可能会蔓延到不完善的3D UI或手势识别中。
但是，3D地图数据将比真人视频具有更高的带宽效率。每秒更新10次时，它可能仅需要272MB数据。实时视频需要1.39GB的数据才能以每秒30帧的速度传输第一人称视频图像。将来，该团队还旨在为最终用户的利益合并两种流类型，以帮助优化数据以满足网络的最小带宽水平。
尽管存在这些初期问题，但全息增强现实系统仍显示出很大的潜力。除了其新颖的视觉界面外，它还使您只需使用简单的便携式独立增强现实耳机即可方便地控制远程无人机，而不必依赖于常规且功能齐全的计算机，显示器和操纵杆。
研究人员计划在 定于2020年10月25 日至 29日举行的国际智能机器人和系统会议上展示将AR与自动无人机合并的“第一步” 。
