科幻终有一天成为现实，无人机全息AR控制系统FZoneLab

DJI的未来在香港科技，我们的未来在哪里？我们需要全新的人机互动接口，更加智能的操控方式，这将会极大地降低培训成本

来自香港科技大学的研究人员Shaojie Shen and Chuhao Lio发布了一个新的、有趣的创新，其使用全息增强现实硬件来生成真实的3D地形图，并允许无人机飞手简单地指向在任何平面之上可视化的目标。

全息界面使用了多种技术来实现这一点。为了显示，微软全息头戴式耳机以彩色体素地图的形式生成AR内容，可以从任何角度查看。通过一个自主飞行无人机的深度摄像头以及实时定位数据的光线投射来传递这些信息。该系统为操作员提供了对环境高度和深度的实时和高度空间感，并使无人机能够从第三人视角轻松地观察并重新定位。

全息镜头头戴式耳机将命令反馈给无人机，并通过将佩戴者的手势和凝视转换为点按式控件来确定其在全息地图中的下一个目标。自主无人机随后可以飞到新位置，同时在移动时更新3D地图。

研究人员发布了一段演示视频，看起来更逼近科幻电影的感觉，尤其是全息方面。然而，由于带宽的限制，无人机只能向增强现实界面提供3D地图数据，并且不中继附带的第一手视频。

系统测试构架原理图

在全息无人机控制系统部署之前，研究小组仍然需要进一步研究，无人机的数据最初是在室内测试空间内使用Wi-Fi共享的，但对于室外应用，一旦5G网络覆盖可以满足无人机的使用要求，就有可能使用低延迟的5G蜂窝连接。

测试中第一组测试人员经常抱怨视野非常有限，针对这一问题，对于即将到来的全息镜头2AR耳机将可以解决。第一组人还被要求练习，以便更熟练地进行三维定位，尽管之前对增强现实硬件并不熟悉，这种情况可能会影响到不完善的3D用户界面或手势识别。

然而，与真人视频相比，3D地图数据具有更好的带宽效率。当每秒更新10次数据时，其仅仅需要272MB的数据。实时视频则需要1.39GB的数据才能以每秒30帧的速度传输第一人称视频图像。未来，该团队还将致力于将两种数据流类型进行结合，以帮助最终用户优化数据以满足网络的最低带宽水平。

尽管存各种问题，全息增强现实系统已经显示出强大的潜力。除了新颖的视觉界面外，还可以提供控制远程无人机的便利，只需使用一个简单、便携的独立增强现实耳机，而不必依赖传统的计算机、显示器和操纵杆。