穿墙眼？MIT研发全新射频—姿态探测系统 可隔墙看到人移动的骨骼状图像

通过无线电波与人工智能的结合，麻省理工学院的研究人员研发了一个全新的射频—姿态(RF-Pose)探测系统，这项技术可以看到墙另一边的人移动的骨骼状图像。虽然这听起来像是特警队在破门而入之前希望拥有的技术，但它已经以一种令人惊讶的方式被用于监控帕金森症患者在家中的活动。

该项目的高级研究员、麻省理工学院电子工程和计算机科学教授迪娜·卡塔比(Dina Katabi)说：“人们对这种技术的兴趣可以追溯到几十年前，美国国防部高级研究计划局(DARPA)曾有一个重大项目，试图使用无线信号探测位于墙壁后的人。但在这项最新的研究之前，这些系统所能做的只是显示一个人在墙后的斑点状图形。”

如今，这项技术能够更精确的显示信息：它能把场景中的人描绘成像骷髅一样的木棍，同时显示出他们在做日常活动时的实时动作，比如行走和坐卧。这项技术的重点在于检测人体的关键部位，包括肘关节、臀部和脚。

卡塔比说道：“当在墙后面的人开始移动时，你就会看到系统创建的火柴人会做出相同的动作，如果那个人坐下来，你就会看到系统中的火柴人也坐下来。”

一、 无线电信号反射出人体，神经网络加以识别

RF-Pose系统的工作原理是：传输比WiFi功率低1000倍的无线信号，穿透物体，如墙壁，再反射出人体——由于人体大部分由水组成，无线电无法穿透——之后再穿过墙壁回到设备中。

RF-Pose系统使用无线信号，可以作为一个医疗保健系统，监测患者在墙壁另一侧的运动。(图片来源：Jason Dorfman / MIT CSAIL)

现在的问题是：如何解读系统回传的信息?卡塔比说：“这就是人工智能，特别是神经网络机器学习发挥作用的地方。”

人工智能研究人员通过添加注释信息来训练神经网络，使它能从数据中推断出自己的规则以便学习，这个过程就叫做监督学习。以一个识别猫的神经网络为例，其需要人们找到一个很大的图片数据库，并且将其中的图片都标注为“是猫”和“不是猫”。如果想要教一辆自动驾驶汽车红绿灯是什么样的，你需要显示包含红绿灯的图像，并对其进行注释，以便告诉AI什么是红绿灯。

(图片来源：MIT CSAIL)

为了解决这一难题，研究者使用无线设备和摄像头来采集数据。他们拍摄了数千张人类活动场景(如行走、说话、坐下、开门和等电梯)的照片。神经网络通常用来解析图像，但也可以用来执行复杂的任务，比如从一种语言翻译到另一种语言，甚至可以通过模仿所给出的数据生成新的文本。

但在这种情况下，有一个问题：没有人能通过无线电无线电信号分析出哪个位置是头，哪个位置是脚。换句话说，通过图像处理信息很容易，但通过人身上反射的无线电信号数据处理信息就没那么轻松了。

(图片来源：MIT CSAIL)

研究团队的解决方案是在训练期间，把信号接收器和摄像机连接起来，然后给摄像机创建的图像贴上信息标签，并且提取出不同姿势的人类简略骨架(火柴人图，用于表示人体姿态)，将其与无线信号对应起来。这样的组合能让系统学习出场景中无线信号和火柴人图之间的关联，帮助神经网络将这些活动联系起来。

为了能让摄像机真正接受到图像信号，这些训练工作必须在没有墙的情况下完成。卡塔比解释道：“我们使用摄像机上的信息标签和同时发生的无线电信号来对它们进行训练。”

训练结束后，他们惊讶地发现，尽管这个系统只对可见的人进行了训练，但他们依然能探测到隐藏于墙背后的人。“它们能看到并描绘出墙壁后面的人形，尽管在训练中它们从未见过。” 卡塔比说道。 不仅如此，它甚至可以通过人们的步态来区分他们。在另一个神经网络的帮助下，该系统可以记录人们走路的特征并识别不同的人，即使隔着墙壁，识别个体的准确率仍超过83%。

二、 初步应用于治疗帕金森患者

研究人员已开始将“RF-Pose”项目付诸实践，在一项针对帕金森患者的小型研究中，通过在病人家中安装这些设备，他们可以在舒适的环境下监控类似帕金森、多发性硬化症(MS)和肌肉萎缩症等疾病，为医生提供更多信息，从而对症下药。这项技术也将通过监测跌倒、受伤和运动模式的变化，来帮助老年人能够更独立的生活。他们现在正和医生们合作，来探索“RF-Pose”在医疗领域的应用。

从这个意义上说，它比传统的视频监控少了些许侵入性，患者也不必佩戴传感器或要记着给他们的设备充电。

这项研究共涉及7人，历时8周。 卡塔比说：“系统分析的结果与用于评估患者的标准问卷‘高度相关’。” 此外，它还揭示了关于帕金森患者生活质量的更多信息。

目前，Michael J. Fox基金会正在资助团队进行进一步的研究;卡塔比说，通过这种方式监测病人可以帮助患者避免“白大褂综合症”，即病人在医生面前就诊时表现不同。 这项技术的使用也会引发相应的隐私问题，但卡塔比解释过，在没有得到人们同意的情况下，它不会被应用于任何人身上。

团队成员将展示成果

除了医疗健康领域的应用，团队表示，该项目还可以用在需要玩家在整个房子中移动的视频游戏中，或者需要定位幸存者的搜救任务等。

除了卡塔比教授，该论文的作者还包括博士生Mingmin Zhao(赵明民，一作)、Antonio Torralba教授、硕士生Tianhong Li、博士后Mohammad Abu Alsheikh、博士生Yonglong Tian、博士生Hang Zhao。

在这篇论文中，模型的输出是二维的火柴人骨架图。不过该团队正在将其扩展到三维，以监测更小幅度的运动。比如，这个系统将能够通过观察老年人的手的摆动规律，来确定是否需要健康检查。

Torralba说：“如果你把计算机视觉系统当成一个老师，那么这个例子真的很有趣，作为学生的无线信号观测系统居然比老师还厉害了。”

赵明民表示：“通过视觉数据和AI结合实现穿墙观测，通过视觉数据和AI结合实现穿墙观测，我们能够更好地理解生活场景，提供让生活更安全，高效的环境。”

他们将在本月晚些时候在犹他州盐湖城召开的计算机视觉与模式识别会议(Conferenceon Computer Visionand Pattern Recognition，CVPR)上展示这一成果。