如果智能设备不了解它们的位置或者周围的人正在做什么，它们看起来就会显得愚蠢。卡内基梅隆大学的研究人员表示，通过分析声音和振动的补充方法可以增强环保意识。

CMU人机交互研究所(HCII)的助理教授克里斯哈里森说：“坐在厨房台面上的智能扬声器无法弄清楚它是否在厨房里，更不用说知道一个人在厨房里做了什么。” “但如果这些设备能够理解周围发生的事情，那么它们可能会更有帮助。”

Harrison和Future Interfaces Group的同事今天将在柏林计算机协会用户界面软件和技术研讨会上报告这个问题的两种方法 - 一种使用最普遍存在的传感器，麦克风，另一种使用20世纪50年代克格勃使用的现代版窃听技术。

在第一种情况下，研究人员试图开发一种基于声音的活动识别系统，称为Ubicoustics。该系统将使用智能扬声器，智能手机和智能手表中的现有麦克风，使他们能够识别与地点相关的声音，如卧室，厨房，工作室，入口和办公室。

“这里的主要思想是利用娱乐业中常用的专业音效库，”Gierad Laput博士说。HCII的学生。“它们干净，标签清晰，分割良好且多样化。此外，我们可以将它们转换并投影到数百种不同的变体中，创建大量数据，非常适合培训深度学习模型。

“这个系统可以作为软件更新部署到现有设备并立即工作，”他补充说。

即插即用系统可以在任何环境中工作。例如，当有人敲击前门时它可以提醒用户，或者当检测到活动时移动到食谱中的下一步，例如运行搅拌器或切碎。

研究人员包括Karan Ahuja，博士。HCII的学生和软件研究所助理教授Mayank Goel开始使用现有的声音标签模型，并使用专业图书馆的声音效果进行调整，如厨房用具，电动工具，吹风机，键盘等。特定于语境的声音。然后，他们合成地改变了声音，创造了数百种变化。

拉普特说，识别声音并将它们置于正确的环境中是一项挑战，部分原因是因为经常出现多种声音并且可能相互干扰。在他们的测试中，Ubicoustics的准确率约为80% - 与人类准确性相比具有竞争力，但还不足以支持用户应用程序。更好的麦克风，更高的采样率和不同的模型架构都可以通过进一步的研究提高准确性。

在另一篇论文中，HCII博士。学生杨章，拉普特和哈里森，描述了他们所谓的Vibrosight，它可以使用激光振动测量法检测房间特定位置的振动。它类似于KGB曾用于检测窗户等反光表面上的振动的基于光的设备，允许他们收听产生振动的对话。

“关于振动的一个很酷的事情是，它是大多数人类活动的副产品，”张说。在跑步机上跑步，敲击锤子或在键盘上打字都会产生可在远处探测到的振动。“另一个很酷的事情是振动局限于表面，”他补充道。与麦克风不同，一项活动的振动不会干扰另一种活动的振动。与麦克风和摄像头不同，监控特定位置的振动会使这种技术变得谨慎并保护隐私。

这种方法确实需要一个特殊的传感器，一个低功率激光器和一个电动的可操纵镜子。研究人员以约80美元的价格建造了他们的实验装置 反光标签 - 用于制造夜间更加明显的自行车和行人的相同材料 - 应用于要监控的物体。传感器可以安装在房间的角落，可以监控多个物体的振动。

张说，传感器可以检测设备是否开启或关闭，准确度达到98%，并根据物体的振动曲线识别出设备的准确率为92%。它还可以检测移动，例如当有人坐在其中时椅子的移动，并且它知道某人何时阻挡了传感器的标签视图，例如当有人使用水槽或洗眼器时。

版权说明： 本文版权归原作者所有，转载文章仅为传播更多信息之目的，如作者信息标记有误，请第一时间联系我们修改或删除，多谢。

标签：