最新研究不用摄像头,仅靠WiFi就能看到你
现在,不用摄像头,只靠WiFi就能"看到"一个人在房间里的全部动作了。
准确地说,是输入WiFi信号,就能输出一个3D人体姿态,也就是一个包含了关节或骨骼关键点,能够描述人行为动作(也就是姿态)的三维模型,就像是下面这样:
这项研究的论文于2022年12月31日发表在预印本网站Arxiv,作者则来自卡耐基梅隆大学的一个团队,他们表示,人体姿态的估计或识别在当下很多场景中都能用到(如自动驾驶、医疗救助等),但使用传统的摄像头、传感器或者雷达却存在难以保证隐私安全、成本限制等问题。
为了解决这些问题,团队便想到了现在几乎家家必备的WiFi,所要用到的设备为两个路由器,其核心原理也并不难——WiFi信号在遇到人体运动时会改变其传播路径,进而使得接收器收到的信号的相关数据产生不同程度的变化,通过分析这些变化的具体参数,就能实现人体感知。
不过,这种方式只能定位物体的中心,如果存在手机、微波炉等电磁干扰,定位精度也会下降。因此,研究团队构建了一种神经网络架构,可以通过WiFi中进行关键点较为密集的人体姿态估计。具体分为三步:
进行振幅和相位的"消毒"(Sanitization)操作,对原始WiFi信号中的关键数据进行清理;
将上述清理过的数据通过双分支的解码器-编码器网络转换为2D特征图;
将2D特征图通过改良后的DensePose-RCNN架构(一种人体姿态估计模型)转换为3D人体模型。
在最终生成模型的效果上,基于拍摄图像生成的三维人体模型与基于WiFi生成的模型相比,性能基本一致。
左:基于图像生成 右:基于WiFi生成
同时,通过对实验结果的数据分析,研究团队还发现,在基于拍摄图像生成的三维人体模型中,由于离摄像机较远的个体在图像中占据的空间较小,也导致了这些主体的信息较少,但在基于WiFi信号生成的结果中,由于WiFi信号包含了整个场景中的所有信息,所以不管主体的位置如何,最终生成的模型数据信息量都相差不大。
AP-m和AP-l两值差异较小,说明结果信息差异也较小。
当然,研究团队也承认,目前基于图像进行人体姿态估计的精度普遍比基于WiFi的方法要更高,他们所提出的新方法虽然在估计人体躯干的姿势方面表现良好,但在检测四肢等细节方面仍然存在困难。
AP指平均精确度,越高越好。
此次论文的一作二作皆为华人,在论文最后,研究者们表示,他们希望未来能收集更多数据拓展工作,使得WiFi设备能成为继RGB相机、激光雷达之后的另一更廉价、更能保护隐私的人体传感器。
编译:南都记者杨博雯
宝钢鞍钢沙钢下调出厂价格有何玄机?对钢材价格走势有何影响昨天,宝钢鞍钢和本钢同时公布了2022年12月份钢材出厂价格,沙钢也公布了11月中旬钢材出厂价格,这四家国内重量级钢厂均选择下调出厂价格,对冬季钢材市场行情影响很大。宝钢股份在11
中国中铁中标公告15大工程906亿11月11日,中国中铁股份有限公司发布公告称,近期,本公司中标铁路工程路工程市政及其他工程,中标价合计约人民币约905。9亿元,约占本公司中国会计准则下2021年营业收入的8。46
高端纯外卖崛起,有人月入300万来源丨创业邦(IDichuangyebang)作者丨王艺编辑丨海腰头图丨图虫创意作为餐饮的一种形式,无堂食外卖这种形式一直存在。在美国,主打30分钟送达的达美乐比萨,和UBER创始
头枕怎么调都不舒服?其实它不是用来枕头的,别用错了!车子的头枕怎么调都不舒服,不是因为调不舒服,而是因为当初设计的时候,就不是让我们舒服的,它是安全配置。为什么头枕设计的这么难调整其实和安全带一样的,不少朋友家里的长辈不想系安全带,
在习近平新时代中国特色社会主义思想指引下牢记嘱托奋力前进德州投资发力项目提速推动经济提档升级德州扩投资,抓项目,统筹做好疫情防控和经济社会发展,有序推动重点工业企业重点项目抢抓施工黄金期,促进项目早日投产达效。德州天衢新区多个教育项目是全市挂图作战重点项目,德州汽车摩托车
雕花蜜饯进校园非遗文化代代传0000视频加载中红网时刻新闻11月14日讯(记者康晓乔通讯员龙俊霓)11月11日,湖南省怀化市靖州县土桥小学请来雕花蜜饯技艺传承人罗先梅,为孩子们传授雕花蜜饯的基本制作技艺。雕花
美中科技战升级人工智能成焦点最近,美中科技战不断升级。美国对中国的出口限制,从用于芯片设计的EDA软件,到14纳米以下制程的产品,最近,又扩展到了高性能人工智能(AI)芯片。此外,拜登政府还计划10月发布新规
地理大发现英国大航海之初期探索对于大航海时期建立了最具影响力的日不落帝国的英国,由于其殖民地的建立和发展已经在其他篇章讲述过,就不再赘述。而英国东印度公司也有了专门的篇章中的介绍,因此,我们只对其航海探索和发现
盖在海边巨岩上的海神庙,水明漾的海边露天餐厅,金巴兰海滩烧烤巴厘岛系列之二亲近自我介绍我是心有锦绣,点击右上方关注,为您分享饮食运动旅游文艺等生活干货,希望和大家互通有无,共同提升。早晨睡到910点钟起来,到酒店大堂外面已过11点,司机师傅
英国通货膨胀连累圣诞老人新华社北京11月13日电由于物价上涨等原因,本是圣诞节一大卖点的圣诞老人小屋今年在英国遇冷,一些地方被迫取消这一传统景点。据英国每日邮报11日报道,康沃尔郡赫尔斯顿一家知名园艺中心
法国大名单锋线后防猛如虎,中场空虚露隐患近日,法国国家队公布了征战卡塔尔的25人大名单。作为卫冕冠军,本届世界杯高卢雄鸡依然是夺冠热门之一。不过仅从纸面实力来看,法国的阵容并不完备。虽然球队由新科金球先生本泽马和当代双骄