空气输入法!浙大最新研究:空中动动手指就能打字

2021-12-28 17:28:38 来源: 快科技 阅读量:14895   

许多人日常在用的智能手表,它的文本输入要么靠语音,要么靠打字或手写。

但有时你可能不方便说话,或者在那么小的屏幕上戳键盘实在有点局促。

那咋办。

也许可以试试隔空打字法。

浙江大学就开发了这样一个名叫AirText的应用,只需你动动手指和手腕,手表就确识别空中字符,错误率低至3.9%。

还配备联想和推荐功能,让拼写速度更快。

给智能手表配上隔空打字功能

开发AirText的一个主要挑战在于如何让它理解手腕运动和指尖拼写动作的对应关系。

就像下面这张图所展示的,拼写时手腕呈现出来的轨迹和正常字母差得还挺多的。

为此,研究团队先借助了一个现成工具Leap Motion,它可以用红外传感器跟踪手势。

然后八名志愿者使用五种不同的智能手表拼出超过25000个字符,用Leap Motion收集相关的手腕和手指运动数据。

再将数据输入神经网络模型,进行训练,最终AirText可以根据用户手腕微小的动作变化推断指尖的轨迹。

然后,仅通过智能手表就可以高效,准确地将推断出的轨迹识别为相应的字符。

为了加快拼写速度,他们还给系统配上了单词预测和推荐功能。

预测单词会显示在手表屏幕的四个方向,我们可以将手表向上下左右倾斜就能进行选择。

词错误率为3.9%

首先来看AirText的准确性测试。

衡量指标为WER,计算方法就是将错误字/识别正确的字。

其中错误字涉及三种类型:漏字,多字,错字。

将AirText与俩基线方法相比,最终AirText得分最低,也就是准确性最高。

三者平均分分别为3.9%,30.9%和57.1%。

以上是单用户在单设备上的测评结果。

为了更准确,他们还测试了多用户和多设备,结果如下:

左图中,同一个用户使用5种不同智能手表测试AirText获得的准确率得分分别为:8.3%,7.5%,6.5%,7.7%和3.9%。

研究人员表示,7%的WER意味着平均每15个单词中有一个识别错误,这对于隔空手写来说还是可以接受的。

右图中,8位不同用户使用同一手表获得了11.2%,5.9%,4.3%,4.0%,3.6%,5.9%,4.7%和3.9%的WER。

从中我们可以看出,与不同的设备相比,不同的用户对准确性的影响更大。

不过研究人员表示,借助模型更新组件,AirTex 仍然可以针对不同用户实现较高的准确率。

然后是速度测试。

由于BLSTM基线的WER约为57%,错误率太高,研究人员只比较了AirText和IMU—CNN两者的速度。

衡量指标是WPM,其计算方式为用总体输入字数—错误字数/时间。

结果AirText的平均WPM为8.1,而IMU—CNN基线的WPM仅为4.6。

研究人员指出,此输入速度与一些基于双手触摸屏的文本输入方法相当。

总体来看,AirText的准确率不错,但速度还需要进步。

慢的主要原因还是因为它每拼写一个字符就需停顿一会儿。

研究人员正在研究破解办法,并表示最终有兴趣将AirText商业化。

一作为浙江大学计算机学院助理教授高艺,浙江大学博士毕业,研究方向包括嵌入式软件,无线和移动计算,传感器网络和信息物理系统。

其谷歌学术引用次数总计3000+。

声明:本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。文章事实如有疑问,请与有关方核实,文章观点非本网观点,仅供读者参考。

精选 导读

大摩:苹果产量或超预期增长,预计Q1业绩有“惊喜”

摩根士丹利分析师KatyHuberty指出,苹果本季度iPhone产量可能超预期增长,因为交货周期正在下降到“更正常的水平”。该分析师预计苹...

发布时间: 2021-12-23 17:04
行情   2021-12-23

中金:维持石四药集团跑赢行业评级目标价5.8港元

中金发布研究报告称,维持石四药集团“跑赢行业”评级,保持2021/22年归母净利润预测7.9/11.64亿元不变,目标价5.8港元。报告中称...

发布时间: 2021-12-23 17:03
行情   2021-12-23

实探中装建设元宇宙合作方鸿蒙时代:与华为无关已搬离注册地

12月22日,深交所对中装建设发布关注函,要求说明公司是否存在“楼宇智能大数据信息处理、AI可视化、元宇宙应用、智能建造系统、区块链等技术”...

发布时间: 2021-12-23 17:02
行情   2021-12-23

“疫”线女将:眼里有光心中有爱

“疫”线女将:眼里有光心中有爱题:“疫”线女将:眼里有光心中有爱曾灯光璀璨、游人如织的边陲小城因新冠疫情的再次暴发按下“暂停键”。内蒙古自治...

发布时间: 2021-12-23 16:48
要闻   2021-12-23

联通网络智能运维产品研发招标:华为、中软等11家企业入围

中国联通日前正式公布网络智能运维产品研发招标结果,华为、中软、软通动力、亚信科技等11家企业入围。传统网络故障的被动处理方式,从故障感知到信...

发布时间: 2021-12-23 16:35
酷玩   2021-12-23

热点 推荐

小米12Pro自研智能动态刷新率演示视频公布:支持新技能“滑动变速”,更

今日上午,小米手机官方表示,小米自研智能动态刷新率,是第二代低功耗2K屏幕的创新体验,第一次让小米12Pro拥有了滑动变速的新技能。小米表示...

发布时间: 2021-12-23 16:31
酷玩   2021-12-23

增速惊人!鸿蒙用户量半年突破2.2亿

C114讯12月23日下午消息在今日举办的华为动机旗舰新品发布会上,华为常务董事、消费者BGCEO、智能汽车解决方案BUCEO余承东公布了鸿...

发布时间: 2021-12-23 16:26
酷玩   2021-12-23

用户群聊从线上走到线下他趣成年轻群体社交困境破局者

伴随当下工作和生活节奏越来越紧凑,婚恋、交友等社交需求逐渐成为年轻人的刚性需求。为满足日益提升的社交需求,他趣用户从线上延伸到线下,通过组织...

发布时间: 2021-12-23 14:59
机器人   2021-12-23

京东会展云“云上服贸会”项目入选中国信通院“2021年数字孪生城市典型案

近日,2022中国信通院ICT+深度观察报告会隆重举办,京东会展云技术支持的中国国际服务贸易交易会数字平台项目入选“2021年数字孪生城市典...

发布时间: 2021-12-23 14:56
机器人   2021-12-23

华为Mate9手机推送鸿蒙HarmonyOS2.0.0.140:新增桌面

华为Mate9手机开始推送鸿蒙HarmonyOS2.0.0.140更新。更新包1优化了音量等基础体验,并新增了桌面图标放大功能。更新包2修复...

发布时间: 2021-12-23 14:41
机器人   2021-12-23
bd9