AI帮你靠“想象”打字:手机电脑软键盘也能盲打了,准确率达95%

新闻 机器学习
来自韩国科学技术高级研究院在一项最新研究中,提出了一种完全靠想象的键盘:I-Keyboard,这个界面上看不到软键盘上的字母布局、形状和大小。
[[272651]]

本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。

有了机器学习,没有软键盘还能照样打字。

凭啥?凭想象。

来自韩国科学技术高级研究院在一项最新研究中,提出了一种完全靠想象的键盘:I-Keyboard,这个界面上看不到软键盘上的字母布局、形状和大小。

通过机器学习技术,你从触摸屏的任何区域进行打字,并且准确率还有点高。

研究人员声称,与传统的虚拟键盘相比,这个新颖的盲打键盘能让大多数人能够达到95.84%的准确度。

[[272652]]

构建系统

构建这个系统的第一步,就是先找到不用人类用软键盘打字的触摸位置的数据集。

研究人员招募了43名经常使用QWERTY键盘的志愿者,用他们的数据构建数据集。所谓的QWERTY键盘键盘,就是我们平时电脑和手机26键输入法上的字母布局。

AI帮你靠“想象”打字:手机电脑软键盘也能盲打了,准确率达95%

这些志愿者需要在研究人员的指示下输入一些固定句子,包括从推特和20个新闻数据集中随机抽取额150-160个句子,并在正式开始前用15个句子进行了预热。

最终,每个参与者大约花费了15分钟,总共输入了7245个短语,以及196194次键入。

论文中显示的手机装备如下:

AI帮你靠“想象”打字:手机电脑软键盘也能盲打了,准确率达95%

△ 数据收集装置

屏幕有一定的输入指引(图a),这个过程中屏幕上除了删除键和输入键以外没有其他提示,黑漆漆的输入界面上看起来是这样的(图b):

AI帮你靠“想象”打字:手机电脑软键盘也能盲打了,准确率达95%

收集完位置信息后,研究人员对这些数据进行了归一化处理,并且去除了位置偏移量。

他们发现,志愿者“盲打”时认定的字母排布不是水平对齐的,二是呈现一条特定的分布曲线。

AI帮你靠“想象”打字:手机电脑软键盘也能盲打了,准确率达95%

△ 算法“脑补”的键盘分布

于是,在这些调研之后,研究人员设计了I-Keyboard的系统架构,由三个模块组成:

用户交互模块,准备模块和通信层。

首先,系统通过触摸屏或触摸界面接收输入。

同时数据准备模块预处理信息,并格式化原始输入。

最终,紧密集成了机器学习框架和应用程序框架的通信层处理信息,深度神经解码器(DND)负责将输入信息翻译成字符序列,预测打字人输入的到底是什么。

AI帮你靠“想象”打字:手机电脑软键盘也能盲打了,准确率达95%

△ I-Keyboard系统架构图

部署系统

系统构建完成后,研究人员在一台MacBook Pro上部署了I-Keyboard,测试系统的性能。

他们在短语集中随机选出了20个短语,参与者需要以每分钟45.47个单词的速度进行键入。

这个输入速度不是固定的,研究人员考虑到,在用物理键盘或者软键盘打字时,每个人的速度本身就不同。因此,为了保证测试质量,测试者也可以用物理键盘打字88.74%的速度进行输入。

结果显示,这种方法的正确率达到了95.84%,超过了基线水平4.06%。

研究人员表示,目前I-Keyboard还不支持所有型号的智能手机,但研究人员的目标是将这个系统扩展到所有触摸屏设备上。

他们表示,这样研究未来前景无限,还可以加入一些手势识别算法,实现对非字母字符的输入,比如胡子,标点符号和功能键等。

总之,是一种全新体验的输入方式。

传送门

VentureBeat报道:

https://venturebeat.com/2019/08/02/ai-may-turn-touchscreen-keyboards-invisible/

论文地址:

https://arxiv.org/abs/1907.13285

 

责任编辑:张燕妮 来源: 量子位
相关推荐

2023-08-15 14:55:57

2018-11-14 10:01:30

谷歌开源机器学习

2023-08-08 13:54:15

2022-04-09 10:16:52

神经网络深度学习AI

2021-08-07 15:31:45

Windows 10Windows微软

2022-09-14 09:55:32

人工智能AI解码技术

2020-11-20 17:03:11

AI 数据人工智能

2023-04-10 12:51:17

人工智能唇语

2023-04-10 16:06:25

人工智能唇语

2018-06-19 10:30:55

2023-08-07 11:41:44

2023-06-28 13:49:12

AI人工智能

2021-11-22 12:26:18

AI人工智能说谎

2011-05-23 09:21:42

2019-11-20 10:03:56

AI 数据人工智能

2018-06-08 15:51:56

CNN皮肤癌人工智能

2023-12-26 14:50:07

2020-10-09 08:31:00

AI

2024-03-06 09:16:57

PAD设备kikaInput鸿蒙

2009-08-21 13:25:49

C#打开软键盘
点赞
收藏

51CTO技术栈公众号