当前位置: 华文世界 > 科技

微软新专利:可用「舌头姿势」实现交互,甚至可以实现打字

2024-04-02科技

微软指出,虽然语音识别和眼动追踪可以替代免提技术以作为计算机输入方式,但这些技术也有一定的局限性。为此,微软新专利显示了用户使用舌头进行数据输入的下一代交互形式。该方法支持接收从惯性传感器传来的一个或多个信号,检测特定的舌头动作,并输出经过训练的数据。

另一个示例包括一个方法或技术,该方法或技术可以包括指示用户执行特定舌头姿势并在用户执行特定舌头姿势时测量来自惯性传感器的一个或多个运动信号。该方法或技术还可包括训练机器学习模型,以使用一个或多个运动信号来检测特定舌头姿势并输出训练后的机器学习模型。

另一个示例包括一种系统,该系统包括惯性测量单元、处理器和存储介质。惯性测量单元可配置运动信号,存储介质可以存储指令,当处理器执行这些指令时,使系统至少基于运动信号检测舌头动作,并至少基于舌头动作控制应用程序。

微软专利图 2A-2D 示出了各舌头姿势的侧视图。微软专利图 4 说明了示例应用场景#400,该场景传达了如何组合各种传感模式以允许用户控制应用程序。

在这里,用户看到一个虚拟键盘 #401,用于在文本输入框 #402 中输入文本。用户可以用眼睛扫描虚拟键盘的各个字母。当用户扫描时,可以使用一个或多个传感器进行视线跟踪来确定用户的视线指向哪个字母,并且可以在视觉上区分该字母(例如,粗体、放大等),以告知用户他们当前瞄准的字母。

微软指出,文本输入只是从舌头姿势接收输入的众多类型的应用之一。例如,游戏、飞行模拟器、地图应用程序、消息应用程序和紧急呼叫可以使用舌头姿势进行全部或部分控制。