计算发展的每一步都为用户输入技术带来了实质性的飞跃。 个人电脑拥有鼠标,触摸屏使智能手机成为主流消费设备,而像HoloLens和Magic Leap One这样的AR头显则利用了手势识别功能。
现在,一家新成立的公司正在寻求彻底改变整个人机界面(HMI)领域,让五种自然输入方法协同工作,而不是一种。
星期二,Asteroid为其3D人机界面入门套件发起了众筹活动,该套件为开发人员提供了用于创建由眼睛,手势,甚至思想和情感控制的应用程序的软 件和硬件。
“想象一下,3D建模程序中使用了眼睛跟踪器。它可以分辨出你关注的3D模型的哪一部分,并且可以自动放大,”Asteroid的创始人兼首席执行官 SakuPandithartane在博客中说。
“它可能会使用经过训练的人工智能,根据你的注视行为来猜测你想打开的菜单,然后自动点击菜单,进入你想要的动作。”如果电脑出错了,你可 以手动操作,或许按下“取消”按钮。
该团队表示,只要承诺支付450美元,赞助者就能得到Focus eye tracker、Axon brain PC接口,Glyph手势传感器,Continuum linear scrubber和 Orbit手持控制器,每个都由9伏电池组和蓝牙组件供电。 连接到PC,智能手机或平板电脑。
对焦系统安装在一对塑料眼镜框上,由一对高分辨率、高速USB摄像头、树莓派平板电脑、蓝牙组件和电池组成。这款眼动仪可以根据用户的眼球运 动来判断用户的意图和注意力。
用鼠标,你每隔几秒钟就会发送一次点击。眼球追踪器可以在一秒钟内多次推断出你的注意力和意图的一些信息,”Panditharatne说。
Axon由连接到Arduino板的六个头戴式电极组成。 该设备处理大脑信号,可用于解释用户意图以及情绪。
最后三个组件Glyph,Continuum和Orbit连接到单个Arduino板。 Glyph使用电场传感器来解释手势。 Continuum采用滑动电阻控制器,通过触摸输入实现精细控制。Orbit是一款丙烯酸魔杖型控制器,可以作为具有九自由度的手持式控制器。
借助随机附带的Mac OS软件,开发人员可以创建将感官输入与应用程序内的操作相关联的节点。 例如,用户眼睛的移动可以控制光标在三维空间中的位置(不仅仅是水平和垂直坐标)。 然后将这些节点打包到交互文件中,该文件可以加载到Swift移动应用程序中(反过来,这将使开发人员能够创建ARKit应用程序)。
“将你的想法放入计算机的过程可能比只用鼠标快10倍甚至100倍。如果以前需要10个小时来创建3D模型,那么减少100倍是6分钟,”Panditharatne说。
虽然硬件和软件是专为移动设备设计的,但Panditharatne着眼于增强现实和虚拟现实头显,其中三维空间开辟了更广泛的可能性领域,例如3D设计。
Panditharatne说:“人机界面的‘显示’部分向用户显示他们正在制作的产品的工作副本。”与智能手机或笔记本电脑相比,AR/VR头显能提供更丰富、视野更广的渲染显示。在3D建模示例中,头显显示允许更详细地查看工作模型。AR/VR还可以与触觉技术相结合,创造出一种看起来和感觉都像是由真实物体组成的显示器,这让交互感觉更加自然。
AR的倡导者和领导者,如Magic Leap的首席执行官罗尼•阿博维茨(Rony Abovitz)和微软技术研究员亚历克斯•基普曼(Alex Kipman)(或NR30中任何其他有影响力的人),经常用乌托邦式的说法,将增强现实视为计算领域的下一场重大革命。因此,“空间计算”的新范式将寻找用户输入的新方法,而这正是像Asteroid这样的公司所适合的。
Panditharatne说:“新兴的人机界面技术的有趣之处在于,它希望用户今天能够‘上传’和‘下载’一样多。”“最有前途的应用是增强创造力,用户可以和电脑一起设计新东西。”
当然,Asteroid并不是唯一为增强现实带来下一代用户输入方式的企业。Tobii正致力于将其眼球追踪技术整合到智能眼镜中。Neurable已经开发了一个用于大脑控制接口的SDK, CTRL-Labs则吸引了谷歌和亚马逊(Amazon)的投资,以开发其神经控制技术。现在很明显Leap Motion正在帮助AR开发人员和tinkerers如何利用手势识别技术。
然而,虽然Magic Leap在Magic Leap One中特别包括手持式控制器,手势识别和眼动追踪,但Asteroid的HMI套件可能是迄今为止增强现实时代人类对计算机互动的最大胆的尝试。
https://next.reality.news/news/startup-asteroid-aims-reinvent-human-computer-interface-with-augmented-reality-software-hardware-kit-0193679/
来源:next.reality