計算發(fā)展的每一步都為用戶輸入技術(shù)帶來了實質(zhì)性的飛躍。 個人電腦擁有鼠標,觸摸屏使智能手機成為主流消費設備,而像HoloLens和Magic Leap One這樣的AR頭顯則利用了手勢識別功能。
現(xiàn)在,一家新成立的公司正在尋求徹底改變整個人機界面(HMI)領(lǐng)域,讓五種自然輸入方法協(xié)同工作,而不是一種。
星期二,Asteroid為其3D人機界面入門套件發(fā)起了眾籌活動,該套件為開發(fā)人員提供了用于創(chuàng)建由眼睛,手勢,甚至思想和情感控制的應用程序的軟 件和硬件。
“想象一下,3D建模程序中使用了眼睛跟蹤器。它可以分辨出你關(guān)注的3D模型的哪一部分,并且可以自動放大,”Asteroid的創(chuàng)始人兼首席執(zhí)行官 SakuPandithartane在博客中說。
“它可能會使用經(jīng)過訓練的人工智能,根據(jù)你的注視行為來猜測你想打開的菜單,然后自動點擊菜單,進入你想要的動作。”如果電腦出錯了,你可 以手動操作,或許按下“取消”按鈕。
該團隊表示,只要承諾支付450美元,贊助者就能得到Focus eye tracker、Axon brain PC接口,Glyph手勢傳感器,Continuum linear scrubber和 Orbit手持控制器,每個都由9伏電池組和藍牙組件供電。 連接到PC,智能手機或平板電腦。
對焦系統(tǒng)安裝在一對塑料眼鏡框上,由一對高分辨率、高速USB攝像頭、樹莓派平板電腦、藍牙組件和電池組成。這款眼動儀可以根據(jù)用戶的眼球運 動來判斷用戶的意圖和注意力。
用鼠標,你每隔幾秒鐘就會發(fā)送一次點擊。眼球追蹤器可以在一秒鐘內(nèi)多次推斷出你的注意力和意圖的一些信息,”Panditharatne說。
Axon由連接到Arduino板的六個頭戴式電極組成。 該設備處理大腦信號,可用于解釋用戶意圖以及情緒。
最后三個組件Glyph,Continuum和Orbit連接到單個Arduino板。 Glyph使用電場傳感器來解釋手勢。 Continuum采用滑動電阻控制器,通過觸摸輸入實現(xiàn)精細控制。Orbit是一款丙烯酸魔杖型控制器,可以作為具有九自由度的手持式控制器。
借助隨機附帶的Mac OS軟件,開發(fā)人員可以創(chuàng)建將感官輸入與應用程序內(nèi)的操作相關(guān)聯(lián)的節(jié)點。 例如,用戶眼睛的移動可以控制光標在三維空間中的位置(不僅僅是水平和垂直坐標)。 然后將這些節(jié)點打包到交互文件中,該文件可以加載到Swift移動應用程序中(反過來,這將使開發(fā)人員能夠創(chuàng)建ARKit應用程序)。
“將你的想法放入計算機的過程可能比只用鼠標快10倍甚至100倍。如果以前需要10個小時來創(chuàng)建3D模型,那么減少100倍是6分鐘,”Panditharatne說。
雖然硬件和軟件是專為移動設備設計的,但Panditharatne著眼于增強現(xiàn)實和虛擬現(xiàn)實頭顯,其中三維空間開辟了更廣泛的可能性領(lǐng)域,例如3D設計。
Panditharatne說:“人機界面的‘顯示’部分向用戶顯示他們正在制作的產(chǎn)品的工作副本。”與智能手機或筆記本電腦相比,AR/VR頭顯能提供更豐富、視野更廣的渲染顯示。在3D建模示例中,頭顯顯示允許更詳細地查看工作模型。AR/VR還可以與觸覺技術(shù)相結(jié)合,創(chuàng)造出一種看起來和感覺都像是由真實物體組成的顯示器,這讓交互感覺更加自然。
AR的倡導者和領(lǐng)導者,如Magic Leap的首席執(zhí)行官羅尼•阿博維茨(Rony Abovitz)和微軟技術(shù)研究員亞歷克斯•基普曼(Alex Kipman)(或NR30中任何其他有影響力的人),經(jīng)常用烏托邦式的說法,將增強現(xiàn)實視為計算領(lǐng)域的下一場重大革命。因此,“空間計算”的新范式將尋找用戶輸入的新方法,而這正是像Asteroid這樣的公司所適合的。
Panditharatne說:“新興的人機界面技術(shù)的有趣之處在于,它希望用戶今天能夠‘上傳’和‘下載’一樣多。”“最有前途的應用是增強創(chuàng)造力,用戶可以和電腦一起設計新東西。”
當然,Asteroid并不是唯一為增強現(xiàn)實帶來下一代用戶輸入方式的企業(yè)。Tobii正致力于將其眼球追蹤技術(shù)整合到智能眼鏡中。Neurable已經(jīng)開發(fā)了一個用于大腦控制接口的SDK, CTRL-Labs則吸引了谷歌和亞馬遜(Amazon)的投資,以開發(fā)其神經(jīng)控制技術(shù)?,F(xiàn)在很明顯Leap Motion正在幫助AR開發(fā)人員和tinkerers如何利用手勢識別技術(shù)。
然而,雖然Magic Leap在Magic Leap One中特別包括手持式控制器,手勢識別和眼動追蹤,但Asteroid的HMI套件可能是迄今為止增強現(xiàn)實時代人類對計算機互動的最大膽的嘗試。
https://next.reality.news/news/startup-asteroid-aims-reinvent-human-computer-interface-with-augmented-reality-software-hardware-kit-0193679/
來源:next.reality