該裝置使用一種類(lèi)似于微軟Kinect的、具有感應(yīng)功能的攝像頭和一個(gè)能夠放置在用戶(hù)肩膀上的微型激光投影儀。攝像頭能夠在任何表面上捕捉到用戶(hù)手指動(dòng)作，投影儀不但能夠?qū)㈡I盤(pán)或控制按鈕投射到任何表面上，還能根據(jù)不同物體的形狀和方向，自動(dòng)修正投影以減少圖像失真。借助這種設(shè)備，用戶(hù)能夠像在智能手機(jī)或平板電腦上一樣當(dāng)空操作軟件和程序。
卡內(nèi)基梅隆大學(xué)人機(jī)交互研究所的克里斯·哈里森博士說(shuō)：“凡是你能想象得到的、在現(xiàn)今任何移動(dòng)設(shè)備上進(jìn)行的操作幾乎都可以通過(guò)該系統(tǒng)實(shí)現(xiàn)。非但如此，使用這種裝置還可以讓操作電腦的過(guò)程更加輕松愜意：手掌可以被用作電話(huà)撥號(hào)盤(pán)或是便簽紙，地圖可以被投射到墻壁上并通過(guò)手指運(yùn)動(dòng)任意放大縮小……”哈里森表示，未來(lái)該設(shè)備有可能只有一張撲克牌或一個(gè)火柴盒那么大，這樣不但更易攜帶使用，還能方便地集成到其他手持設(shè)備當(dāng)中。
微軟研究院自適應(yīng)系統(tǒng)和交互組研究員赫沃奇·本克說(shuō)，通過(guò)這種裝備，“該裝置將能夠充分利用現(xiàn)實(shí)世界所提供的各種表面，而不用被顯示屏和輸入裝置所束縛。我們認(rèn)為這項(xiàng)工作進(jìn)一步拓寬了人際交互的用戶(hù)界面，讓我們?cè)阪I盤(pán)鼠標(biāo)、觸摸外又多了一種新的輸入方式，有望讓計(jì)算無(wú)處不在夢(mèng)想盡快成為現(xiàn)實(shí)?！?
哈里森此前還曾與微軟研究院開(kāi)發(fā)出一種名為Skinput的技術(shù)，該技術(shù)通過(guò)一種聲音傳感器，能夠?qū)τ脩?hù)觸動(dòng)手臂或輕彈手指的聲音作出響應(yīng)，用來(lái)控制智能手機(jī)或其他小型計(jì)算機(jī)設(shè)備。
哈里森是在微軟研究院實(shí)習(xí)時(shí)與赫沃奇·本克以及安德魯·威爾遜合作開(kāi)發(fā)出這一系統(tǒng)的。在10月19日美國(guó)加利福尼亞州圣巴巴拉舉行的計(jì)算機(jī)用戶(hù)界面軟件和技術(shù)(UIST)研討會(huì)上，有哈里森對(duì)該系統(tǒng)進(jìn)行的更為詳細(xì)的介紹。
