有形的手勢:混合現(xiàn)實的體感交互

2 評論 8293 瀏覽 34 收藏 9 分鐘

在這篇文章中,主要介紹了我們是如何專注于研究在混合現(xiàn)實中用肢體與自然手勢進(jìn)行交互的。

最近我們?nèi)チ嘶?7“(交互設(shè)計協(xié)會,其提供了一個討論交互設(shè)計問題的在線論壇),并展示了我們對于手勢輸入的思考?。如果你還沒有看過,你可以查看這里的鏈接?:https://vimeo.com/209794287。要在8分鐘內(nèi)闡述整個概念是不可能的。所以,我們想在這再分享一下背后的思考與過程。

近年來,混合現(xiàn)實技術(shù)已經(jīng)成為了設(shè)計圈的一個流行術(shù)語,但是基礎(chǔ)的交互方式仍處于待完善的狀態(tài)。我們習(xí)慣于使用界面或者控制器來與機(jī)器進(jìn)行交互。然而,例如在使用hololens時,由于它的交互方式的缺乏,我們很難用自然手勢與其進(jìn)行交互。在這篇文章中,我們將介紹我們是如何專注于研究在混合現(xiàn)實中用肢體與自然手勢進(jìn)行交互的。

交互方式的缺乏,使人很難用自然手勢交互

肢體交互與本體感受

我們生來1可以在不借助五感的情況下感知到自身的四肢,關(guān)節(jié)和肌肉。這個叫做本體感受?*。我們覺得應(yīng)該用本體感受來充當(dāng)混合現(xiàn)實的輸入方式,用這種方式,我們完全不需要借助外部的硬件,只靠自己的身體來進(jìn)行交互就可以了。這種方式可以讓人更自然的用肢體進(jìn)行交互,我們預(yù)見其具有相當(dāng)大的潛力。

使用本體感受的手勢作為手勢交互

無形與有形

長久以來,我們都比較推崇無形設(shè)計,設(shè)計要保證無形并能輕而易舉的使用。然而,為了接近自然手勢交互。我們認(rèn)為必須改變交互方式,它必須對于用戶來說足夠明顯并且容易理解。這就要求當(dāng)我們在設(shè)計手勢輸入的時候,需要重新更好地定義交互的空間與順序。下面,我們就將講述一下有形設(shè)計。

測試原型以提高其保真度

由于沒有比動手更好的方式去思考和學(xué)習(xí)了,因此,我們做了幾個原型。并且用他們?nèi)ハ蛲聹y試并根據(jù)反饋迅速的改進(jìn)設(shè)計。

探索原型:從單一變量到一組3d變量的控件保真度

1.有形

我們把有形定義為交互邊界的一個明確基準(zhǔn),舉個例子,我們大拇指和食指之前的距離就是一個有形的本體感受交互方式,因為我們明確的知道這個距離能達(dá)到的最大值與最小值。這種類型的交互方式對于控制透明度或者其他具有明確上下限屬性的操作來說是完美的。

大拇指和食指之間的距離就是一個有形的本體手勢,因為他有一個明確的交互方式以及作用范圍

將這個手勢賦予給一些具有上下限的連續(xù)變化

2.分層級

我們的手指肌肉每天都有不同的訓(xùn)練量。拇指和食指會比小拇指更常用。因此,我們手指的力量和靈敏度都有一個高低層次,舉個例子,大拇指和食指之間的交互方式會比使用大拇指和小拇指之間的交互方式更好使用并且準(zhǔn)確率更高,我們可以利用這種現(xiàn)成的準(zhǔn)確率層級體系。例如,拇指和無名指/中指之間的點擊可以用作對象透明度的步驟控制操作。

手指的力量以及敏感度決定了他們的層級劃分

我們還把一些不常用的操作或者一些關(guān)鍵操作賦予給了大拇指與小拇指之間的交互,因為這個手勢不常用并且需要費更大的力氣完成。此外,我們還有一個原型,在這個原型中我們設(shè)定給常用手一些精密的滾動選擇等操作,并且設(shè)定非常用手來作為一些操作的補(bǔ)充,例如激活和關(guān)閉。這兩個想法背后的原理是相同的。那就是,我們的肢體交互是分層級的。在設(shè)計手勢輸入系統(tǒng)時不妨多思考一些等級的設(shè)定。

將一些低保真的步驟操作賦予給一些功能較弱并敏感的手指

3.方向性

我們有兩個原型,一個我們用手腕的方向來控制在三維空間中縮放物體時x,y,z軸的方向。另一個我們讀取兩個手指之間的矢量位置來選擇軸向,兩者的結(jié)果都不是很好。本身把手指放置在精確的x,y,z方向上感覺就不是很自然。我們感覺本體手勢在調(diào)整交互方式上是很強(qiáng)大,但在空間位置上卻不盡然。對于方向控制,我們還是覺得以下的方式更好:用手的傾斜來調(diào)整谷歌地圖。

使用大拇指和食指之間的矢量讀數(shù)來控制方向不是很自然

用手的傾斜來控制方向會感覺更自然

肯定有更多的問題

首先,我們肯定還沒解決所有的問題。以下是在這個項目中出現(xiàn)的一些問題,我們想聽到你的思考

  1. 既然本體姿態(tài)具備一些象征意義,那我們在交互設(shè)計時能不能使用這些象征意義呢?比如撥弄,頷首,或者拉弓動作等
  2. 我們已經(jīng)知道,有形和無形的手勢適用于執(zhí)行不同的任務(wù)。那如果我們把他們結(jié)合起來會怎么樣呢?
  3. 如果我們把這些原理的背景改變一下呢?在自動駕駛汽車上或者數(shù)字家庭一體化上又是怎么樣的呢?

注釋:本體感覺是指肌、腱、關(guān)節(jié)等運(yùn)動器官本身在不同狀態(tài)(運(yùn)動或靜止)時產(chǎn)生的感覺(例如,人在閉眼時能感知身體各部的位置)。因位置較深,又稱深部感覺。此外,在本體感覺傳導(dǎo)通路中,還傳導(dǎo)皮膚的精細(xì)觸覺(如辨別兩點距離和物體的紋理粗細(xì)等)。主要涉及軀干和四肢的本體感覺傳導(dǎo)通路(屬于頂葉功能)

 

原文鏈接:https://medium.com/teague-labs/seamful-gestures-a-body-interface-for-mixed-reality-638c8a6968a8

本文由 @百度UXC 翻譯發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉(zhuǎn)載。

更多精彩內(nèi)容,請關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號或下載App
評論
評論請登錄
  1. 這不是leap motion么??

    來自四川 回復(fù)