0
接上一篇，雷鋒網(wǎng)介紹了用多點觸控做大屏交互的X-Board智能茶幾，并盤點了當下在大屏幕上的各種交互方式。繼多點觸控之后，基于視覺的手勢和姿態(tài)識別也是這兩年大屏幕交互的熱點。最早普及的如Kinect，2013年最火的硬件當屬于Leap Motion，而上個月微軟發(fā)布的HoloLens則被好多業(yè)內(nèi)人士仰慕，號稱“有神一般的視覺識別技術(shù)”。而這次，雷鋒網(wǎng)采訪了uSens的費越博士，他們團隊恰好在做與HoloLens中的視覺識別非常相似的產(chǎn)品。
費越是一位研究人機交互12年的專家，前后在諾基亞、摩托、松下和亞馬遜的研究院工作，參與過很多神奇項目的項目的研發(fā)。這些神奇的項目包括一套Windows XP/2000時代便上線的3D桌面，能用空鼠操控的3D電視UI，能夠凌空互動的廣告機，視覺識別跟大屏幕互動的方式非常之多。有意思的是，我們發(fā)現(xiàn)當下并沒有普遍在大屏幕應用的這類方式，而費博士團隊現(xiàn)在主攻的方向是將視覺識別用在虛擬現(xiàn)實。
uSens（凌感科技）成立于2013年，費越是創(chuàng)始人之一，在uSens成立之前，費越以及他的團隊就致力于進行人機交互方式的研究：
2002-2004年，費越就利用業(yè)余時間開發(fā)了一套Win XP時代便上線的3D桌面；
2008年-2009年，在松下工作期間，費越和他的團隊又開發(fā)了一款觸摸式遙控器， 中間是一個常規(guī)的按鈕，兩側(cè)為觸控面板，搭配3D電視UI，實現(xiàn)智能化的人機交互；
2010年，費越又進一步研究出了集成了觸摸和空中手勢動作的三維遙控器，并制作了相結(jié)合的三維電視界面。這個系統(tǒng)提供了酷炫的體驗。 并在2012年變成產(chǎn)品開始和電視一起銷售；
2011年，費越和團隊研發(fā)出了3D虛擬現(xiàn)實墻，用戶通過體感設(shè)備，在一面100英寸的液晶屏前，通過走動、手部動作、語音可以產(chǎn)生一種沉浸式的體驗；
2012年，他們又研發(fā)了虛擬現(xiàn)實體桌面，通過頭部跟蹤實現(xiàn)了具有全息視覺效果的虛擬現(xiàn)實顯示，通過手勢識別，可以讓人直接和虛擬物體交互 （類似阿凡達里的三維地圖/沙盤）；
2013年，費和他的團隊成立了uSens，他們是在美國留學及工作多年的中國高科技工作者，有多年在硅谷世界著名大公司從事人機交互，電子產(chǎn)品設(shè)計，軟硬件設(shè)計的經(jīng)驗，uSens的核心技術(shù)是以三維手勢識別、頭部跟蹤為主的三維輸入技術(shù)和虛擬現(xiàn)實的三維輸出技術(shù)。
目前，能從uSens官網(wǎng)了解到的具體產(chǎn)品是指感一體機（FVT Fingo virtual touch ）和凌指（Fingo），F(xiàn)VT是一臺能夠"凌空互動"的廣告機；而Fingo是一個由一個小型傳感設(shè)備和一套軟件系統(tǒng)組成的體感設(shè)備。硬件主要是傳感設(shè)備，可以捕捉手指的各種形態(tài)及活動。軟件分為4個主要部分：底層的算法，用于處理手的圖像；手勢識別庫，儲存了一些人類最常用的手勢；可以給第三方二次開發(fā)使用的SDK及可編程接口；第三方可以用該接口來開發(fā)一些手勢識別的應用程序。
Fingo作為一種近距離、高精度的手勢識別設(shè)備，適用于大屏、小屏和‘無屏’；通過藍牙/Wifi方式與智能電視、手機或者平板電腦相連；提供手寫輸入，三維交互功能，Android應用可以不加改動就可以在電視上使用。
uSens的CEO何安莉告訴雷鋒網(wǎng)，目前他們正在做一款設(shè)備，并計劃將把它放到Kickstarter上進行眾籌。
Windows 和鼠標帶來個人電腦的普及，觸摸屏和 iOS/Android 帶來移動設(shè)備的全面推廣，但對于大屏幕而言，觸摸類的應用并不適合大屏幕，大屏幕的應用場景與手機、Pad等中小屏幕也不盡相同，那末，體感技術(shù)在大屏幕上能做些什么呢？
1、體驗休閑娛樂類的游戲，進行輕量運動。例如Kniect就涵蓋競速、舞蹈、格斗、冒險等眾多運動類型;
2、代替遙控器完成瀏覽、換臺、點播等功能，當你坐在沙發(fā)上看電視，可以輕輕揮手，在不同的界面之間自由操作，聽音樂、換頻道、瀏覽頁面，一應俱全。當然，語音技術(shù)也是實現(xiàn)這一操作不錯的選擇，但二者也并不矛盾；
3、玩高精度、重型游戲。輕量級的游戲可能無法滿足發(fā)燒友們的需求，隨著體感技術(shù)的發(fā)展，大屏能提供的體感游戲也會更加精彩。
費越告訴我們，體感技術(shù)在大屏幕上應用，可以通過兩種方式來實現(xiàn)，一是直接生產(chǎn)如凌指這樣的智能硬件，然后把它與電視或盒子無線連接；另一種就是與終端廠商合作，把技術(shù)集成在智能電視或者盒子中。
在費越看來，在大屏幕上進行休閑游戲以及輕度運動等，Kinect目前可以滿足使用，
Kinect這類技術(shù)分為兩部分: 1代能夠采集深度圖(depth map)的硬件，2代根據(jù)深度圖計算出人體形態(tài)動作的算法。
Kinect 1代的硬件是基于結(jié)構(gòu)光方法，由以色列的PrimeSense公司開發(fā)。這類技術(shù)現(xiàn)在已經(jīng)不少公司都可以做到。但2代計算人體動作的算法技術(shù)要求很高，目前只有微軟掌握成熟的算法。
此類設(shè)備不需要任何計算機視覺方面的計算，但硬件成本高，目前的市場看，還遠不到爆發(fā)的程度，芯片設(shè)計，攝像頭的成本都比較高。而且主要的交互還是停留在大肢體動作，使得用戶體驗上不是很好，勉強應付舞蹈，運動這類應用。這個低精度嚴重限制了應用范圍，都是小眾市場。
另一類產(chǎn)品便是基于多角成像這一技術(shù)的生產(chǎn)的Leap Motion和uSens公司的Fingo。這種技術(shù)的基本原理是使用兩個或者兩個以上的攝像頭同時攝取圖像，就好像是人類用雙眼、昆蟲用多目復眼來觀察世界，通過比對這些不同攝像頭在同一時刻獲得的圖像的差別，使用算法來計算深度信息，從而多角三維成像。
費越還告訴我們，多角成像是三維手勢識別技術(shù)中硬件要求最低，但同時最難實現(xiàn)的，技術(shù)要求較高，多角成像不需要任何額外的特殊設(shè)備，完全依賴于計算機視覺算法來匹配目標，相較于結(jié)構(gòu)光或者光飛時間這兩種技術(shù)成本高、功耗大的特點，多角成像能提供“價廉物美”的三維識別效果。
談到第二類實現(xiàn)方法，費越告訴雷鋒網(wǎng)，uSens更偏向于做整套系統(tǒng)，其核心商業(yè)模式是賣整機，以及授權(quán)技術(shù)。而在中國進行授權(quán)合作，卻并不容易。
以智能電視為例，已有國內(nèi)的電視制造廠商與uSens進行合作洽談，將uSens的體感技術(shù)集成在電視中，這樣既可以獲得現(xiàn)金收益，也有益于將uSens的技術(shù)向市場轉(zhuǎn)化。但鑒于廣電總局的規(guī)定，usens無法自行開發(fā)UI，只能在電視機原有的操作系統(tǒng)上進行適配，而且電視中的OS往往并不是電視硬件制造商開發(fā)，而是第三方比如阿里云OS開發(fā)。所以和智能電視的適配和整合不是一朝一夕可以完成的。因此，在授權(quán)技術(shù)方面，uSens遇到了阻力，想必這也是電視生產(chǎn)廠商遇到的阻力。
費博士告訴雷鋒網(wǎng)，體感技術(shù)不僅可以通過大屏展現(xiàn)，還可以和虛擬現(xiàn)實相結(jié)合，具體的發(fā)展方向包括：
1、休閑類的游戲，輕量級游戲，將體感技術(shù)與虛擬現(xiàn)實想結(jié)合，不一定要借助大屏才能玩游戲，可能帶上一個眼部設(shè)備，你就會有身臨其境的滲透感；
2、軍事、醫(yī)療的模擬教學，比如可以根據(jù)已有資料建模，進行模擬手術(shù)，That’s cool !
3、虛擬現(xiàn)實的界面交互，未來的UI，會從二維變?yōu)槿S，你將不僅僅在一個平面的環(huán)境里進行辦公、購物、娛樂，你去到一家餐廳，菜單是三維立體的；你在淘寶上購物，你瀏覽的每一件衣服都可以在身上試穿，等等。
系列回顧：
1、創(chuàng)新大屏交互之——你所不知道的多點觸控技術(shù)
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
