丁香五月天婷婷久久婷婷色综合91|国产传媒自偷自拍|久久影院亚洲精品|国产欧美VA天堂国产美女自慰视屏|免费黄色av网站|婷婷丁香五月激情四射|日韩AV一区二区中文字幕在线观看|亚洲欧美日本性爱|日日噜噜噜夜夜噜噜噜|中文Av日韩一区二区

您正在使用IE低版瀏覽器,為了您的雷峰網(wǎng)賬號安全和更好的產(chǎn)品體驗(yàn),強(qiáng)烈建議使用更快更安全的瀏覽器
此為臨時(shí)鏈接,僅用于文章預(yù)覽,將在時(shí)失效
AR/VR 正文
發(fā)私信給劉芳平
發(fā)送

0

移動VR輕交互:這家公司用手機(jī)攝像頭做手勢識別

本文作者: 劉芳平 2016-08-26 11:15
導(dǎo)語:Hand CV最大的特點(diǎn)是輕,不需要額外的硬件設(shè)備,僅通過手機(jī)的攝像頭和軟件來實(shí)現(xiàn),而且還是免費(fèi)授權(quán)的。

移動VR輕交互:這家公司用手機(jī)攝像頭做手勢識別

大概是眾多的公司都意識到了移動VR缺少交互的問題,各種各樣的交互方案在今年層出不窮。有直接將 Outside in空間定位做到一體機(jī)上的;有Leap Motion、uSens、微動等做雙目攝像頭手勢追蹤的;還有用英特爾用RealSense做的Inside out空間定位,Google Daydream用的3自由度手柄等等。

現(xiàn)在又有一家國內(nèi)創(chuàng)業(yè)公司進(jìn)入了這個(gè)領(lǐng)域,做了一套基于手機(jī)攝像頭的移動VR交互方案。這家北京的創(chuàng)業(yè)公司名叫英梅吉,其做的產(chǎn)品叫Hand CV。與前述各種交互方案相比,Hand CV最大的特點(diǎn)是輕,不需要額外的硬件設(shè)備,僅通過手機(jī)的攝像頭和軟件來實(shí)現(xiàn),而且還是免費(fèi)授權(quán)的。

輕手勢交互

所謂的輕手勢交互自然是相對于重手勢交互而言的,在英梅吉的CEO朱郁叢看來,Leap Motion、uSens這類就屬于重手勢交互,它們不僅需要額外的硬件輔助,而且功耗和性能需求都要更大。

移動VR輕交互:這家公司用手機(jī)攝像頭做手勢識別

具體到實(shí)際功能上,重手勢交互追蹤雙手手指關(guān)節(jié)的運(yùn)動,希望在虛擬世界中重現(xiàn)你的雙手,就像上圖中 Leap Motion 的一個(gè)Demo演示的那樣。而Hand CV所做的輕手勢交互,是通過不同的手勢來實(shí)現(xiàn)選擇、點(diǎn)擊、拖拽等基本操作,正如下面這個(gè)視頻所演示的。

視頻:Hand CV單目手勢識別演示

舉個(gè)例子,通過 Leap Motion 你可以用手在虛擬世界里拿起一個(gè)物體并把它扔出去,但用Hand CV做不到這點(diǎn),因?yàn)閱文繑z像頭得不到精確的深度信息,雖然通過圖像識別算法也能計(jì)算出模糊的深度數(shù)據(jù)。

根據(jù)官方介紹,Hand CV所使用的技術(shù)是:

通過普通攝像頭采集畫面,逐幀進(jìn)行手掌檢測、分割。對分割出來的信息通過k-cos等聚類算法對目標(biāo)檢測物做特征提取,最后將提取的特征做為手勢識別的數(shù)據(jù)。手勢識別部分采用了隱馬爾可夫模型對大量識別樣本數(shù)據(jù)進(jìn)行反復(fù)訓(xùn)練。

Hand CV 2.0版本預(yù)計(jì)將支持的手勢類型下圖中所示的幾種(暫擬),而朱郁叢表示廠商可以根據(jù)自己的需求對手勢進(jìn)行定制。

移動VR輕交互:這家公司用手機(jī)攝像頭做手勢識別

這款產(chǎn)品會首先支持iOS設(shè)備,主要是因?yàn)樘O果的硬件比較單一穩(wěn)定。功耗上,對于使用A8處理器設(shè)備,它會消耗8%到10%的性能。為了降低功耗,它在“待機(jī)”狀態(tài)下每2到3秒抽取一幀攝像頭畫面,而使用時(shí)則是12幀每秒的頻率。

該公司計(jì)劃在9月份在App Store上線一個(gè)產(chǎn)品Demo,同時(shí)也會放SDK出來,正式版本預(yù)計(jì)將在今年年底到明年年初發(fā)布。

抓住了移動VR的痛點(diǎn)?

小編對Hand CV進(jìn)行體驗(yàn)后發(fā)現(xiàn),整體操作十分簡單,上手起來很快,只需要記住幾個(gè)手勢就行,而手勢識別的速度和精度都還不錯(cuò)。

在推廣這款產(chǎn)品上,英梅吉采用免費(fèi)授權(quán)的模式,正在合作的廠商包括優(yōu)酷、哈視奇等。內(nèi)容廠商只需將Hand CV置入到自家的App中,就能讓VR手機(jī)盒子用戶實(shí)現(xiàn)手勢操控。視頻方面是播放、暫停和拖動,而游戲針對的通常是一些輕交互的小游戲,例如卡牌。

不過,這項(xiàng)技術(shù)也會遇到所有計(jì)算機(jī)視覺(CV)技術(shù)會遇到的問題,不管是單目還是雙目攝像頭,在極暗光、強(qiáng)光以及嘈雜的環(huán)境中都可能會遇到識別不了的問題。對此,朱郁叢表示他們正在建立一個(gè)擁有10萬張的手勢模型的庫,希望通過深度學(xué)習(xí)提高技術(shù)的魯棒性。

移動VR輕交互:這家公司用手機(jī)攝像頭做手勢識別

朱郁叢表示英梅吉的目標(biāo)是成為ARVR基礎(chǔ)交互技術(shù)的供應(yīng)商,而且他認(rèn)為VR只是一塊,未來其技術(shù)在AR方面的價(jià)值會大得多。目前該公司已將技術(shù)授權(quán)給AR眼鏡廠商影創(chuàng)科技。

除了基礎(chǔ)交互,朱郁叢還透露,公司在與萬事達(dá)卡合作開發(fā)VR支付方面的產(chǎn)品,主要是手勢密碼。此外,該公司也希望將技術(shù)應(yīng)用到汽車、機(jī)器人等產(chǎn)品上面。

收入方面,英梅吉目前并不打算從ARVR內(nèi)容廠商那里賺到錢,而是希望在獲得足夠大的市場份額之后再來考慮盈利的事。與此同時(shí)該公司也在與知識產(chǎn)權(quán)代理公司合作,希望通過做一些技術(shù)授權(quán)來獲得收入,例如讓手機(jī)廠商在產(chǎn)品中置入自家的技術(shù)。

英梅吉2014年由CEO朱郁叢和CTO李小波聯(lián)合創(chuàng)立,一直從事計(jì)算機(jī)視覺方面的技術(shù)開發(fā),此前開發(fā)過AR購物方面的產(chǎn)品,但今年已經(jīng)將全部精力放在Hand CV這款產(chǎn)品上。

對于接下來的前進(jìn)方向,朱郁叢表示首先是把手勢識別做好,其它的計(jì)算機(jī)視覺技術(shù)也會去探索,但目前還沒有其它的產(chǎn)品方向。他表示做技術(shù)不是為了炫技,而是要有好的應(yīng)用場景。另外,他認(rèn)為Slam對創(chuàng)業(yè)公司的價(jià)值已經(jīng)結(jié)束,現(xiàn)在做太遲了。

之所以押注Hand CV,朱郁叢認(rèn)為是因?yàn)檫@款產(chǎn)品抓住了移動VR體驗(yàn)的用戶痛點(diǎn)。他認(rèn)為輕交互是單目的市場,重交互是手柄的市場,而基于深度攝像頭的手勢追蹤,其定位是錯(cuò)誤的,不會有足夠的市場。

在沉浸感看來,用手勢去代替目前手機(jī)盒子通過“轉(zhuǎn)頭+一個(gè)點(diǎn)擊按鍵”或是“轉(zhuǎn)頭+觸摸板”的交互設(shè)計(jì)看起來是個(gè)不錯(cuò)的方案,但是否能受到用戶的認(rèn)可,還需要產(chǎn)品推出后的進(jìn)一步觀察。

雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。

分享:
相關(guān)文章
當(dāng)月熱門文章
最新文章
請?zhí)顚懮暾埲速Y料
姓名
電話
郵箱
微信號
作品鏈接
個(gè)人簡介
為了您的賬戶安全,請驗(yàn)證郵箱
您的郵箱還未驗(yàn)證,完成可獲20積分喲!
請驗(yàn)證您的郵箱
立即驗(yàn)證
完善賬號信息
您的賬號已經(jīng)綁定,現(xiàn)在您可以設(shè)置密碼以方便用郵箱登錄
立即設(shè)置 以后再說