基于計算機 uSens推出手部骨骼追蹤AR SDK
去年這個時候,計算機視覺公司uSens推出了一款支持手部追蹤的立體攝像頭模型?,F(xiàn)在,uSens只需通過智能手機攝像頭即可實現(xiàn)相同的功能。在日前舉行的世界增強現(xiàn)實大會(AWE)中,uSens推出了uSensAR Hand Tracking SDK的beta版本。這一工具可以幫助開發(fā)者在iOS和安卓設(shè)備上為VR和AR移動應(yīng)用整合手部追蹤和3D動作識別。借助智能手機的RGB攝像頭,uSensAR Han
2018-06-02 08:50:17
來源:中國AR網(wǎng)??

去年這個時候,計算機視覺公司uSens推出了一款支持手部追蹤的立體攝像頭模型?,F(xiàn)在,uSens只需通過智能手機攝像頭即可實現(xiàn)相同的功能。

在日前舉行的世界增強現(xiàn)實大會(AWE)中,uSens推出了uSensAR Hand Tracking SDK的beta版本。這一工具可以幫助開發(fā)者在iOS和安卓設(shè)備上為VR和AR移動應(yīng)用整合手部追蹤和3D動作識別。借助智能手機的RGB攝像頭,uSensAR Hand Tracking可以通過計算機視覺和深度學(xué)習(xí)來追蹤整只手的骨骼動態(tài),不僅僅只是一只手的指尖。

到目前為止,增強現(xiàn)實的主流普及主要集中在智能手機方面。因此,智能手機AR的任何主要界面創(chuàng)新都是一個重大發(fā)展。盡管蘋果和谷歌已經(jīng)通過ARKit和ARCore為移動設(shè)備帶來了水平表面和垂直表面的無標識追蹤,圖像識別,甚至是多用戶體驗,但用戶與增強現(xiàn)實內(nèi)容的交互僅限于觸摸屏界面,不同于HoloLens和Meta 2。

uSens聯(lián)合創(chuàng)始人兼首席執(zhí)行官何安莉表示:“uSens很自豪能夠?qū)R推向下一個前沿,幫助開發(fā)者為智能手機用戶創(chuàng)建更加引人入勝和娛樂性更強的增強現(xiàn)實體驗,為他們帶來更加直觀的操作:只需用雙手和手指在空中滑動即可?!?/p>

何安莉還說道:“這為開發(fā)者帶來了全新的可能性,使得他們能夠為主流受眾創(chuàng)建真正獨一無二的體驗。就像是觸摸屏幫助市場擁抱了智能手機,為用戶提供一種簡單自然的方式來與AR/VR對象和環(huán)境進行交互,這將在促進消費者普及方面發(fā)揮重要作用。”

在短短一年時間里,uSens為什么可以在沒有外部硬件的情況下實現(xiàn)同樣的追蹤水平呢?關(guān)鍵是機器學(xué)習(xí)。

uSens產(chǎn)品與運營副總裁王亞明表示:“自從我們在去年年中開始直接面向手機市場以來,我們便一直致力于研發(fā)基于智能手機RGB攝像頭的手部追蹤。它與我們?yōu)榛谏疃葘W(xué)習(xí)的技術(shù)所研發(fā)的算法類似?,F(xiàn)在不同的是,我們訓(xùn)練算法來學(xué)習(xí)單個攝像頭輸入?!?/p>

“它可以根據(jù)我們的算法提供骨骼信息和關(guān)節(jié)信息,不過它的性能不如立體攝像頭或深度攝像頭,因為它的視場更小。但是,我們相信它為一系列的用例提供了足夠好的性能?!?/p>

王亞明表示,uSens已經(jīng)在與美圖進行合作,將這項技術(shù)集成至他們的AR攝像頭效果。另外,uSens同時在與一家未透露名字的游戲開發(fā)商合作,而王亞明暗示這家公司已經(jīng)在美國納斯達克上市,并且“在社交設(shè)定中發(fā)行了一款網(wǎng)絡(luò)游戲”。

盡管如此,雖然移動AR已經(jīng)加速了消費者對AR的采用,但觸摸屏仍然是用戶和內(nèi)容之間的障礙。在回顧當前市場上最佳的移動AR應(yīng)用程序時,我們可以馬上想象手部追蹤將能如何改善已有的優(yōu)秀體驗。

當然對于智能手機用力而言,用戶的一只手已經(jīng)要用來握持設(shè)備。不過,uSens技術(shù)同樣可以促進智能眼鏡的更快速創(chuàng)新,特別是基于安卓的可穿戴設(shè)備。隨著精度和覆蓋范圍的提升,基于攝像頭的追蹤解決方案可以支持硬件廠商減掉專用深度傳感器的需要。

希望AR硬件行業(yè)能夠按照相關(guān)的思路進行摸索,而這可能意味著廠商將能比想象中更快地為我們帶來優(yōu)秀的AR體驗。

最新文章
1
華為首款鴻蒙AI手表正式官宣!華為WATCH 5將帶來AI智慧新體驗
2
Mini LED成行業(yè)“風(fēng)向標”,預(yù)計2025年中國市場或?qū)⑦_923萬臺
3
三星Galaxy Fold7 Ultra 將于近期發(fā)布
4
內(nèi)外銷格局出現(xiàn)扭轉(zhuǎn) 出口市場步入同比下滑通道
5
難怪iPhone 16e銷量不及iPhone SE:背后原因揭開
6
華為Mate X5翻新機來了 13999元降至8799元買嗎
7
開源66項“三筒”核心專利,海信洗衣機的“陽謀”打懵對手
8
索尼榮登2025《財富》中國ESG影響力榜 ——用科技與創(chuàng)意共筑可持續(xù)的未來
9
新玩家難越家電紅海?方洪波斷言“戰(zhàn)略已輸”背后的產(chǎn)業(yè)真相
10
從價格戰(zhàn)到“體驗戰(zhàn)”,家電渠道的求索之路
11
智算賽道“卷王”現(xiàn)身!騰訊云憑啥拿下90%大模型廠商?
12
工業(yè)大模型的這三點變化,正悄然改變制造業(yè)
13
年輕用戶回歸智能電視終端,智能電視行業(yè)迎“新增量、新機遇”
14
20%增長背后,智能門鎖正上演“高端大戰(zhàn)”與“質(zhì)量暗戰(zhàn)”
15
iPhone 17系列屏幕規(guī)格曝光:標準版升級至6.27英寸,全系支持高刷
16
最強鴻蒙旗艦!華為Pura 80系列來了:本月見
17
蘋果中國開賣翻新版M2 iPad Air:3699元起 立省1100元
18
中國智能門鎖2024全渠道銷量1747萬套 農(nóng)村普及率僅5.87%
19
“國寶國貨國補”加持,四川長虹618演繹“科技+文化”敘事新邏輯
20
《2025快手未成年人保護報告》發(fā)布:未成年人模式終端一鍵啟動
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512