來(lái)源：映維網(wǎng) 作者 廣州客

隨著虛擬現(xiàn)實(shí)和增強(qiáng)現(xiàn)實(shí)技術(shù)在視覺保真度和頭顯舒適度方面的穩(wěn)步提升，研究人員正繼續(xù)研究比握持式控制器更為自然的輸入解決方案。

今天，康奈爾大學(xué)的一組研究人員介紹了一種基于腕帶的解決方案FingerTrak。所述設(shè)備使用熱攝像頭來(lái)追蹤手部的三維運(yùn)動(dòng)，并從用戶手腕輪廓提取出20個(gè)手指關(guān)節(jié)的位置。

FingerTrak由康奈爾大學(xué)SciFi Lab和威斯康星大學(xué)麥迪遜分校的研究人員研發(fā)，其利用一個(gè)深層神經(jīng)網(wǎng)絡(luò)將三到四個(gè)微型熱攝像頭的輸入拼接在一起，從而共同捕捉整個(gè)手部的姿態(tài)。利用攝像頭生成的輪廓，主干網(wǎng)絡(luò)和回歸網(wǎng)絡(luò)估計(jì)指尖和關(guān)節(jié)的位置。

盡管結(jié)果并不完美，但它們可以用于某些形式的VR和AR輸入。FingerTrak的其他潛在應(yīng)用包括人機(jī)交互與控制、手語(yǔ)翻譯和健康監(jiān)控，包括發(fā)現(xiàn)早期的帕金森氏癥和阿爾茨海默氏癥等退化性疾病。

有趣的是，研究人員表示僅靠手腕輪廓就“足以準(zhǔn)確預(yù)測(cè)整個(gè)手部姿態(tài)”。所以，團(tuán)隊(duì)能夠?qū)⒄麄€(gè)傳感系統(tǒng)放置到手腕，不需要手套、戒指或其他此前介紹的任何技術(shù)。下面這個(gè)視頻演示了FingerTrak將手部運(yùn)動(dòng)追蹤轉(zhuǎn)化為一只仿生手的運(yùn)動(dòng)，并允許計(jì)算機(jī)確定用戶何時(shí)在寫字，喝咖啡，以及與智能手機(jī)交互。

目前尚不清楚系統(tǒng)是否能夠快速追蹤特定的手勢(shì)，比如一個(gè)人正在寫什么。研究人員指出，取決于測(cè)試背景，F(xiàn)ingerTrak在測(cè)試期間的平均角度誤差率在6.46到8.06度之間。換句話說，它可能是最好的補(bǔ)充性技術(shù)，而不是完全取代更高精度的手指追蹤解決方案，至少對(duì)某些應(yīng)用而言是這樣。

相關(guān)論文：FingerTrak: Continuous 3D Hand Pose Tracking by Deep Learning Hand Silhouettes Captured by Miniature Thermal Cameras on Wrist

手腕型攝像頭可以增強(qiáng)VR頭顯的由內(nèi)向外追蹤攝像頭。原型版本的FingerTrak已經(jīng)非常小，而隨著進(jìn)一步的工程設(shè)計(jì)，它可以進(jìn)一步縮小。它主要依靠非常低分辨率（32×24像素）的熱敏攝像頭，而這種攝像頭的尺寸和厚度都比最薄的蘋果手表還要薄。

原文鏈接：https://yivian.com/news/76466.html