研究員探索通過腕帶設備進行全身姿態(tài)追蹤

　　未來的腕帶設備或許可以通過深度神經(jīng)網(wǎng)絡來實時追蹤用戶的全身姿態(tài)。日前，美國康奈爾大學和上海交通大學的研究人員開發(fā)了一款可以以3D方式追蹤全身姿態(tài)的但攝像頭腕帶設備BodyTrak。據(jù)介紹，這是第一款用單攝像頭追蹤全身姿態(tài)的可穿戴設備。

　　團隊認為，這種技術可以融入至現(xiàn)有的商業(yè)智能手表等腕帶設備。他們表示：“由于智能手表已經(jīng)搭載了攝像頭，而BodyTrak這樣的技術可以理解用戶的姿態(tài)并給出實時反饋。兩者的結合既方便又實惠，同時不會限制用戶的移動。”

　　如上圖所示，BodyTrak搭載了一個硬幣大小的攝像頭，而團隊專門定制了一個能夠精確填充攝像頭未捕獲身體部位圖像的深度神經(jīng)網(wǎng)絡。

　　具體來說，盡管攝像頭無法完整捕獲用戶的全身姿態(tài)，但定制的深度神經(jīng)網(wǎng)絡可以讀取攝像頭的基本圖像，亦即基本的身體輪廓，然后估計位于手臂、腿、軀干和頭部的14個關節(jié)的3D位置，并相應地進行填充補全，從而虛擬地實時重建身體姿態(tài)。

　　研究人員對9名被試進行了實驗。其中，每名被試在不同的場景中進行12項日�；顒樱�如走路、靜坐或鍛煉。結果表明，系統(tǒng)僅使用身體指向的一個微型RGB攝像頭(11.5mm x 9.5mm)就可以推斷出全身姿勢(14個關節(jié)的3D位置)，平均誤差為6.9 cm。

　　團隊指出，BodyTrak不需要身體框架完全至于攝像頭視場之內，只需捕獲一部分身體圖像，深度神經(jīng)網(wǎng)絡就可以推斷出大量信息并重建整個身體姿態(tài)。

　　另外，他們認為BodyTrak的設計能夠減輕旁觀者的隱私擔憂，因為攝像頭僅指向用戶身體，只采集用戶自己的身體圖像。

　　當然，目前設備的體積依然巨大，而且研究人員承認如今的智能手表尚無法支持足夠小或強大的攝像頭和足夠的續(xù)航來支持BodyTrak的全身追蹤。但是，隨著技術的不斷小型化和成本的降低，未來我們有望通過腕帶設備來實時追蹤用戶的全身姿態(tài)。