2023年3月29日,我院青年教師趙景博博士在國(guó)際虛擬現(xiàn)實(shí)領(lǐng)域頂級(jí)會(huì)議2023 IEEE Conference on Virtual Reality and 3D User Interfaces (VR),進(jìn)行了題為《Real-Time Recognition of In-Place Body Actions and Head Gestures using Only a Head-Mounted Display》的學(xué)術(shù)論文報(bào)告。
該論文首次提出了一種僅利用頭戴顯示器的跟蹤數(shù)據(jù)實(shí)時(shí)識(shí)別VR用戶(hù)的原地身體動(dòng)作(In-Place Body Actions)和頭部動(dòng)作(Head Gestures)的方法。解決了針對(duì)普通VR用戶(hù)僅擁有一臺(tái)頭戴顯示器,在不使用外部跟蹤設(shè)備和其他硬件設(shè)備的情況下,進(jìn)行動(dòng)作識(shí)別的問(wèn)題。該方法可作為一種高保真(High-Fidelity)的交互界面,使VR用戶(hù)能夠在虛擬現(xiàn)實(shí)環(huán)境中利用身體動(dòng)作實(shí)現(xiàn)行走交互。該論文的作者為:趙景博、2021級(jí)研究生邵明軍、王耀君副教授和2018級(jí)學(xué)生許若琳(目前在杜克大學(xué)攻讀碩士)。
僅使用頭戴顯示器跟蹤數(shù)據(jù)的統(tǒng)一(Unified)雙流1D-CNN結(jié)構(gòu)的頭部動(dòng)作和身體動(dòng)作識(shí)別方法結(jié)構(gòu)圖
該網(wǎng)絡(luò)結(jié)構(gòu)通過(guò)對(duì)頭戴顯示器輸出的線(xiàn)速度提取平移特征,對(duì)頭戴顯示器輸出的角速度、角加速度提取旋轉(zhuǎn)特征,并對(duì)提取特征進(jìn)行進(jìn)一步分類(lèi),實(shí)現(xiàn)身體動(dòng)作和頭部動(dòng)作的識(shí)別。
交互場(chǎng)景示意圖
用戶(hù)僅佩戴一臺(tái)頭戴顯示器,通過(guò)原地踏步、原地慢跑、下蹲和跳躍等動(dòng)作實(shí)現(xiàn)在虛擬現(xiàn)實(shí)場(chǎng)景中帶有第三人稱(chēng)化身的行走漫游。
宣講現(xiàn)場(chǎng)
IEEE Conference on Virtual Reality and 3D User Interfaces (VR) 是虛擬現(xiàn)實(shí)領(lǐng)域的國(guó)際頂級(jí)會(huì)議,也是中國(guó)計(jì)算機(jī)學(xué)會(huì)推薦的CCF-A類(lèi)國(guó)際學(xué)術(shù)會(huì)議。該會(huì)議創(chuàng)辦于1993年。恰逢30周年,本次會(huì)議首次在中國(guó)舉辦。來(lái)自世界各地的學(xué)術(shù)界和工業(yè)界的頂尖專(zhuān)家學(xué)者通過(guò)線(xiàn)上和線(xiàn)下方式參與了本次會(huì)議。
預(yù)印版論文鏈接:https://arxiv.org/abs/2302.13096
電話(huà):010-62736746
郵箱:eic@cau.edu.cn
地址:北京市海淀區(qū)清華東路17號(hào)
郵編:100083
微信關(guān)注
?2017 信息與電氣工程學(xué)院 校備案號(hào):308_19034