前言:尋找寫作靈感?中文期刊網用心挑選的三維虛擬視覺的室內設計平臺建構,希望能為您的閱讀和創作帶來靈感,歡迎大家閱讀并分享。
摘要:傳統的室內設計系統無法解決復雜場景的三維構建和可視化問題,更無法滿足用戶沉浸感和動態交互的需求。因此,在現有研究基礎上,以自然直觀的人機交互和逼真的虛擬環境體驗為目標,設計基于三維虛擬視覺及手勢交互設計的室內設計平臺。根據實際的功能需求分析,完成了平臺功能并給出基于雙目視覺技術進行人機交互的總體結構。利用攝像機設計交互功能中的虛擬手形識別算法,降低了應用成本,提高了識別的效率。室內設計環境的仿真測試結果表明,提出的室內設計平臺能夠有效進行直觀的室內三維場景可視化,且具有較好的準確性和交互性。
關鍵詞:3D虛擬視覺;人機交互;攝像機模型;雙目視覺技術;室內場景;三維環境
0引言
隨著計算機技術和網絡技術的高速發展,人們逐步體驗到了高性能計算機和高速帶寬帶來的全新體驗。在線購物、網絡社交、虛擬旅游和大型3D游戲已經被現代社會所接受。室內環境作為人們最熟悉的生活和工作場所,其傳統的二維界面管理或者設計系統已經無法滿足人們逼真沉浸感的需求[1]。現代人需要的是更加形象、更加真實、更加便于交互的三維虛擬仿真環境[2]。因此,如何利用虛擬現實技術來實現沉浸式虛擬環境的搭建和交互,成為當前虛擬仿真技術研究的熱點[3]。文獻[4]提出了一種基于三維視覺的室內設計虛擬現實方法,通過三維場景點云數據集和高斯混合模型擬合,達到了較好的三維場景重構效率和精度。文獻[5]提出了一種基于三維平臺的虛擬圖書館室內設計與構建方法,實現了便于在線工作的三維虛擬設計與展示系統。但是,現有提出的三維虛擬室內設計平臺存在交互體驗差(人機交互準確率低)或者成本高昂的問題。因此,為了提高人機交互的準確性、降低實現成本,本文設計了基于三維虛擬視覺及手勢交互的室內設計平臺,從而為用戶提供全新的逼真虛擬場景體驗。
1室內三維虛擬交互的功能需求分析
傳統的室內設計系統無法解決復雜場景的三維構建和可視化問題,此外,更無法滿足用戶沉浸感和動態交互的需求。而虛擬仿真的出現,可以有效解決上述問題,能夠帶給用戶豐富而全方位的體驗[3,5]。本文以室內環境為主要研究對象,構建具有良好人機交互功能體驗的虛擬設計平臺,其功能需求主要包括:1)室內三維實體組件模塊的管理,包括室內物品、材料的導入和展示等。2)室內場景下的交互操作功能,包括視角切換、場景漫游、輸入響應等人機交互的各種操作。3)數據庫管理和顯示功能,包括自定義顯示信息、屬性定義等。4)人員管理常用功能,包括地圖導航、查詢位置定位等。
2基于三維虛擬視覺及交互設計的室內設計平臺建構
2.1平臺功能設計
通過上述室內三維虛擬交互的功能需求分析,對平臺所需的功能進行設計。
2.2總體結構設計
現有的三維虛擬室內設計平臺采用的交互功能存在諸多問題,主要原因是其虛擬顯示交互系統采用的輸入設備[6⁃8]:1)對于輸入設備是三維鼠標和三維游戲桿的系統來說,其存在工作效率不高、用戶的人機交互體驗較差的問題;2)而對于輸入設備為頭部跟蹤設備和手勢跟蹤設備的系統來說,用戶可以得到更加自然、逼真的沉浸感。輸出設備均為VR眼睛。其中,利用數據手套作為輸入設備進行人機交互,會導致系統的成本大幅提高,影響了系統的普及和推廣應用。由于使用數據手套實現現實中的人手與計算機交互,可以大大提高虛擬現實系統的可操作性。但是它價格昂貴、需要校準,導致實現成本高昂、使用不方便。而采用攝像機拍攝的方法來獲取手的運動,無需數據手套就能夠捕捉和識別手勢的動作,因此,本文采用基于計算機視覺的虛擬手交互來完成三維虛擬交互室內設計平臺的交互模塊功能,其總體結構示意圖如圖2所示。室內虛擬環境的搭建和生成采用Unity3D引擎渲染,技術已經較為成熟,因此不做過多介紹和分析,接下來將對平臺的重點——交互設計進行重點分析。
3基于虛擬手形識別算法的人機交互設計
3.1攝像機模型
三維虛擬環境下的手勢識別必須采用立體視覺系統,而雙目視覺應該是常見的立體視覺系統。需要對兩臺攝像機在工作區中的位置和朝向進行分析。
3.2基于雙目視覺技術的手勢識別
本文實驗將采集到的RGB值轉化成HSV值。本文采用基于運動學反解的仿真算法[11]實現手形繪制,并默認滿足手的運動約束關系。
4實驗結果與分析
4.1實驗硬件和軟件環境
為了驗證提出的三維虛擬交互室內設計平臺的性能,本文以家居室內應用為例進行了開發和實例驗證。使用雙目立體視覺和Kinect深度攝像機進行室內場景三維重建。借助虛擬建模軟件3dsMax搭建室內實體及其三維場景,并結合Unity3D引擎作為虛擬驅動平臺重構。操縱系統為Windows7。實驗的硬件設置和配置情況見表1。從表1可以看出,該平臺無需數字手套輸入設備,因此成本較低。
4.2效果分析
在切換到室內場景設計的界面時,室內三維虛擬交互的效果如圖4所示,用戶自由交互式漫游效果良好,通過雙目立體視覺和Kinect攝像機實時檢測用戶手形和輪廓,從而實現人機交互輸入,得到了自然直觀的用戶體驗效果。
4.3實時性和準確性分析
表2為基于雙目視覺技術的手勢識別的檢測率結果,可以看出,實際發生的幀數和檢測出的發生幀數之間差距較小,也就是說,能夠在相當短的時間內檢測到手勢的變化,實現了快速的輸入響應。
5結語
本文設計了一種基于三維虛擬視覺及手勢交互的室內設計平臺,提高了人機交互的準確性、降低實現成本,并為用戶提供了全新的逼真虛擬場景體驗。實際室內應用的實例運行結果驗證了提出平臺設計的可行性和實時性。此外,相比基于OpenCV、單目視覺的手勢識別方法,本文提出的雙目視覺技術手勢識別表現出更高的準確性。但是,對于復雜的手勢運動,平臺交互識別效果不夠穩定,魯棒性不高,且受到光線強度的影響較大,后續將對此開展進一步研究。
作者:蔣夢菲 原麗花 單位:四川旅游學院 西南科技大學