103 / 2022-10-05 16:20:51

灵境漫游：基于单目的实时手势交互虚拟漫游软件

手势交互,虚拟漫游

A. 普通高校组-应用类 > A3组：智能互动（VR+头盔设备、VR+生活娱乐、VR+游戏、VR+AI等）

灵境漫游：基于单目的实时手势交互虚拟漫游软件，我们所开发的软件主要包含三大技术，分别是基于单目摄像机的实时手部捕捉算法，实时手部重建和空间交互。其中实时手部捕捉算法仅在单目摄像机下捕捉手部信息，并连接到unity中。通过HTC VIVE的摄像头捕捉到手部的关节点信息，并对手部进行建模，生成手部模型，左手的手部模型右侧有一个控制面板，按动最下面的按钮可以实现在虚拟场景中漫游，通过移动头部设备转变前进的方向。在虚拟湿地场景中设计了多个植物园区，园区门口有指示牌，用户可以观览园区，也可以与园区内的展示牌进行交互，可以对其进行抓取并移动其位置，点击指示牌上第一个按钮可以观看园区内植物的详细介绍，再次点击可以收回面板，点击第二个按钮可以看到植物的小型模型，通过旋转、放缩可以看到植物的一些细节。整个虚拟世界中目前有四个植物园区，鹅掌楸园、月季园、紫薇园和垂柳园，不仅能够细致观赏园区内的植物，还可以纵览园区内的四季变换。我们开发的软件有三大优势，对真实的树木进行虚拟仿真，实现实时渲染并可以在虚拟空间中实现交互。可以应用在VR体验馆的项目中，并具有三大优势，对真实的树木进行虚拟仿真，实现实时渲染和沉浸式交互体验。在未来的发展中，我们希望可以进一步提升手部建模的效率和精准度，开发更多的园区场景，给予用户更好地体验。