通用设计:VR虚拟培训系统设计vr人机交互算法

本文侧重于一种通用性方法,更深入的分析需结合具体的场景,请谅解。

VR是VirtualReality的缩写,中文的意思就是虚拟现实(真实幻觉、灵境、幻真),也称灵境技术或人工环境。概念是在20世纪80年代初提出来的,其具体是指借助计算机及最新传感器技术创造的一种崭新的人机交互手段。虚拟现实是利用电脑模拟产生一个三维空间的虚拟世界,提供使用者关于视觉、听觉、触觉等感官的模拟,让使用者如同身临其境一般,可以及时、没有限制地观察三度空间内的事物。——百度百科

随着VR设备的成熟,越来越对B端用户选择利用VR实现一套可复用的培训、训练系统。VR中的场景不仅可以实现在现实生活中难以模拟的场景,还可以大幅节约培训场地费用。VR与培训结合被称为虚拟培训。

本文提供了一种设计思路可用于各类工厂,企业的虚拟培训,如流程培训,装备培训,消防培训,应急培训等。

VR虚拟培训的优势:

一、设计说明

针对某场景的虚拟培训系统

1.设计方案简介

虚拟培训系统解决方案,是基于国际先进3D开发引擎,借鉴三维领域先进的虚拟互动框架,并吸收虚拟现实头显技术,打造的具有沉浸式体验的虚拟现实解决方案。

该方案可实现可以导入各类三维设计软件模型制作的模型,并通过先进的模型精简算法将这些模型进行精简压缩,在训练系统中可以直接显示、使用这些模型,并能对这些模型进行位置、旋转、颜色等各种参数的设置,使用者可以基于这些模型自定义的编辑各种流程模拟事件,实现多人参与的模拟训练。

该方案具备将制作成品导出成不限于Windows系统的各种平台的能力,并通过VR头盔、手柄等体感装置实现沉浸式体验。

2.系统流程图

二、功能说明

虚拟培训系统应具备情景设置、模拟、对各种事故场景提供预案、可重复性的培训演练等功能,提供培训支持。

系统的主要功能包括模型轻量化功能、资源的导入功能、互动案例的编辑功能、资料库、功能库、系统定制等方面,系统环境如下:

1.模型处理

(1)模型导入

虚拟训练系统可以导入不同类型\等级的场景,以及目标内部及外部设备、建筑和结构等各种不同三维类软件(如工厂三维建模设计软件、Smartplant3D、PDS、UG等)产生的三维数字模型,包括但不限于FBX、IGS、3DS、STEP等格式,基本能够支持市面上绝大多数主流的三维模型制作软件。

(2)模型轻量化

由于多数三维模型顶点多、面数大,不适合直接放到主流的3D引擎中使用。本系统所采用模型轻量化技术可以实现快速、智能化、批量化的精简模型,能高效的减少原始模型的体积和几何面数,模型精简的批量化率能够达到80%及以上。

该技术拥有强大而高效的减面算法,能够解析设备类、管道类、建筑类、结构类等各种模型并进行简化。

模型精简后可以导出成常见的三维模型中间格式文件,包括但不限于FBX、IGS、3DS、STEP、OBJ等。

精简后的模型具有优质的质量,可以导入Maya、3Dmax等三维软件,能够转换成其它任意格式,满足各种系统的模型利用需求。

2.虚拟操作平台

系统是一个可视化的开发和操作平台,可以实现在场景中任意的移动模型的三维坐标、调整旋转角度、查看模型参数,并能够自定义的创建和编辑各种流程模拟事件,实现多人参与的人员培训功能,同时还具备空间测量、设备标注、自由漫游、物理干涉、路线规划等一系列功能。

(1)统一的虚拟仿真软件平台

本系统中的可视化开发平台是一个统一的虚拟仿真软件平台,所有专业所使用的各种设备、建筑和结构等三维类软件所设计出的三维模型最终均在此平台中统一体现,全部成为场景中可视、可操作、可编辑的一部分,且在平台中各模型均保存有设计中的真实数据,如尺寸、位置、物理参数、化学参数等,这些数据均可在平台中查看或使用。

平台具备功能如下:

(2)仿真模块

预置场景作为训练系统基础模拟场景。系统具备扩展场景和课件的能力,可以根据需要增减培训项目并设置相应的模拟场景和教学、考核课件。

本平台可以实现非标设备的外部导入,在本平台已投入使用后,三维模型设计人员用各种设计工具制作的原本不在本平台中的设备等模型,可以通过本平台资料库的功能,实时的导入进平台,实现平台中模型的动态扩充,并能够与平台中原有模式一样被操作使用。

除设备库外,本平台资料库的功能还包括音频库、视频库、人物动作库、地形库、材质库等各种场景中可用的资料库,这些均可从外部实时导入进平台中,以实现平台的热更新。

(3)可视化演示模拟系统

本平台中所有的模型均导入自设计阶段各专业各种三维设计软件制作的模型,是设计模型和数据的真实体现,各模型中的设计数据均能在平台中被调取,并以报表、标签、提示等各种方式进行可视化展示,并可以根据需要导入成excel等多种格式。

平台还具备实时获取所对应的真实设备的当前运行状态等运营数据的扩展能力,可动态显示重要设备设施的参数变化、重要设备实时工作状态。

(4)小型化同步可视化系统

本平台采用国际上成熟的技术框架,可方便的将场景发布到各种平台,如PC机、平板电脑、手机等移动设备,可运行在windows、安卓、苹果等各系统上,可以使用便携式设备作为载体用于在事故现场指挥。

(5)流程模拟系统

(6)虚拟协调训练系统

在一个流程模拟中,需要不同类别、不同权限的人员参与,协同工作以完成一项事情,本平台的多人在线系统功能以类似网络游戏的形式,支持多人同时参与,在虚拟流程中,不同人员分属于不同工种,拥有对设备操作的不同权限,按照管理员规定的操作规则,个人各司其职,协同完成一个流程模拟,达到虚拟协调训练的目的。

(7)物理干涉与人机功效分析

本平台的物理干涉功能可以实现用户自行设定平台内任意设备为运动体,同时自定义参与物理碰撞的区域,并自定义运动体的运行路线,以检测运动体按既定路线运动时是否会与周围设备或场景发生物理碰撞,能够生成碰撞报表,以验证该设备的设计方式或场景内设施安置的合理性。

本平台可以采用VR头盔、手柄、动作捕捉装置、力反馈设备等虚拟现实设备来实现沉浸式虚拟体验,用户可以身临其境的在场景中移动、用手指抓取、触碰、操作场景中的设备,配合力回馈技术和身体其他关节的形态捕捉技术,可以实现人机功效分析的功能,如验证人物是否可以方便的对场景内某设备进行操作。

(8)方案验证系统

本平台的自定义模拟流程功能可以作为情景方案合理性的验证使用,管理员可以先编辑多套流程,通过演示判断其合理性,再选择是否将其发布成所有客户端均可参与的状态。

同时,本功能还可用于制作一批指导性使用的三维动态说明书,用户可在平台中遵循操作步骤,看到每一步操作的方式方法和所能导致的效果,一步步的执行完整个说明流程。

(9)真实光照模拟

本平台可以在场景中设置各种类型的光源,可编辑这些光源的强度、范围和颜色,使得场景可以处于模拟出的真实光照环境下,以丰富流程模拟的场景环境。

(10)漫游功能

本平台可实现自然漫游和自动漫游功能。

自然漫游指用户可以在场景中,以第三人称视角任意的不受限制的漫游,使用键盘和鼠标操作控制,能够让镜头上、下、左、右、前、后平移、360度自由浏览、拉近/拉远等漫游操作。

自动漫游指用户可以自设定漫游路线,第三人称镜头会按照设定的路线进行移动,实现漫游。此外,可以设置漫游速度、漫游高度、镜头朝向。

本平台还具备实现互动漫游的扩展能力,互动漫游是在自动漫游的基础上,可以前进、停止、后退,也可换一条新的路线继续漫游,漫游中可查看漫游路线上的物品信息。

(11)标注功能

本平台可由管理员对平台中任意可操作的物品进行标注,可以以文本的方式任意标注备注信息,同时也可以标注电子地图地理信息,使得用户在漫游或模拟培训中对设备的用途、状态等信息一目了然,对周边环境地理信息一目了然。

(12)截图和录像功能

(13)测量功能

本平台的使用者可以任意测量场景中两个位置之间的距离,也可以测量某两个指定设施间的距离。

(14)路线规划功能

本平台可以由用户在场景中自定义路点,在路点覆盖的区域内,可以自动规划出最近的行进路线,并可设置阻碍点,以模拟区域内某些位置因某些原因无法通行时的合理行进路线。

(15)丰富的特效支持

本平台具有丰富的模拟特效功能,可实现起火、爆炸、烟雾、气化、流体等各种逼真的特效。

(16)物理引擎支持

本平台采用先进的物理引擎,可以逼真的模拟各种质量和形状的物品碰撞后的物理效果。

3.虚拟显示技术

(1)VR虚拟头盔和手柄

本系统采用的VR虚拟头盔硬件,能实现沉浸式虚拟现实体验,2K级别的显示屏,并具有广视角、高刷新率、低眩晕感等特点。其配置的手柄灵敏度高、功能齐全、可开发性强,能够以发射射线的方式实现在虚拟场景中行走、显示设备数据、触发设备事件等功能。

(2)手势追踪技术

本系统采用的手势追踪技术,拥有通过26自由度手势追踪以及6自由度位移追踪等关键技术,实现在虚拟现实及增强现实场景中的三维人机交互。

三维手势追踪:利用双目摄像头及三个红外发射器用于手势动作识别,根据26个自由度辨别手部姿态,收集动作信息,3D手势建模。通过计算机图形算法实现精准及超低延迟手势追踪。用户可以直接用手进行自然的人机交互。

位移追踪:利用头显设备内置6自由度位移追踪,识别用户头部的转动及身体位置,检测相对位置的变化,内置高性能惯性测量单元和AHRS算法保证了高性能的方向检测,还原人眼的真实视觉效果,为用户在VR环境中提供更好的沉浸感体验。

4.考评系统

考评系统由以下各部分组成:

(1)训练考评控制系统的操作号手操作平台

(2)训练考评控制系统的考官操作平台

考官可以在平台中实现发布学生成绩、训练、课程、资料等信息,进行模拟流程的方案制定,管理班级和操作号手,并和其他考官、操作号手及管理员沟通反馈等教学中所需的功能。

(3)训练考评控制系统的管理员管理平台

总结1.VR培训的应用现有缺陷

(1)VR技术防眩晕功能仍不完善。眩晕主要是由于画面延迟造成的,后续5G大带宽、高延迟体验有助于解决这一烦恼。

(2)VR本质实现的还是画面的重现,尽管某些设备添加了震感,但仍无法完全替代需要现场手感的培训,后续可通过丰富的穿戴设备及现场环境的进一步模拟实现(如风感,流体感,温度变化等)

(3)现有手势识别设备精度仍不足,与软件中模型的交互时有bug发生。

(4)近视用户仍需手动调节焦距

(5)整个系统的建模过程工作量仍很大,尤其是对于一些需要原始重建的模型,不能用到现有的素材。模型的标准化仍不完善。

2.5G时代VR培训的机遇与方向

沉浸式体验教学、远程互动教学、虚拟操作培训等场景。

5G的大带宽、高可靠、低时延等特点能让大量本地运算放于云端,解决硬件配置的限制,大幅提高画质。现有的VR场景是通过提前建模设置,5G的大带宽允许利用VR远程摄像头/高清8K摄像头,采集培训现场360°全景高清图像,通过5G网络回传到采集媒体处理平台,经实时处理后,教官与受训人员可映射到同一虚拟“场地”,实现远程互动教学。解决不能身临其境,亲手操作的问题。

本文由@大阳原创发布于人人都是产品经理。未经许可,禁止转载

THE END
1.如何开发培训系统搭建随着互联网的不断发展,越来越多的企业开始重视员工培训,因为员工的能力提升不仅可以提高企业的竞争力,还可以提升员工的职业素养和工作满意度。因此,开发一套高效的培训系统已经成为企业管理的必备工具。本文将介绍如何开发一套高质量的培训系统。「立即咨询」详细了解系统功能 一、需求分析在开发培训系统之前,我们首先https://baijiahao.baidu.com/s?id=1765519564254331659&wfr=spider&for=pc
2.软件培训方案软件培训方案 一、系统管理员培训及上机辅导 培训对象:对甲方企业指定的专职系统管理员进行系统的培训,以便系统管理员熟练掌握系统的结构、框架、功能、操作、设置、后台管理等工作 培训内容:A、系统安装流程、系统更新方法、系统配置管理、后台系统管理培训。B、数据迁移管理、数据初始化管理培训。C、各个管理模块的全面https://www.wenshubang.com/fangan/221005.html
3.软件系统培训方案书(验收支撑word原件)本文详细介绍了软件培训的各个环节,包括培训目的、对象及要求、方式、内容、讲师、教材,以及质量保证措施如用户培训确认报告和疑问解答,同时提供全套资料获取途径。 摘要由CSDN通过智能技术生成 1. 培训概述 2. 培训目的 3. 培训对象及要求 3.1. 培训对象 https://blog.csdn.net/weixin_41039677/article/details/137733823
4.软件系统培训计划(精选6篇)篇1:软件系统培训计划 一般来说,物业公司使用软件的主要有五层角色:项目业务操作层、项目管理层、公司职能部门管理层、公司决策管理层、系统管理层,其中每层角色根据业务分工分为多个角色,如项目业务操作层中包含收付款人员、客服人员、维修人员、保洁保安人员等。不同的角色操作软件的功能不同,例如收费人员更注重实际的https://www.360wenmi.com/f/filewe6jwvbg.html
5.软件系统培训方案软件系统培训方案5页 卖家[上传人]:xzh***18 文档编号:33843887 上传时间:2018-02-18 文档格式:DOC 文档大小:77KB最后一页预览完了!喜欢就下载吧,查找使用更方便 10 金贝 下载/ 5 举报 版权申诉 马上下载 下载提示 常见问题 1、金锄头文库是“C2C”交易模式,即卖家上传的文档直接由买家下载,本站只是中间https://www.jinchutou.com/p-33843887.html
6.软件系统培训方案培训方案 一、培训目标为保障本项目后期的正常运行及提升相关主管部门操作人员的综合能力,需对本项目的系统使用人员、技术管理人员、项目高级管理人员提供业务类、技术类和标准类的培训目标确保系统应用人员掌握应用系统的基本使用和管理,技术管理人员掌握系统和数据管理与维护的相关技术,高级管理人员宏观掌握应用系统的总体架https://www.yxfsz.com/view/1832818542904446977
7.软件系统培训方案模板培训方案.pdf(页眉可删) 软件系统培训方案模板-培训方案 软件系统培训方案模板_培训方案 软件系统培训方案模板 培训目的 在市教育局的安排下,我们一行20几位专业老师进入了 ___进行为期两个月的计算机软件培训,其目的是进行系统的专 业学习,了解目前流行的相关技术,参观行业,了解行业要求, 再将这些行业中的知识与我们的教学工作https://max.book118.com/html/2022/0523/6142000031004151.shtm
8.软件系统用户培训方案.docx通过系统化的培训,用户将能够熟悉和掌握软件系统的功能和操作流程,以提高工作效率和准确性。二、培训目标本培训方案的目标是使用户能够:理解软件系统的功能和作用;掌握软件系统的基本操作;学会利用软件系统完成相关工作任务;能够解决常见的操作问题和故障。三、培训内容本培训方案包含以下内容:1.软件系统介绍了解软件系统https://www.renrendoc.com/paper/317134711.html
9.软硬件通用培训方案产品的工作原理及特点、软件系统日常操作(提供教材) 第二天日常保养及维护、一般故障排除及维修技术(提供教材) 第三天现场观摩,进行实践操作 实操教学培训 第四天实操教学培训 第四天实操教学培训 培训效果跟踪和回访 为使培训员工能够完全了解整个系统的设计、实施以及配置等过程,建议被培训的员工同时应该从系统建设开始http://www.bjggs.com.cn/index.php?a=lists&catid=182
10.软件项目实施方案(通用13篇)项目实施是指软件开发项目在开发过程完成后,系统在正式移交客户使用前,系统所进行的现场联调、系统试运行和实施培训的过程。 项目正式实施之前,相关实施工作人员需要认真做好实施前的预备,并仔细制定实施方案,以期顺当地做好后续各项实施工作,按时完成实施任务。 https://www.oh100.com/a/202304/6536137.html
11.软件系统合同模板汇总十篇4、 负责应用软件系统的日常跟踪和服务工作,发现问题及时与乙方联系,协助并督促乙方及时解决问题; 5、 甲方承诺由乙方提供的软件只限在___区范围内使用。 三、 乙方责任: 1、 派专人根据甲方指定的时间做好软件的安装、调试工作; 2、 制订培训方案,在甲方约定的时间内做好用户对应用软件系统的应用培训工作; 3、https://www.yjbys.com/hetongfa/hetongfanben/1990497.html
12.客户案例ERP软件系统免费培训实施案例方案(仅列出部份)企管王ERP系统为专业软件开发商,主要从事生产型企业使用的免费版ERP系统生产管理软件系统的设计开发销售以及软件功能定制修改业务,有多年免费ERP系统软件培训实施案例及方案,我司所有软件全部为自主开发设计,拥有全部知识产权,因为有程序源代码,所以可以对软件功能进行任意修改,不受任何限制。只要是逻辑合理的功能,都可以实http://www.cnkis.com/AL.html
13.软件正版化培训方案大全为了确保事情或工作安全顺利进行,通常需要预先制定一份完整的方案,方案是书面计划,具有内容条理清楚、步骤清晰的特点。方案应该怎么制定才好呢?下面是小编为大家整理的软件正版化培训方案大全,仅供参考,欢迎大家阅读。 软件正版化培训方案大全1 一、培训目标 https://www.unjs.com/fanwenku/482854.html
14.培训公司培训机构管理软件系统31数字化培训解决方案帮助培训公司实现学员管理全过程数字化,培训机构管理软件系统创造更多的销售收入,学员旅程数字化记录,获得数字化洞察。https://www.31huiyi.com/special/train
15.智能交通综合实训室建设方案3 便携式激光交通调查系统 1 套 本实训平台所包含的主要设备具体参数如下: (1)交通信号控制实验平台 交通信息控制实验平台采用工业信号控制机与仿真软件相连,并连接单路口动态显示板,利用仿真软件,可实现配时优化方案自动下传。 实验平台配置1套工业级交通信号控制机,1套信号控制展示板及支架,1信号配时软件及实验指https://bjlg.com/fuwu/fasj/4135.html
16.企业培训系统在线培训考试平台企业内训系统企业培训课程EduSoho企业大学致力于为公司定制开发企业在线培训系统,提供企业培训课程以及在线培训学习的一体化解决方案.主要业务涵盖:企业内训,企业培训系统,新员工入职培训,员工业务培训,在线学习平台,在线考试系统,在线移动学习,企业培训课程,elearning,网上学习平台https://ct.edusoho.com/
17.防火墙策略统一调整系统安全系统层面:网内的各类安全防护系统,如防火墙、入侵检测/防护系统、网站安全防护系统、防病毒系统和终端安全管理系统等。 遵循企业内部针对内部网已颁布执行的各类信息安全策略和各类信息安全法规、标准等。 第二章系统建设方案 二.1.系统功能架构及部署 https://www.secpulse.com/archives/122274.html
18.培训机构招生软件微信招生小程序转介绍小程序培训机构招生软件提供邀约有奖裂变招生方案,招生季快速招满1000+学员到 培训机构招生软件提供拼团、邀请有礼、抽奖、砍价等丰富社交营销工具 培训机构招生软件能解决哪些问题? 培训机构招生管理系统实现从招生获客到私域转化,帮助学校突破业绩瓶颈 招生引流社交化 https://www.beiing.net/xxy.html