[0001] 本实用新型涉及驾驶模拟器技术领域，尤其涉及一种应用于汽车、飞机等行业的基于混合现实的多自由度驾驶模拟器。

[0002] 现有的飞机，汽车等模拟器的模拟平台是把虚拟现实技术运用于多自由度运动平台中，通过计算机技术产生驾驶过程中的虚拟视景、音响效果和运动仿真，使驾驶员沉浸到虚拟驾驶环境中，产生实装驾驶感觉，从而体验、认识和学习现实世界中的驾驶。目前的运动模拟机一般为全实物模拟器及虚拟现实模拟器。

[0003] 全实物模拟器以大屏幕或投影以及1:1座椅平台为技术特征，实现座舱内外环境模拟，其1:1座舱内设备，比如开关、按钮等全部用实物实现。另外，驾驶舱的操作设备采用带力反馈的三轴操纵系统实现主操纵的力感模拟。全实物模拟器的优点是功能强大、模拟逼真度高，缺点是体积庞大、结构负载，同时成本高。

[0004] 虚拟现实模拟器采用VR技术实现视景模拟(一般采用HMD作为视景显示设备)，其座舱显示设备均以虚拟现实方式仿真呈现，此类模拟器的优点是体积小巧，成本低，通用性较强，在军事领域应用较多。但是虚拟现实模拟器强调操作者在虚拟环境中的视觉、听觉、触觉等完全由计算机生成，操作者各种感觉与现实世界相对隔离，完全沉浸在一个完全由计算机所产生的虚拟环境中，操作者的动作没有在虚拟环境中进行实时的体现，操作者也就无法观看自己的动作，不符合生活中人主要通过视觉反馈引导手完成操作行为，操作者看到的内容与运动过程不一致性，无法达到“看得准”就能“摸得准”的效果，模拟驾驶时的体感效果不佳，真实感不高。

[0005] 因此，现有技术有待改进。实用新型内容

[0006] 鉴于上述现有技术的不足之处，本实用新型的目的在于提供一种基于混合现实的多自由度驾驶模拟器，旨在提高模拟驾驶的真实体感效果，又相对于全实物模拟降低成本。

[0007] 为实现上述目的，本实用新型采取了以下技术方案：

[0008] 一种基于混合现实的多自由度驾驶模拟器，其中，包括：

[0009] 控制终端、多自由度机械臂、座椅平台及混合现实眼镜；

[0010] 所述控制终端与所述多自由度机械臂、座椅平台、混合现实眼镜电连接，所述座椅平台连接在所述多自由度机械臂的输出末端；

[0011] 所述座椅平台内设置有座椅及与真实驾驶舱内相同的实物操作部件；

[0012] 所述控制终端获取操作者对所述操作部件的操作动作，并根据所述操作动作控制所述多自由度机械臂进行多自由度的运动，从而带动所述座椅平台进行加速、匀速、减速、拐弯驾驶运动的模拟；

[0013] 所述混合现实眼镜实时获取座椅平台内的实物视景，并实时跟踪获取所述操作者观察时的位置姿态信息；

[0014] 所述控制终端还生成虚拟视景，所述虚拟视景为在驾驶过程中驾驶舱内外可观察到的图像，所述控制终端将所述实物视景及虚拟视景进行融合后得到融合视景并发送至所述混合现实眼镜进行显示，同时，所述控制终端根据操作者观察时的位置姿态信息，在所述混合现实眼镜中同步更新渲染与该位置姿态相匹配的融合视景。

[0015] 其中，所述控制终端连接有动作捕捉传感器，用于捕捉操作者手脚动作的方向及力度。

[0016] 其中，所述混合现实眼镜上配置有双目摄像头及惯性传感器；

[0017] 所述双目摄像头用于实时拍摄座椅平台内的实物图像；

[0018] 所述惯性传感器实时获取所述操作者的角速度及加速度。

[0019] 其中，所述多自由度机械臂包括底座、水平面转台、第一连杆、竖直面转台、第二连杆、第三连杆，还包括及水平转动电机、第一连杆转动电机、竖直转动电机及第二连杆旋转电机；

[0020] 所述底座与水平面转台转动连接，并通过安装在水平面转台上的水平转动电机驱动水平面转台相对底座在xy平面转动；

[0021] 所述第一连杆的两端分别与水平面转台、竖直面转台转动连接，其一端通过安装在水平面转台上的第一连杆转动电机驱动第一连杆相对水平面转台在xz平面内转动，其另一端通过安装在竖直面转台上的竖直转动电机驱动竖直面转台相对第一连杆在xz平面内转动；

[0022] 所述第二连杆的两端分别与竖直面转台、第三连杆转动连接，其与竖直面转台连接的一端通过安装在竖直面转台上的第二连杆旋转电机驱动第二连杆相对第二连杆的中心轴旋转；

[0023] 所述第三连杆相对第二连杆在xz平面内转动，所述第三连杆远离第二连杆的一端与所述座椅平台连接。

[0024] 其中，所述水平面转台上还设置有可上下摆动的伸缩缸，所述伸缩缸内设置有可伸出或回收的拉杆，所述拉杆的伸出端与所述第一连杆铰接。

[0025] 本实用新型的基于混合现实的多自由度驾驶模拟器，通过在座椅平台内设置真实的实物操作部件，通过混合现实眼镜将操作者的操作动作、实物操作部件与虚拟视景融合后显示，同时及时地将操作动作所对应的加速、匀速、减速、拐弯等运动体验通过多自由度机械臂输出，这样操作者能在融合后的视景中看到自己手脚的动作，操作者所观看到的内容与运动过程有高度的同步一致性，体感效果真实，产生驾驶实机的沉浸感。同时，由于无需使用全实物模拟，从而降低了成本。

[0034] 下面将结合本实用新型实施例中的附图，对本实用新型实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本实用新型的一部分实施例，而不是全部的实施例。基于本实用新型中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本实用新型保护的范围。

[0035] 需要说明，本实用新型实施例中所有方向性指示(诸如上、下、左、右、前、后……)仅用于解释在某一特定姿态(如附图所示)下各部件之间的相对位置关系、运动情况等，如果该特定姿态发生改变时，则该方向性指示也相应地随之改变。

[0036] 在本实用新型中，除非另有明确的规定和限定，术语“连接”、“固定”等应做广义理解，例如，“连接”可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系，除非另有明确的限定。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本实用新型中的具体含义。

[0037] 另外，在本实用新型中如涉及“第一”、“第二”等的描述仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。

[0038] 请参考图1至图5，本实用新型提出一种基于混合现实的多自由度驾驶模拟器100，包括控制终端1、多自由度机械臂2、座椅平台3及混合现实眼镜4。

[0039] 所述控制终端1与所述多自由度机械臂2、座椅平台3、混合现实眼镜4电连接，所述座椅平台3连接在所述多自由度机械臂2的输出末端。

[0040] 所述座椅平台3内设置有座椅31及与真实驾驶舱内相同的实物操作部件。

[0041] 所述实物操作部件可以根据模拟驾驶的项目进行适应性配置，如模拟汽车驾驶时实物操作部件包括方向盘、刹车、油门、离合器、换挡手杆等。同样，模拟飞机驾驶时在座椅平台内配置飞机驾驶舱内的操作部件。

[0042] 本实用新型的多自由度机械臂2进行多自由度的运动包括沿x轴、y轴、z轴平移，绕x轴、y轴、z轴转动等运动。根据需要可以设置成5自由度或者6自由度的串联式机械臂。

[0043] 现有技术中一般采用六个液压缸驱动的并联式运动平台，但是并联六自由度运动平台受到多个缸体运动行程及输出力的影响，无法持续输出装备实际需要的加速度，导致仿真可信度和实际体验下降。而本实用新型采用串联的多自由度机械臂2，具有更高的灵巧度、更大的运动范围、在工作空间内实现任何末端执行器姿态的可能性。

[0044] 本实用新型的控制终端1获取操作者200对所述操作部件的操作动作，并根据所述操作动作控制所述多自由度机械臂2进行多自由度的运动，从而带动所述座椅平台3进行加速、匀速、减速、拐弯驾驶运动的模拟。本实用新型的控制终端1连接有动作捕捉传感器5，用于捕捉操作者200手脚动作的方向及力度，以获取方向盘、油门、变速、制动等实物操作部件的操作参数，如方向盘向右转30度，油门输入20％等。获得实物操作部件的操作参数后，控制终端1根据操作参数进行座椅平台3的位置和姿态解算，计算后进行机械臂2运动轨迹的规划及关节运动控制的执行，以实现座椅平台3的加速、匀速、减速、拐弯驾驶运动的模拟。

[0045] 所述混合现实眼镜4实时获取座椅平台3内的实物视景，并实时跟踪获取所述操作者200观察时的位置姿态信。实物视景包括座椅平台3内实物操作部件、操作者200的手脚等。

[0046] 所述控制终端1还生成虚拟视景，所述虚拟视景为在驾驶过程中驾驶舱内外可观看到的图像。驾驶舱为驾驶项目对应的虚拟舱，如汽车驾驶舱或飞机驾驶舱，驾驶过程中驾驶舱内外可观看的图像如舱内仪表，显示屏，舱外道路，景物等由控制终端1生成。

[0047] 所述控制终端1将所述实物视景及虚拟视景进行融合后得到融合视景并发送至所述混合现实眼镜4进行显示。本实用新型的混合现实眼镜4上配置有双目摄像头41及惯性传感器42，所述双目摄像头41用于实时拍摄座椅平台3内的实物图像，所述惯性传感器42实时获取所述操作者200的角速度及加速度。

[0048] 混合现实眼镜4的双目摄像头41采集座椅平台3内实物操作部件如方向盘、油门及人手等高清影像，然后控制终端1对采集的影像进行前景抽取、光影处理和三维重建与虚拟视景实时融合，融合过程对虚拟驾驶舱内的操作部件进行遮挡处理，将采集的实物操作部件及人手嵌入到虚拟实景内，从而实现虚实融合。

[0049] 同时，本实用新型模拟器100的控制终端1根据操作者200观察时的位置姿态信息，在所述混合现实眼镜4中同步更新渲染与该位置姿态相匹配的融合视景。混合现实眼镜4的双目摄像头41及惯性传感器42实现定位器功能捕捉操作者200在座椅平台3内观察时的空间定位信息及姿态信息并实时更新与该位置姿态信息对应的视景，实现驾驶视角与虚拟视景的完美融合，操作者200能在融合的视景中实时地看到自己手脚的动作，观看到的内容与运动过程高度同步，达到“看得准”就能“摸得准”的效果，从而产生驾驶实机的沉浸感。

[0050] 同时本实用新型模拟器100无需全实物模拟，只需真实模拟操作者200在驾驶过程真实观看、触碰的操作部件如方向盘，油门，刹车等，降低了设备成本。

[0051] 具体地如图3和图4所示，所述多自由度机械臂2包括底座201、水平面转台202、第一连杆203、竖直面转台204、第二连杆205、第三连杆206，还包括及水平转动电机207、第一连杆转动电机208、竖直转动电机209及第二连杆旋转电机210。

[0052] 所述底座201与水平面转台202转动连接，并通过安装在水平面转台202上的水平转动电机207驱动水平面转台202相对底座201在xy平面转动。水平面转台202带动整个机械臂2在水平面可做360度旋转。水平面转台202的转动为一个自由度。

[0053] 所述第一连杆203的两端分别与水平面转台202、竖直面转台204转动连接，其一端通过安装在水平面转台202上的第一连杆转动电机208驱动第一连杆203相对水平面转台202在xz平面内转动，其另一端通过安装在竖直面转台204上的竖直转动电机209驱动竖直面转台204相对第一连杆203在xz平面内转动。第一连杆203两端的相对转动为两个自由度。

[0054] 所述第二连杆205的两端分别与竖直面转台204、第三连杆206转动连接，其与竖直面转台204连接的一端通过安装在竖直面转台204上的第二连杆旋转电机201驱动第二连杆205相对第二连杆205的中心轴旋转。第二连杆205绕其中心轴的旋转为一个自由度。

[0055] 所述第三连杆206相对第二连杆205在xz平面内转动，所述第三连杆206远离第二连杆205的一端与所述座椅平台3连接。第三连杆206相对第二连杆205的转动为一个自由度。

[0056] 本实施例中，当第三连杆206与所述座椅平台3的连接为固定连接时整个多自由度机械臂2的运动为5个自由度，当第三连杆206与所述座椅平台3的连接为转动连接时则整个多自由度机械臂2的运动为6个自由度。多自由度运动的配合可实现座椅平台3的上下左右前后移动及倾斜并能体验加速、减速、转弯等体验。如图5所示为座椅平台3上升到高处的状态。

[0057] 本实用新型实施例的水平转动电机207、第一连杆转动电机208、竖直转动电机209及第二连杆旋转电机210均可采用直流电机。

[0058] 优选地，所述水平面转台202上还设置有可上下摆动的伸缩缸211，所述伸缩缸211内设置有可伸出或回收的拉杆212，所述拉杆212的伸出端与所述第一连杆203铰接。可伸缩的拉杆212的设置提高第一连杆203的支撑强度，提示整个机械臂2的稳定性。

[0059] 本实用新型实施例提出的基于混合现实的多自由度驾驶模拟器，通过在座椅平台内设置真实的实物操作部件，通过混合现实眼镜将操作者的操作动作及实物操作部件与虚拟视景融合后显示，同时及时地将操作动作所对应的加速、匀速、减速、拐弯等运动体验通过多自由度机械臂输出，这样操作者能在融合后的视景中看到自己手脚的动作，操作者所观看到的内容与运动过程有高度的同步一致性，体感效果真实，产生驾驶实机的沉浸感。同时，由于无需使用全实物模拟，从而降低了成本。

[0060] 以上所述仅为清楚地说明本实用新型所作的举例，并非因此限制本实用新型的专利范围，这里无法对所有的实施方式予以穷举，凡是在本实用新型的构思下，利用本实用新型技术方案中的内容所作的等效结构变换，或直接/间接运用在其他相关的技术领域均包括在本实用新型的专利保护范围内。