AR和VR相结合的医学培训系统

摘要

本发明提供一种AR和VR相结合的医学培训系统，其通过3D图像采集模块采集手术目标对象以及培训人员使用的手术器械的三维图像，通过动作捕捉模块实时捕捉培训人员的手术动作，通过处理器输出纠正信息和指导信息，建立包含3D图像采集模块采集的三维图像、指导信息、以及纠正信息的增强现实或虚拟现实模型，培训人员通过AR交互模块实时获取手术目标对象和其使用的手术器械的状况、指导信息以及纠正信息，能够提升医疗培训的真实感与临场感，缩短医疗培训周期，降低医疗培训成本。

主权项

一种AR和VR相结合的医学培训系统，其特征在于，包括：模拟手术台(1)、设于所述模拟手术台(1)上手术目标对象(2)、对应所述手术目标对象(2)设置的3D图像采集模块(3)、与所述3D图像采集模块(3)通讯连接的中央处理器(4)、与所述中央处理器(4)通讯连接动作捕捉模块(5)、与所述中央处理器(4)通讯连接的AR交互模块(6)；所述3D图像采集模块(3)实时采集手术过程中手术目标对象(2)以及培训人员使用的手术器械的三维图像，并传输至中央处理器(4)；所述动作捕捉模块(5)实时采集手术过程中培训人员的手术动作，并传输至中央处理器(4)；所述中央处理器(4)根据手术的进程相应输出的预存在中央处理器(4)中的指导信息，并将动作捕捉模块(5)采集来的培训人员的手术动作和预设的标准手术动作进行实时比对，给出纠正信息，并将所述3D图像采集模块(3)采集的三维图像、指导信息、以及纠正信息一起进行建模，实时生成包含3D图像采集模块(3)采集的三维图像、指导信息、以及纠正信息的增强现实或虚拟现实模型；所述AR交互模块(6)实时获取中央处理器(4)生成的增强现实或虚拟现实模型，并根据该增强现实或虚拟现实模型将指导信息以及纠正信息展示在培训人员的视野中，培训人员通过AR交互模块(6)观看手术目标对象(2)和其使用的手术器械或观看手术目标对象(2)和其使用的手术器械的三维图像，并获取指导信息以及纠正信息。