使用智能眼镜进行汽车维保的方法

摘要

使用智能眼镜进行汽车维保的方法，本发明属于汽车维保领域，用以解决汽车维保无法使用智能眼镜而智能化不高的技术问题，技术要点是：包括汽车维保智能眼镜上的头部姿态识别的方法，智能眼镜共享用于汽车维保的其他设备数据的方法，智能眼镜应用于汽车远程维保支援的方法，用于车辆维保过程中的智能眼镜触控板的使用方法，用于车辆维保过程中的智能眼镜的手势识别方法。效果是：实现了智能眼镜在汽车维保领域的应用。

主权项

一种使用智能眼镜进行汽车维保的方法，其特征在于，包括如下方法：(1)用于车辆维保过程中的智能眼镜触控板的使用方法，所述触控板具有方向选择触控按键区域，遮挡不同按键区域，即表示选择该方向的动作，以此操作智能眼镜所具有的软件；所述触控板具有触控确认按键区域，遮挡该按键区域，即表示确定动作，以此操作智能眼镜所具有的软件；所述触控板具有触控取消按键区域，遮挡该按键区域，即表示取消动作，以此操作智能眼镜所具有的软件；(2)用于车辆维保过程中的智能眼镜的手势识别方法，手势识别操作板检测手势特征，当检测到使用者在手势识别操作板上的手势特征为预设的滑动手势时，向主控芯片发送中断信号，主控芯片判断该手势的逻辑表示，其特征在于：手势识别操作板接收的手势为一次沿着镜腿向镜框的方向滑动，即启动摄像头进行拍照；手势识别操作板接收的手势为连续两次沿着镜腿向镜框的方向滑动，即启动摄像头进行录像；手势识别操作板接收的手势为沿着镜框向镜腿的方向滑动，则关闭拍照或录像动作；遮挡手势识别操作板固定区域1秒时，光源被接通，光源发光以照射汽车检修时的区域；遮挡手势识别操作板固定区域2秒时关闭该光源；手势识别操作板被划分出两个检测区域，为第一检测区域与第二检测区域，手势识别操作板接收的手势为间隔的两次沿着镜腿向镜框的方向滑动，间隔时间为1S以上，则启动分区检测模式：第一区域在先检测到手势遮挡时，若第二区域在后也检测到手势遮挡，则启动麦克风，若第一区域再次检测到遮挡手势，则关闭麦克风；第二区域在先检测到手势遮挡时，若第一区域在后也检测到手势遮挡，则启动喇叭，若第一区域再次检测到遮挡手势，则关闭喇叭；(3)用于车辆维保过程中的智能眼镜触控板与按键的并行使用防油污的方法，其特征在于：触控板具有方向选择触控按键区域，遮挡不同按键区域，即表示选择该方向的动作，以此操作智能眼镜所具有的软件，且所述的眼镜还具有与选择触控按键区域相对应的按键，该按键在使用者修理汽车时，由于存在阻隔无法使用触控板时而使用；(4)用于车辆维保过程中的智能眼镜判定车辆损伤程度的方法，其特征在于，包括信息采集步骤及部件定损步骤；智能眼镜将采集到的信息传输至计算机，由计算机对采集到的信息进行特征提取，并对部件的损伤级别进行评定；信息采集及部件定损的步骤为：智能眼镜上设有光源、光栅以及双目立体视觉摄像头，打开光源，双目立体视觉摄像头采集待测部件的数据信息，所述受损车辆的各个部件区域分别对应部件虚拟框线图，基于所述用户选择的部件虚拟框线图，将所述受损车辆的受损部件通过视点对焦落入选择的部件虚拟框线图之内，通过拍照的方式对所述受损部件进行框选拍照，以采集所述车辆受损部件的图像信息；所述图像数据信息通过非触式传感器传输到计算机内进行点云逆向铺面、建模步骤，得到待测部件的三维立体信息，由所述得到待测部件的三维立体信息与计算机已存储的正常的零部件的三维模型相比对，得到对比结果，根据预先划分表示不同损伤程度的多级区间，计算各对比结果落入的具体区间，以判定待测部件的损伤程度；(5)汽车维保过程中智能眼镜的照明方法，包括如下步骤：S1.有用户佩戴智能眼镜，陀螺仪感应振动即发出状态选择信号或者在关闭陀螺仪感应开启的情况下，使用一种输入方式，使得智能眼镜发出状态选择信号；S2.用户选择进入自动照明状态或强制照明状态：S2.1.用户选择为强制照明状态，则光源启动发光；S2.2.用户选择自动照明状态，设定光照阈值及光源启动的光强度阈值：S2.2.1.光强度传感器实时采集环境的光强度信号，直至采集的光强度值低于设定的光强度阈值；S2.2.2控制板输出的控制信号驱动制双向可控硅电路导通实现光源亮度调整，达到零补偿值后，保持设定的灯光阈值灯亮度不变；光强度传感器采集当前环境光强度值，输出信号经信号处理通过A/D转换单元将模拟光强度信号转变成数字光强度信号，以串行方式发送到控制板的接收端口，控制板接收数据，输出将信息转换成可读取数值，显示当前光强度值；控制板通过内置的控制算法对接收数据进行运算和处理，以判断光源的开关状态、计算光照补偿值和发送控制信号；触控板设置滑动强制开启灯光模式，设定一滑动手势，则该手势操作使得光源强制开启；该步骤中，一旦输入开启光源的语音指令，则强制开启光源；(6)汽车维保过程中智能眼镜通过车牌识别并获得车辆信息的方法，包括如下步骤：S1.操作人员带上智能眼镜，将眼镜模式切换为识别模式，进行车牌识别；S2.通过智能眼镜的前置摄像头，对车辆进行图像的采集；S3.将采集的图像信息传输至主机中的图像识别匹配模块，首先进行图像的预处理，对采集的车辆图像，进行分割处理，定位车牌所在的区域；然后将车牌区域中的字符进行单个分割，每个字符或者数字形成单独的图像，进行识别，通过采用离线的已经训练好的分类模型，对单个字符或者数字图像进行分类识别，并判断每个所识别字符的置信度得分，选取最高置信度的字符作为最终识别的字符；将识别出来的字符按顺序进行拼接，即为所识别的车牌号，如无法对采集的图像进行车牌识别，则将识别失败的信息传输给控制模块；S4.控制模块获得图像识别匹配模块分析结果后，判断是否识别成功；如果失败，控制震动模块和音频输出模块，提示用户车牌识别失败；如果成功，将识别的车牌号通过通讯模块，传给远程服务器，远程服务器收到车牌号信息，在车辆信息数据库中，检索车辆车架号等其他车辆信息；通过车辆车架号，同时也可以获取车辆的车型、配置的信息；S5.远程服务端检索到车辆信息之后，通过通讯模块，将检索结果返回给控制模块，控制模块将结果信息传送给图像输出模块，用以给操作者进行图像信息的呈现；(7)智能眼镜应用于汽车维保领域的语音指令识别方法，，包括如下步骤：S1.操作人员带上智能眼镜，将眼镜模式切换为操作模式，进行语音操作交互；S2.智能眼镜的麦克风阵列获取并采集用户语音指令；S3.语音指令传输至智能眼镜主机中的语音识别匹配模块，进行语音的预处理，以及声音信号的特征提取，对提取的特征进行分类识别，判断是否为语音指令信号，如果是语音指令信号，与语音指令库中的指令进行匹配，选取最为相似的指令作为输出；S4.如指令匹配成功，控制模块接收到指令输入，进行相应的指令操作并同时控制震动反馈模块和音频输出模块提示用户，指令匹配成功；如果是需要进行远程服务端获取数据的指令，则需要通过通讯模块，利用无线通讯设备将识别后的指令发送给远程服务器，用以获取远程服务器的数据；S5.如果指令匹配不成功，控制模块会控制震动反馈模块提示用户，指令没有识别，并控制语音输出模块，提示请尝试再次发出指令；所述指令操作包括扫描、确认、返回、暂停、调整音量和由数据库里取出数据的操作；(8)汽车维保过程中智能眼镜用于判定汽车异响的方法，包括如下步骤：S1.操作人员将眼镜模式切换为识别模式，发出语音指令并进行声音故障分析识别；S2.智能眼镜麦克风阵列获取并采集声音信号；S3.声音信号传输至智能眼镜主机中的声音识别匹配模块，进行声音的降噪，奇异性检测，以及声音信号的特征提取，对提取的特征进行分类识别，判断声音所属类别，以及故障程度，同时将分析结果信息传输给控制模块；S4.控制模块接收到结果信息之后，控制震动反馈模块提示用户，并控制图像输出模块显示分析结果；(9)智能眼镜维保过程中的盲区查看的方法，包括如下步骤：S1.外接图像采集设备，包括高分辨摄像头、LED光源、和通讯模块，通讯模块与智能眼镜进行数据通讯；S2.外接图像采集设备底端有一拖杆，拖杆可自动插拔；S3.通过USB接口、USB数据线、WIF或者蓝牙将智能眼镜和外接设备进行连接；S4.智能眼镜的控制模块，接收外接设备的图像信息，进行相应的分析、显示或者操作；S5.通讯过程中，维修人员可通过语音指令方式或者手势指令方式，对智能眼镜图像采集和外接图像采集设备图像采集进行切换；(10)汽车维保智能眼镜上的头部姿态识别的方法，包括如下具体步骤：S1：使用智能眼镜上的立体摄像头估计头部的三维姿态参数，并分析头部动作；S2：通过离散小波变换分析检测到头部运动，然后通过3D头部模型迭代求精获得3D参数；S3：当检测到维修人员点头时，代表信息的确认；当检测到维修人员摇头时，代表操作的取消；当检测到维修人员点两次头时，代表进行下一操作界面；当检测到维修人员连续摇头时，代表关闭该头像识别系统；(11)智能眼镜共享用于汽车维保的其他设备数据的方法，适用于智能眼镜，所述智能眼镜与至少一个移动电子设备通过网络相连，进行数据传输，具体方法如下：维修人员无法用智能眼镜拍摄故障部位图片时，用移动电子设备进行拍摄，并将拍摄的照片通过传输模块发送到智能眼镜上；智能眼镜的显示模块显示该故障图片，维修人员通过故障图片采取相应的技术进行维修；当维修人员不能对故障进行解决时，则向移动电子设备发送支援请求，移动电子设备上的故障诊断子系统、维修技术资料数据库、零部件数据库对该图像进行识别，并找出解决该故障的方法，通过传输模块发送至智能眼镜上；(12)智能眼镜应用于汽车维保的过程中的多机交互方法，包括以下步骤：S1：预先设置智能眼镜主机与多台从机，从机记录主机的地址信息；S2：从机通过地址信息定位到主机，并通过Windows通讯接口WCF技术连接到所述主机；S3：主机识别所述从机的交互协议，根据所述交互协议与从机建立通信；S4：当维修人员遇到不能解决的技术问题时，向主机和/或其他从机发送语音消息以及当前图像的图像数据，主机和/或其他从机通过语音播报模块听取该维修人员遇到的技术问题以及通过显示模块显示该图像信息；S5：主机或其他从机的维修人员知道如何解决该问题时，通过语音识别模块，将语音消息发送至遇到技术问题的维修人员的主机或从机上；S6：遇到技术问题的维修人员通过语音播报模块听取如何解决该技术问题的语音消息；(13)智能眼镜检测汽车液体余量的方法，具体步骤如下：S1：操作人员带上智能眼镜，将眼镜模式切换为识别模式，进行液体余量检测；S2：使用标尺进行液体余量测取，并通过智能眼镜前置摄像头采集标尺图像；S3：将图像数据传输至图像识别匹配模块，对图像中的标尺的刻度进行识别；S4：将识别结果传输给控制模块，根据得到的百分比结果，控制图像输出模块，将结果通过光机显示的镜片上；所述的结果给出3种提示：红色报警液体过少需添加或液体正常可添加或液体足够使用无须添加；(14)智能眼镜维保过程中的零件识别方法，具体步骤如下：S1：首先对现有的零件构建离线特征库，用以支持与后续智能眼镜所采集的零件信息进行特征匹配，并将该特征库存储于服务器数据库模块中；S2：将智能眼镜模式调为识别模式，通过智能眼镜上的前置摄像头，对待识别的零件进行多角度拍摄，拍摄图像必须有重叠部分，将所拍摄的图片通过通讯模块传至服务器进行三维重建，提取空间上下文特征；S3：将提取的空间上下文特征与离线特征库中的零件特征进行比对，采用LAPJV算法对特征矩阵进行最优匹配操作，使代价值最小；S4：在离线特征数据库中选取代价最小值所对应的汽车零件作为当前待检测的零件最匹配的零件；S5：服务器将匹配的零件的名称、型号、价格等信息传送给智能眼镜，控制模块控制图像输出模块进行零件信息的展示；(15)智能眼镜维保过程中的漏液识别方法，具体步骤如下：S1：操作人员佩戴智能眼镜，将智能眼镜切换为识别模式；S2：前置摄像头对当前机体图像信息采集，控制模块会根据图像采集的质量，操作LED光源进行补光；S3：智能眼镜镜架上设有另一光源，当光束打在机体上时间，会有不同的光谱显示；S4：将前置摄像头采集的光谱数据传输至图像识别匹配模块，与已知的漏液光谱进行比对分析，定位当前漏液范围及其位置；S5：控制模块通过分析结果，调用图像输出模块增强现实的实时显示漏液范围；(16)智能眼镜应用于汽车维保过程中的室内定位及图像识别的方法，包括以下步骤：S1：置于室内屋角的多个蓝牙设备识别修理人员处于第一位置时，智能眼镜的摄像头扫描到目标物体的二维图像，并将该二维图像发送到数据存储库中；S2：数据存储库中的处理模块根据二维图像找出对应的三维图像，通过传输模块在返回到眼镜的光机上；S3：当多个蓝牙设备识别到修理人员移动到第二位置时，处理模块自动将该三维图像进行旋转，以使得修理人员位于第二位置时所观察到的目标物体的图像与光机上所显示的图像一致；S4：修理人员通过光机上的所显示的图像继续对故障进行修理。S5：重复步骤S3‑S4；所述的数据存储库、处理模块、传输模块和眼镜上的蓝牙设备集成与一体，安装在摄像头支架上；(17)智能眼镜应用于汽车远程维保支援的方法，包括以下步骤：S1：当维修人员外出修车遇到疑难问题时，智能眼镜的摄像头采集故障车辆工况信息、语音识别模块识别维修人员遇到的技术问题；S2：将故障车辆工况信息和语音信息通过远程互动系统传回维修公司向坐席专家寻求技术支持；S3：维修公司坐席专家通过远程系统在装有无线网桥的计算机上显示的图像，标记有缺陷的部位；S4：并将标记有缺陷的部位的图像、如何解决技术问题的语音消息通过远程系统发送给维修人员；S5：维修人员通过显示模块显示的图像和语音播报模块播报的语音消息进行车辆维修；(18)智能眼镜应用于维保过程中的划分零件定损等级的方法，具体步骤如下：S1：操作人员带上智能眼镜，将智能眼镜模式切换为识别模式，进行零件受损检测；S2：通过智能眼镜前置摄像头采集零件图像信息，控制模块通过通讯模块将零件图像信息传输到远程服务器，远程服务器使用CATIA软件进行点云逆向铺面、建模得到待测部件的三维立体信息；S3：远程服务器建立三位立体信息之后，进行LBP、尺寸、曲率以及距离信息的特征信息的提取；S4：获得特征信息之后，远程服务器对部件进行定损分析，由点云逆向重建模型获得待测部件的尺寸、曲率、距离数据；并将已存储的正常的零部件的三维模型测量结果与故障模型三维测量结果作比较；S5：服务器对零件定损分级之后，通过通讯模块将分析结果传输到智能眼镜中，控制模块控制图像输出模块对结果进行显示；(19)智能眼镜在汽车维保过程中的零件拆卸的方法，具体步骤如下:S1.将智能眼镜模式调为识别模式；S2.通过智能眼镜前置摄像头，对待拆卸或安装的零部件图像进行采集，将实时图像数据传送到图像识别匹配模块进行图像处理；S3.图像识别模块对零部件图片进行识别，识别出对应部件上可拆卸零件的位置，通过控制模块，调用图像输出模块进行实时的标记；S4.通过标记图像对零件进行拆卸；所述智能眼镜包括眼镜框(2)和镜腿(1)，其中一个镜腿(1)具有一个回旋弯折(3)，回旋弯折(3)的一侧连接第一直板(4)，该第一直板(4)设置有朝向镜腿外侧(13)的触控板(5)，该回旋弯折(3)的另一侧连接第二直板(14)，该第二直板(14)的上、下两侧具有伸出的底板(6)，与第二直板(14)形成摄像头(15)的容置部，第二直板(14)设有摄像头安装孔，所述两个底板(6)与光机(7)连接，且该光机(7)位于与其更为相近的镜片框(16)的前方，镜片框连接于第一直板(4)且设置于回旋弯折(3)较近处，第一直板(4)与第二直板(14)基本垂直。