车载人机交互系统及方法

摘要

本发明提供一种车载人机交互系统，包括：前视双目摄像头与激光雷达，对车外信息进行采集；下视双目摄像头，对车主的手势进行采集；存储器，存储车主的指定手势或手势运动轨迹及对应的操作；处理器，对所述前视双目摄像头与激光雷达所采集的车外信息进行处理，计算出车外的环境信息，并给予安全提醒，还根据所述存储器对下视双目摄像头所采集的手势进行识别，并当识别到指定手势或手势运动轨迹后通知执行模块执行所对应的操作；执行模块，以声光电之一者或结合给出提醒信息、以及执行手势对应操作。还提供了一种车载系统的人机交互方法。通过本系统及方法，对车外状况进行安全提示，还可以接受车内驾驶人的手势控制，提供更加人性化服务。

主权项

一种车载人机交互系统，其特征在于，所述车载人机交互系统包括：前视双目摄像头，用于对车外信息进行采集；激光雷达，安装于车前用于配合所述前视双目摄像头对车外信息进行采集；下视双目摄像头，用于对车主的手势进行采集；存储器，用于存储车主的指定手势或手势运动轨迹及对应的操作；处理器，用于对所述前视双目摄像头与所述激光雷达所采集的车外信息进行处理，计算出车外的环境信息，并给予安全提醒，还用于结合对车主手势的采集通过三维重建确定手指位置，并根据指定手势或手势运动轨迹通知执行模块执行所对应的操作；执行模块，用于以声光电之一者或结合给出提醒信息、以及执行所述手势对应的操作。