人机交互方法及装置

摘要

本发明涉及一种人机交互方法及装置，其人机交互方法是用户通过视觉、语音以及命令按钮交互通道与计算机进行交流；其人机交互装置由计算机显示器，CCD摄像机，以及与其相连接的摄像机镜头、图像采集卡，声卡、麦克风和扬声器，辅助光源，PLC，操作按钮和连接的家用电器组成。本发明可以满足不同用户的需要，特别是能满足老年人，残障人士或计算机知识贫乏的用户对计算机使用的需要。

主权项

1.一种人机交互方法，其特征在于人机交互步骤为：a.辅助光源(10)在用户(1)眼睛上形成普尔钦斑点，用户(1)的脸部由摄像机镜头(4)摄取图像、CCD摄像机(5)将图像经图像采集卡(6)采集到计算机(3)的内存中；b.在计算机(3)中，用图像处理的方法确定出瞳孔和普尔钦斑点的位置关系，从而判断出用户(1)的视线在屏幕(2)上所注视的对话框，并激活对话框；c.计算机(3)通过声卡(7)和扬声器(9)提示用户(1)当前的任务状态；d.用户(1)通过麦克风(8)、声卡(7)向计算机(3)发出语音命令确定或取消激活的任务，或者，通过按下表示任务确定的按钮(12)、或任务取消按钮(13)，配合视觉通道完成对应的任务；用户(1)通过麦克风(8)、声卡(7)向计算机(3)发送命令来启动/暂停视觉通道的工作，或者通过视觉通道开关按钮(14)、PLC(11)向计算机发送命令启动/暂停视觉通道和语音通道的工作，实现视觉、语音和命令按钮通道的协作。