徒手人机界面操作系统及其方法

摘要

本发明涉及一种徒手人机界面操作系统及其方法。此系统以影像处理的方式分析出使用者的手臂影像以及手掌影像，再根据摄影机的校正参数计算出手臂的坐标，由此供使用者以手臂来选择人机界面中的对象。接着，此系统根据手掌影像辨识出一手势，接着根据此手势决定一相对应的指令，再对所选对象执行此指令。此手势可包含指向手势、抓取手势及一释放手势。

主权项

一种徒手人机界面操作系统，其特征在于，包含：一显示单元；一资料处理单元，其产生具有若干个对象的一人机界面，每一所述若干个对象具有一深度参数，所述资料处理单元控制所述显示单元显示所述人机界面，其中该深度参数是指该若干个对象间的显示关系；若干个影像撷取单元，其撷取若干张手部影像，每一所述若干个影像撷取单元具有若干个内部参数及若干个外部参数，其中该若干个内部参数指该若干个影像撷取单元的物理参数，以及该若干个外部参数系该若干个影像撷取单元与该显示单元之间的坐标系统转换矩阵；一影像分析单元，其分析所述若干张手部影像以取得若干个手臂影像及若干个手掌影像；一坐标计算单元，其根据每一所述若干个影像撷取单元之所述若干个内部参数及所述若干个外部参数，以及所述若干个手臂影像，计算若干个手臂坐标点、所述若干个手臂坐标点所形成的一手臂延伸线以及一手臂移动量；以及一手势辨识单元，其根据所述若干个手掌影像辨识出一手势；其中，所述资料处理单元根据所述手臂延伸线、所述手臂移动量以及所述若干个对象的所述深度参数，从所述若干个对象中决定一所选对象，并决定对应所述手势的一个指令，对所述所选对象执行所述指令。