基于手势识别的智能输入系统设计

Smartmouse智能手势输入系统分为手持端(手势数据采集模块)和主机端(数据接收处理模块)，手持端和主机端通过无线方式连接。手持端可方便地佩戴在使用者手指上，对使用者的手势数据进行采集;主机端可实现与PC机接口，并可对手势数据进行接收和智能处理。

Smartmouse智能手势输入装置的功能框图如图1所示。

Smartmouse智能手势输入装置，可准确识别人的各种手势并依据手势流畅的进行如移动鼠标、左键、右键、删除、确定、取消、移动文件等等相应操作。信号采集端可实时完整的采集人手部动作的信息，经整理后以相应的数据格式通过2.4G无线频段传输给PC或接收机上的主机端;主机端可在无需任何驱动程序的前提下将自身例化为USB接口形式的鼠标键盘复合设备;接收数据后，对数据进行智能化处理，识别出手势所表达的意义，同时将相应操作反馈给PC或接收机。对手势的识别率应达到消费类电子的水平。

图1 系统原理框图

1 系统功能实现原理

Smartmouse智能输入系统采用加速度传感器对使用者的手部动作数据进行采集和初步识别，结合无线通信和USB接口技术，通过自创的简单且智能的手势识别处理算法，将得到的手部动作信息通过USB接口传输给PC或接收机，使用户能够以更符合肢体动作习惯的方式对PC进行控制，给用户带来全新的操作体验。

Smartmouse智能输入系统硬件结构框图如下图2所示。

图2 系统硬件结构框图

(1)手势数据采集

Smartmouse智能手势输入系统的手持端需对使用者手部动作数据进行连续且准确的采样，并将采集到的手部动作数据通过无线形式传输给连接在PC机USB接口上的主机端。本系统采用美新公司生产的双轴MEMS加速度传感器芯片MXC6202xMP作为主要的手势动作感知器件，在正确感知手部动作数据的同时，达到低功耗、高精度的要求。

(2)数据接收与处理

连接在PC机USB口上的主机端，即数据接收与处理模块，将自身例化为PC机的鼠标和键盘复合设备，同时将通过无线方式接收到的手势数据通过识别算法进行智能处理，将处理后的结果以鼠标键盘操作数据的形式传输给PC机。数据接收与处理模块与PC机的连接过程无需安装任何驱动，可实现即插即用。对手势数据的识别率能够满足消费类电子要求。本系统中以AVR单片机为核心处理单元，负责将设备按照USB协议枚举为USB复合设备，管理无线收发模块，并通过无线模块对手持端进行管理，同时将接收到的手势数据通过自创的手势识别算法进行分析，将结果发送给主机端。

(3)数据的传输

采集的手势数据的传输采用当前在消费类电子产品领域应用比较广泛的2.4G频段，在保证带宽的前提下准确传输数据和控制信息，同时可实现设备休眠等降低功耗的操作。

(4)主机端与PC接口

主机端即手势数据处理模块通过USB接口与PC机进行连接，将自身例化为PC机的键盘鼠标复合设备，在不需要任何驱动的前提下实现即插即用。

(5)电源供给

手持端采用微型锂电池作为电源，体积较小并可进行重复充电与使用。同时通过休眠、停机等操作降低系统功耗。

主机端通过主机USB接口供电，在长时间不使用情况下可进行休眠操作。

(6)智能识别率

Smartmouse智能手势输入系统需要流畅的对PC机进行操作，对手势的识别率有较高要求，同时能对现今比较流行的演示软件进行复杂操作。本设计中通过32位AVR单片机对接收到的手势数据进行处理，结合本团队自创的手势识别算法，识别出手势具有的意义。