本书从手势识别全局角度入手,通盘考虑识别过程中的每一个模块。在每个功能模块单独设计基础上,协调各个模块之间的关系,并zui大化系统的适用范围和手势识别的准确性。同时作为理论研究的测试平台,该系统为时间、空间复杂度较高的算法提供了测试接口。
近年来,手势识别技术在计算机交互技术中受到越来越多的重视,但是如何实现一个通用、基于普通摄像头、对外界环境变化鲁棒性强、无标记以及实时的手势识别系统还没有很好的解决方案。针对该问题,本书分别从手部检测、手部跟踪和手势识别三个方面对无标记手势识别中相关算法进行了研究,在研究过程中还考虑了手势识别系统的整体性和实用性问题。
在基于视频的手势识别中,手部跟踪往往是不可或缺的一步。通过手部跟踪可以得到手部的运动轨迹和运动方向等参数,这对于动态手势识别很重要。虽然通过上一节介绍的手部检测方法可以得到每帧视频中手部位置,但是当手部运动速度较快,或者有双手交错情况发生时,仅仅使用简单的手部检测然后再采用匹配的方法就会存在诸多的问题。首先是效率问题,由于手部检测是针对全画面按照一定规矩进行手部查找,因此它存在时间复杂度较高的问题,尤其是视频画面较大而手部相对画面较小时这种问题更加突出。其次是稳定性问题,由于手部检测采用的方法主要针对目标分割,而跟踪主要是针对目标匹配,通常它们采用不同的算法实现,跟踪算法更适宜于跟踪,而分割算法则并未考虑太多跟踪问题,通过分割算法来进行简单的匹配,其进行跟踪效果往往不如使用专门的跟踪算法稳定。
第1章引言
11研究背景
12研究意义
13国内外研究现状
131手部检测
132手部跟踪
133静态手势识别
134动态手势识别
14本文工作和主要贡献
15本文结构安排
第2章手部检测
21基于混合特征的手部检测
211手部颜色特征
212Haarlike特征
213Boost分类器
214融合肤色信息的Haar特征
215实验数据分析
22基于HOG的左右手识别
221梯度方向直方图(HOG)
222主成分分析 (PCA)
223特征分类
224实验与分析
23结论
第3章手部跟踪
31Meanshift简介
311核函数
312Meanshift向量形式
313Meanshift概率密度梯度证明
314Meanshift算法优缺点
32Meanshift跟踪算法
321目标特征提取
322相似度度量
323搜索策略
33混合特征手部跟踪SHS(SIFTHistShift )
331连续混合特征手部跟踪CASHS(Continuously Adaptive SHS)
34实验数据分析
35结论
第4章手势识别:静态手势
41SIFT(SIFTHistShift)特征向量
42尺度空间极值检测
421关键点定位
422关键点方向确定
423特征向量生成
424特征匹配
43基于多特征融合的手势识别
44实验结果和分析
45结论
第5章手势识别:动态手势
51预备知识:模糊集合和手势
511模糊集合
512手势的模糊性
513模糊集描述的手势
52基于FCRFs(Fuzzy based Condition Random Fields)的手势标注
521条件随机场CRFs(Condition Random Fields)
522模糊条件随机场FCRFs(Fuzzy based Condition Random Fields)
523实验和分析
524小结
53基于FLDCRFs(Fuzzy based Latentdynamic Condition Random Fields)的手势识别
531隐动态条件随机场LDCRFs(Latentdynamic Condition Random Fields)
532模糊隐动态条件随机场FLDCRFs(Fuzzy based Latentdynamic Condition Random Fields)
533实验和分析
534小结
54结论
第6章结论与展望
61研究内容总结
62下一步研究和展望
参考文献162