多通道手语信息融合方法的研究.pdf

《多通道手语信息融合方法的研究.pdf》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、分类号UDC密级多通道手语信息融合方法的研究李国臻指导教师王春立职称学位授予单位大连海事大学教授申请学位级别工学硕士学科(专业)计算机科学与技术论文完成日期2011年05月24日答辩日期2011年07月02日答辩委员会主席ResearchesonFusionMethodBasedonMulti-ChannelInformationofSignLanguageAthesisSubmittedtoDalianMaritimeUniversityInpartialfulfillmentoftherequirementsforthedegreeof

2、MasterofEngineeringSciencebyLiGnozhen(ComputerScienceandTechnology)ThesisSupervisor：ProfessorWangChunliMay2011舢8删7一舢6M9舢8删1脚Y大连海事大学学位论文原创性声明和使用授权说明原创性声明本人郑重声明：本论文是在导师的指导下，独立进行研究工作所取得的成果，撰写成博／硕士学位论文竺垒通道壬适篮息融金友选的婴窒==。除论文中已经注明引用的内容外，对论文的研究做出重要贡献的个人和集体，均已在文中以明确方式标明。本论文中不包含任何未加

3、明确注明的其他个人或集体己经公丌发表或未公开发表的成果。本声明的法律责任由本人承担。学位论文作者签名：域学位论文版权使用授权书本学位论文作者及指导教师完全了解大连海事大学有关保留、使用研究生学位论文的规定，即：大连海事大学有权保留并向国家有关部门或机构送交学位论文的复印件和电子版，允许论文被查阅和借阅。本人授权大连海事大学可以将本学位论文的全部或部分内容编入有关数据库进行检索，也可采用影印、缩印或扫描等复制手段保存和汇编学位论文。同意将本学位论文收录到《中国优秀博硕士学位论文全文数据库》(中国学术期刊(光盘版)电子杂志社)、《中国学位论文全

4、文数据库》(中国科学技术信息研究所)等数据库中，并以电子出版物形式出版发行和提供信息服务。保密的论文在解密后遵守此规定。本学位论文属于：保密口在——年解密后适用本授权书。不保密口(请在以上方框内打“√”)论文作者签名：苍阂稀!导师签名：互者互日期：为，J年6月妒日通过手势、表情和头部姿态等多种方式协同表达信息，并且相对于一般人的肢体语言来说更加有规律性，语义也更为丰富，因此可以作为拟人化人机交互的研究平台。目前对手语识别的研究主要是针对手部信息进行处理、建模和识别，但手语是以手形、手臂运动并辅之以表情、唇动及其它体势来表达思想的人体语言，在

5、手语的表达过程中，手势和表情起着关键作用，并且有实验表明，当只有手势而没有表情时，人所能理解的内容估计不超过60％【l】，因此本文在手语识别过程中对多个通道的手语信息进行融合识别，以期提高手语识别的准确率。具体而言，本文的主要研究工作主要包括：1．利用隐马尔科夫模型(HMM)技术分别实现对手势特征和面部表情特征的训练和识别，得到单通道手语信息的识别匹配概率；2．实现Bayes估计理论算法，并应用到手语信息的融合中，利用系统的先验知识及各通道识别情况来给出先验概率，并将各通道识别匹配概率作为条件概率进行决策级融合，从而得到融合后的识别结果；3

6、．实现D．S证据理论算法，并应用到手语信息的融合中，分别将面部表情识别匹配概率和手势识别匹配概率作为单独的数据通道，利用D．S证据理论对两个通道数据进行决策级融合，从而得到融合后的识别结果；4．设计多通道手语信息融合系统的软件架构，实现了一个通用性较强、可扩展的手语信息融合的原型系统。关键词：HMM模型；融合：Bayes估计理论；D．S证据理论英文摘要ABSTRACTSignlanguage，asakindofmoststructuredgesture,isregardedasanindispensablemeansofeverydayco

7、mmunicationforthedeaf．Incommon，Signlanguageisusuallyexpressedthroughgestures，facialexpressions，headposeandanyothermeans．Moreover，relativetothecommonpeople’Sbodylanguage,Signlanguageismoreregularly，andthesemanticsofsignlanguageismoreabundant，SOitisconsideredasaresearchplatf

8、ormforhuman—computerinteraction．Afteranalysisthecurrentresearchstatus，itisfoundthattheres