唇读识别研究与实现

《唇读识别研究与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、？翊Ｊ；３．．＇＝哨学校代码：１０００４密级：公开乂攀ＢＥＩＪＩＮＧＪＩＡＯＴＯＮＧＵＮＩＶＥＲＳＩＴＹ硕：ｔ专业学位论文唇读识别研究与实现＇别邏作者姓名盈广明省．＾王程领域电子与通信王程祠指导教师阮秋埼教授培养院系计算机与信息技术学院—二零－六年五月ＭＢ如义道乂攀硕±专业学位论文唇读识别研究与实现ｓｅａｒｃｅｍｅｎｔａｔ－ＲｅｈａｎｄＩｍｌｉｏｎｏｆＬｉｐｒｅａｄｉｎＲｅｃｏｎｉｔｉｏｎｐｇｇ作者；盈广明导师：阮秋埼北京交通大学２０

2、１６年５月学位论文版巧使用授权书本学位论文作者完全了解北京交通大学有关保留、使用学位论文的规定。特授权北京交通大学可Ｗ将学位论文的全部或部分内容编入有关数据库进行检索，、、。提供阅览服务，并采用影印缩印或扫描等复制手段保存汇编Ｗ供査阅和借阅同意学校向国家有关部口或机构送交论文的复印件和渡盘。学校可Ｗ为存在馆际合作关系的兄弟商校用户提供文献传递服务和交换服务。（保密的学位论文在解密后适用本授权说明）学位论文作者签名了导师签名：签字曰期签字曰期：：７＾４年／月ｖ／曰＞４年６月曰＾１学校代码：０００４密级：公开

3、北京交通大学硕±专业学位论文唇读识别研究与实现Ｒｅｓｅａｒｃｈ－ａｎｄＩｍｐｌｅｍｅｎｔａｔｉｏｎｏｆＬｉｒｅａｄｉｎＲｅｃｏｎｉｔｉｏｎｐｇｇ作者姓名；盈广明学号：１４１２５１６２导师姓名：阮秋埼职称；教授专业学位类别：电子与通信工程学位级别：硕±北京交通大学２０１６年５月致谢本论文是对我研究生期间完成工作的总结与汇报，是在导师阮秋巧教授的悉必指导下完成的。本文从选题、撰写到最终顺利完成，老师都给予了大虽的指导和帮助。他广博的学识、严谨的治学态度、对事业的执着精神和乐观、豁达的人

4、生观，令我钦佩，也始终是我学习的榜样。在此向阮老师表达我的感谢和敬意。感谢袁保宗、、唐晓芳安高云、符蕴芳等老师，他们为实验室营造更好的科研环境和学习氛围做出了很大的贡献，在此表示对他们的谢意。同时还要感谢实验室常春云、刘洋、李飘月、李倩等同学，他们无私的协助我进行数据库的录制，并在我研究生学习和生活中都提供了热情的帮助，在此向他们表达我的感巧之情。最后，十分感谢我的家人和朋友，他们的支持和理解让我能专必在学校完成学业。不论在前进的道路上遇到什么样的挫折，他们永远是我坚强的后盾和前行的动力。北京交通大学硕±专业学

5、位论文摘要；摘要＂＂＂’’唇读是指通过观察说话人在发音过程中唇部的变化，读出或者部分读出其所说的内容。而计算机唇读是指通过建立唇读模型和分析发音过程中唇部运动参数，定量地处理唇动信息从而对视频中的序列图像进行分类和识别，或者辅助语音识别来提商语音识别率。对唇读的研究将对耳聋患者、执法机构Ｗ及咱杂环境中的工作者具有实际应用意义。本文主要研究单视觉通道下基于孤立字的唇读系统，在暦部分割、特征参数选择和提取Ｗ及唇读识别Ｈ个方面展开研究；，论文的主要工作如下（１）唇部分割是唇读的核也部分。本文基于ＢＰ神经网络和基于Ｌａ

6、ｂ色彩空、间两种方法进行唇部分割，并对两种方法在分割时间分割效果、分割方法复杂，，基于Ｌａｂ空间的唇部分割不仅方法简单度方面做出比较实验结果表明，处理。速度快而且分割效果也较好，适合曆读系统对视频处理时实时性的要求（２）在盾部特征参数选择时，本文选擇外唇商度、巧角间距离、张开嘴面积为特征参数。在曆部跟踪过程中提取出Ｈ个特征参数值，通过研究特征参数曲线变化，提取出发音过程中的有效部分，进而提取出１０顿关键巾贞，从而解决了由于一说话速度不均匀造成时间长度不致的问题。（３）盾读识别模块，本文采用基于神经网络及基于相关系数的相

7、关匹配法两种方法进行唇读的识别，二者的识别率分别为拍．５％和８１．２５％。经对比分析识别结果一，后者不仅方法简单、易操作而且在识别过程中不需要像神经网络样需要太多训练样本，只巧将输入数据与数据库中数据分别作相关，求取最大相关系数即可。（４）唇读巧据库是盾读研究的基础。由于国内可共孚的汉巧巧据库非常少，本文自建小型数据库。在语料的选择上根据韵母单独成音，声母只能辅助韵母发音的特点，采用在２４个韵巧基础上相应加上声母的方法构成语料表。同时本文设计了一个盾读识别系统，该系统的不仅可Ｗ实现对人脸及巧部定位而且可Ｗ展示唇部巧

8、踪效果，在识别阶段可Ｗ检測并输出视频中多个孤立字。关键词：唇读；巧部分巧；盾部巧踪！巧部特征：巧读识别