基于上下文关联的多模态信息融合方法研究

《基于上下文关联的多模态信息融合方法研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、分类号——UDC密级——编号——基于上下文关联的多模态信息融合方法研究学位申请人姓名：垒整重申请学位学生类别：全鱼刿塑±申请学位学科专业：签煎堂指导教师姓名：墨至壶丛等文火论J己险—u山髭位f业么．钎学中士年硕⑥⋯MASTE⋯R'STHE哪硕士学位论文基于上下文关联的多模态信息融合方法研究论文作者：余艳丽指导教师：王学东教授学科专业：情报学研究方向：信息咨询与服务华中师范大学信息管理学院2013年5月⑩硕士学位论文MASTER’STHESISResearchaboutMultimodalInformationFusionMet

2、hodBasedonContextual么ThesisSubmiRedinPartialFulfillmentoftheRequirementFortheMasterDegreeinManagementBy妇妇nliPostgraduateProgramDepartmentofInformationManagementCentralChinaNormalUniversitySupervisor：WangXuedongAcademicTitle：ProfessorSignatureApprovedMay,2013⑧硕士学位论文M

3、ASTER’STHESIS华中师范大学学位论文原创性声明和使用授权说明原创性声明本人郑重声明：所呈交的学位论文，是本人在导师指导下，独立进行研究工作所取得的研究成果。除文中已经标明引用的内容外，本论文不包含任何其他个人或集体已经发表或撰写过的研究成果。对本文的研究做出贡献的个人和集体，均已在文中以明确方式标明。本声明的法律结果由本人承担。作者签名：／专、々苞≮i日期：伊·乡年学位论文版权使用授权书箩月如日／学位论文作者完全了解华中师范大学有关保留、使用学位论文的规定，即：研究生在校攻读学位期间论文工作的知识产权单位属华中师范大

4、学。学校有权保留并向国家有关部门或机构送交论文的复印件和电子版，允许学位论文被查阅和借阅；学校可以公布学位论文的全部或部分内容，可以允许采用影印、缩印或其它复制手段保存、汇编学位论文。(保密的学位论文在解密后遵守此规定)保密论文注释：本学位论文属于保密，在——年解密后适用本授权书。非保密论文注释：本学位论文不属于保密范围，适用本授权书。々夕。作者签名：侮专芭品导师签名：夕苫醺嘲：们I驴箩月乡日日期：加r；年厂月冲日本人已经认真阅读“CALLS高校学位论文全文数据库发布章程”，同意将本人的学位论文提交“CALLS高校学位论文全文

5、数据库”中全文发布，并可按“章程”中的规定享受嚣耋鍪萎；罗妻蔫毒竺耄于遄厦L旦兰生L旦二专焉点三粼作者签名：／示花云导师签名：∥彩掣日期：仞I垆f月哆日日期：加r；年岁月棚⑨硕士学位论文MASTER’STHESIS摘要互联网上聚集了海量的图文声像等各种类型的信息资源，它们具有实时的或者非实时的、确定的或者模糊的、互补的或者互斥的不同特征，这些特征要求信息服务系统为用户提供多模态信息以满足用户的信息要求。然而多模态信息的表达方式多样，关系复杂，若孤立对待则可能造成信息资源的浪费，因此有必要对这些信息进行融合，从而为用户提供更为丰

6、富准确的信息。现有的信息融合技术充分利用了多源信息的互补性和增益性，提高了信息处理的质量，但是对于当前互联网环境下的多模态信息集成服务而言，已有的信息融合技术存在一定的局限性：无法有效融合多模态信息中的多态语义：难以实现多模态信息融合中所需的协同性要求。本文借助高层语义的指导性以及多模态信息环境的上下文信息，通过协作学习方法建立多模态联合特征表示与联合空间，实现多模态信息特征层次融合和决策层次融合。文章研究的主要内容如下：第一章是绪论，主要介绍了多模态信息融合的研究背景及意义，信息融合的国内外发展状况和本文的主要研究内容。第二

7、章的研究内容为上下文信息，关联分析，信息融合中关联方法的研究与发展，以及融合进程中上下文信息的使用分析。第三章结合相关文献著作比较分析了多模态信息融合方法。第四章的研究内容为特征层次多模态信息融合过程，融合方法及其应用。第五章的研究内容为决策层次多模态信息融合过程，融合方法及其应用。第六章的研究内容为混合层次多模态信息融合过程，融合方法及其应用。第七章为本文的总结，包括本文的研究成果和展望。文章的研究方法主要有文献分析法，文献研究法等。本文详细分析了上下文信息在多模态信息融合中的应用，归纳总结了多模态信息融合方法，以及对不同融

8、合层次所涉及的融合方法在相关著作中的具体应用作了详细的调查研究。关键词：上下文；多模态信息；信息融合；信息融合方法⑧硕士学位论文MASTER’STHESISAbstractOntheIntemet,thereal'eamassiveofaudio-visualandother