头部跟踪系统设计在虚拟听觉的应用

《头部跟踪系统设计在虚拟听觉的应用》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、上海大学毕业论文（设计）头部跟踪系统设计在虚拟听觉的应用学生：许仕鹏学号：指导老师：朱梦尧副教授专业：电子信息工程完成年月：2013年06月63上海大学毕业论文（设计）目录摘要3Abstract4第一章绪论51.1课题研究背景及意义51.2虚拟声音与头部跟踪51.2.1虚拟声音生成51.2.2头部跟踪6第二章头部跟踪系统设计72.1头部跟踪作用与原理72.2DCM互补滤波器设计82.2.1DCM矩阵82.2.2互补滤波器设计92.3IMU计算方程102.3.1旋转的表示方式102.3.2四元数112.3.3由传

2、感器数值与四元数132.3.4四元数微分方程152.4系统实现172.4.1芯片选择172.4.2硬件电路192.4.3软件实现22第三章3D声音渲染系统253.13D声音渲染原理253.2光线追踪算法263.3房间冲击响应计算313.3.1HRTF数据库介绍313.3.2房间冲击响应计算方法3363上海大学毕业论文（设计）3.4软件实现363.4.1系统构架363.4.2多线程声音卷积播放37第四章整体系统与效果404.1整体系统404.2效果说明41英文文献43英文文献中文翻译48总结52致谢53参考文献5

3、4附录56头部跟踪核心代码56imu.c563D声音渲染核心代码57hrtf.cpp57wav.c57Primitive.cpp58main.cpp59有关图纸62头部跟踪系统原理图6263上海大学毕业论文（设计）摘要虚拟听觉技术是继视频技术之后又一重要的人机接口。本课题实现了在虚拟环境中加入与虚拟场景相对应的三维虚拟声音，使收听者在虚拟环境中收听到的声信号逼近在真实环境声场中收听到的声信号，从而增强虚拟现实环境的逼真度和沉浸感。此设计中使用光线追踪的方式模拟声音的传播，通过与头相关函数数据库结合，计算出双耳房

4、间冲击响应，使之与原始声音卷积即可得到与房间真实情况相仿的三维虚拟声音。为了使听者真实感提升，本课题将使用捷联惯导方法实现的头部跟踪系统与虚拟听觉相结合，可以给用户提供更逼真的交互式听觉体验。本设计实现了一个半实时的包含头部跟踪的三维声音渲染系统，效果良好，头部跟踪系统每秒计算姿态400次，每秒上传50帧数据给计算机，精度1-2°，三维声音渲染部分可以连续播放声音，房间冲击响应每秒钟更新一次，声音方位感明显。关键词：头部跟踪，三维声音渲染，头相关函数，双耳房间冲击响应63上海大学毕业论文（设计）Abstract

5、Virtualauditoryisanotherimportanttechnologyinhumanmachineinterfacesincevideotechnologies.Thisdesigncombinedthe3dvirtualsoundrenderingwithavirtualscene,makingthelistenershearacousticsignalsthatapproximatetosoundinarealscene,therebyenhancingthefidelityandimmer

6、siveofthevirtualrealityenvironment.Thesystemusesraytracingtosimulatesoundpropagation,withthehead-relatedtransferfunction(HRTF)databasefromtheMITKEMARdummyheadmodelthesystemgeneratesthebinauralroomimpulseresponses(BRIR)ofthevirtualscene.Afterconvolvingtheorig

7、inalsoundwiththeBRIR,avirtualsoundthatissimilartothesoundinarealenvironmentcanbegenerated.Thisdesignalsocombinedtheheadtrackingsystemthatusestheinertialnavigationmethodwiththevirtualauditory,whichcanprovideuserswithamorerealisticinteractivelisteningexperienc

8、e.Thisdesignhasimplementedahalfrealtime3dsoundrenderingsystemwithheadtracking.Theheadtrackingsystemcalculatespostures400timespersecond,uploadsdata50framespersecondthroughBluetooth.The3Dsoundrend