基于fpga红外及可见光视频实时融合系统

《基于fpga红外及可见光视频实时融合系统》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、硕士论文基于FPGA的红外与可见光视频实时融合系统摘图像融合技术可以把多传感器对同一幅场景的信息集中到一幅图像中，从而集各传感器的优点于一幅图像中，充分的利用了多传感器间的较好互补性，有效的克服了单传感器的缺陷，可以获得针对同一场景更为可靠、全面和准确的信息，因此一直以来便是研究的热点技术之一【l】。目前硬件融合系统多采用FPGA+DSP的架构，这种架构充分运用DSP算法编写效率高的优点，但容易造成大量的资源浪费。针对上述问题，本文采用单个FPGA作为视频融合处理的核心器件，在提高资源利用率的同时，较好的实现了图像的实时融合。本文的研究工作主要集中在融合系

2、统硬件平台的设计以及配准融合算法的FPGA硬件实现。根据系统的实际需求，设计融合系统各功能模块电路的原理图并完成了硬件系统的PCB设计；在软件设计阶段，采用VHDL胱rilog语言编写相关的模块。通过12C总线配置ADV7180视频解码芯片的寄存器；根据PAL和NTSC制式的时序差别，设计了能自动识别这两种制式的模块；根据BT656视频格式完成视频解码模块设计；利用Matlab软件编写SIFT算法，对该融合系统的两幅同一场景图像进行特征点的提取并剔除错误的特征点对；通过仿射变换模型得到该融合系统的变换矩阵，把该矩阵送入FPGA处理模块；为实现两幅图像的硬件

3、配准，需要在FPGA内设计双线性插值模块；对于视频数据的存储，本文通过选用易于控制的S删并在两侧加FIFO模块进行缓冲来实现；在视频融合阶段，选用了易于硬件化实现的伪彩色融合、加权平均融合、灰度值选大以及拉普拉斯金字塔融合方法，并分析了各算法得到图像的特点。融合系统的显示采用通用的VGA显示器，需要在FPGA中编写能够进行VGA时序控制的模块。经过大量的时序修改和调试以及室内外环境的现场测试，该融合系统可以较好的实现红外与可见光视频的实时融合，同时也为后续更高效的融合算法开发提供良好的硬件平台。关键词：图像融合，双线性插值，L印laCiaJl金字塔，实时融

4、合Abstract硕士论文Imagemsiontechnologyofmulti·sensormsesthes锄esceneintoaIlimage，sodoest11eadVaIltagesofmultipleimages．7nlistecllllologym11yutilizedbettercomplementari够be撕eenthemulti-sensors，ea’ectiVelyoVercomemesinglesensordefectsandismorerelia_ble，comprehensiveaJldaccurate，ithaSbeenon

5、eofthehottestresearchtechnology．Tllehardwaremsionsystemo舭nusesmearcllitectureofFPGA+DSP，thisarcllitecturemakesgooduseofnle}li曲ef

6、ficienCyalgorithms嘶ttenofDSPbutislikelytocausea10tof、vaLsteofresources．Inresponsetomeseissues，Ⅱ1isarticleusesasin91eFPGAasthecoredeVice，whichirnproVesre

7、sourCeutilizationandacllievesgood如sione艉ct．111eresearch、Vorkfocusesonmedes啦of廿1ehardwareplatfo肌andthemsionalgorimmmodulesiIlFPGA．Accordingtotheneedofsystemwedesignmeschematicsa11dPCBboardofhardwareplatfoml．hlsoftwaredesignstage，thepaperusesVHDL／V

8、eriloglanguageandconfigurestheregi

9、stersofADV7180Videodecoderchipt11roughthe12Cbus；AccordingtotIletimingdi位renceofmePALa11dNTSC，thedesigncanautomaticallyidenti匆nlese铆ofo肌ats；111epaperdesi印stheVideodecodingmodulebaSedonthecompletionoft11eBT656videof-omats；TlleSIFTaJgoritlllnis州tteninMatlab，thenweextractfeaturepoimsa

10、Ildeliminatet11eerrorcharacterist