资源描述:
《基于linux下的音视频采集与传输》由会员上传分享,免费在线阅读,更多相关内容在工程资料-天天文库。
1、摘要:在LINUX下实现对音频和视频的采集,并编写Socket程序将采集到的音频文件在两台主机的进程之间进行传输。关键字:LINUX音频、视频釆集Socket传输项目简介木项目将分成三部分来分别实现,分别为Linux下视频的采集、Linux下音频的采集、Linux下Socket传输的实现。下面将分别介绍各部分具体的实现过程。Linux下视频采集1、背景介绍V4L,其全称是Video4Linux(VideoforLinux),是在linux内核中关于视频设备的API接口,涉及开关视频设备、采集并处理视频图像信息J4L从2.1.x
2、版本的内核中开始出现。现在出现Video4Linux2(VideoforLinuxTwo),简称V4L2。很显然,他是V4L的改进版,修复了第一代的部分设计bug。从2.5.x开始,V4L2就被集成到内核里面去了。尽管如此,还是有一部分设备的驱动不支持新版木的V4L2,所以,有吋候我们会看到V4L跟V4L2同吋出现在代码里面。Linux系统屮,视频设备被当作一个设备文件來看待,设备文件存放在/dev目录下,完整路径的设备文件名为:/dev/videoO・2、视频采集基本步骤视频采集基本步骤流程:打开设备一>检查和设置设备属性一
3、>设置帧格式->设置一种输入输岀方法(缓冲区管理)一>循环获取数据一>关闭设备。其中打开视频设备非常简单,在V4L2中,视频设备被看做一个文件。使用open函数打开这个设备,打开这个设备有两种模式即阻塞模式和非阻塞模式。主要实现代码为:①用非阻塞模式打开摄像头设备代码为intcameraFd;cameraFd=open("/dev/videoO",O_RDWR
4、O_NONBLOCK);②用阻塞模式打开摄像头设备,上述代码变为:cameraFd=open("/dev/videoO",O_RDWR);应用程序能够使用阻塞模式或非阻
5、塞模式打开视频设备,如果使用罪阻塞模式调用视频设备,即使尚未捕获到信息,驱动依旧会把缓存(DQBUFF)里的东西返回给应用程序。3、Linux视频设备驱动常用控制命令使用说明设置视频设备展性通过ioctl来进行设置,ioctl有三个参数,分别是fd,cmd,和parameter,表示设备描述符,控制命令和控制命令参数。Linux视频设备驱动接口V4L2支持的常用控制命令如下:①控制命令VTDTOC_ENUM_FMT功能:获取当前视频设备支持的视频格式。参数说明:参数类型为V4L2的视频格式描述符类型structv412_fmt
6、desc返回值说明:执行成功时,函数返回值为0;structv412_fmtdesc结构体中的.pixelformat和.description成员返冋当前视频设备所支持的视频格式;使用举例:structv412_fmtdescfmt;mcmset(&fmt,0,sizeof(fmt));fmt.index=0;fmt.type=V4L2_BUF_TYPE_VTDE0_CAPTURE;while((ret=iocti(dev,VIDIOC_ENUM_FMT,&fmt))==0){fmt.index++;printf(z,{pi
7、xelformat=''%c%c%c%c'',description二''%s''}",fmt.pixelformat&OxFF,(fmt.pixelformat>>8)&OxFF,(fmt.pixelformat>>16)&OxFF,(fmt.pixelformat>>24)&OxFF,fmt.description);}①控制命令VIDIOC—QUERYCAP功能:查询视频设备的功能;参数说明:参数类型为V4L2的能力描述类型structv412_capability;返回值说明:执行成功时,函数返回值为0;函数菽行成
8、功后,structv412_capab订ity结构体变量中的返回当前视频设备所支持的功能;例如支持视频捕获功能V4L2_CAP_VIDE0_CAPTURE>V4L2_CAP_STREAMING等。使用举例:structv412_capabilitycap;iret=ioctl(fd_usbcam,VIDIOC_QUERYCAP,&cap);if(iret<0){printf("getvidieocapabi1ityerror,errorcode:%d〃,errno);return;}执行完VIDIOC_QUERYCAP命令
9、后,cap变量中包含了该视频设备的能力信息,程序中通过检查cap中的设备能力信息来判断设备是否支持某项功能。②控制命令VIDIOC_S_FMT功能:设置视频设备的视频数据格式,例如设置视频图像数据的长、宽,图像格式(JPEG、YUYV格式);参数说明:参数类型为V4L2的视频