应用办公生活信息教育商业
投稿投诉
商业财经
汽车智能
教育国际
房产环球
信息数码
热点科技
生活手机
晨报新闻
办公软件
科学动态
应用生物
体育时事

基于3G技术H。264无线视频监控系统设计方案介绍图文

  本文针对网络视频监控设备的实际应用需求,融合视频压缩、嵌入式系统无线通信等新技术,设计实现了基于3G技术的H。264无线视频监控系统。由于H。264标准中码率控制策略过于强调通用性而没有考虑无线网络的误码率高、抖动性大以及嵌入式终端处理能力有限的因素,而本系统在实现了H。264标准中码率控制策略的基础上进行了优化,增强了系统的稳定性。
  1视频监控系统总体结构
  视频监控系统由视频拍摄节点、视频采集控制模块、网络代理模块和观看终端组成。其中,拍摄节点为高精度摄像机,负责采集原始视频;视频采集控制模块由采集卡以及控制软件组成,采集卡安装在嵌入式主板上,把摄像机采集的原始视频数据压缩成H。264格式的码流并回调给系统处理;控制软件运行在嵌入式Linux系统上,通过采集卡的驱动程序获取压缩后的H。264格式的码流,并控制与网络代理模块的连接以及数据和命令的传输及响应,如将压缩后的码流传输给网络代理,对某个摄像机通过串口发控制命令;网络代理模块负责与视频观看终端进行网络连接的管理以及控制命令和视频数据的传输;观看终端为主流的基于Symbian操作系统的智能手机。
  2系统硬件构成及主要模块
  手机视频监控系统的硬件环境由摄像机、采集卡、嵌入式主板以及智能手机组成。摄像机使用的是SONYFCB2EX480CP;嵌入式主板使用的是威盛EPIANR系列Nano2ITX嵌入式主板,型号为EPIANR10000EG;智能手机使用当前主流的基于Symbian操作系统的手机诺基亚N95。系统框图如图1所示,拍摄节点为可控制摄像头。下面主要介绍视频采集控制模块和网络代理模块的功能及构成。
  2。1视频采集控制
  视频采集控制模块主要负责视频的采集、压缩和控制命令的响应,采集视频时主要负责采集卡的启动、初始化和各种控制操作,同时也负责摄像头相关的一些控制操作。具体的软件构架如图2所示。其中:NCCMain模块负责管理各个子模块,打开Socket监听7020端口,当有从网络代理模块的连接请求时,则响应并接收数据;数据处理模块负责处理各种命令(如视频的开启和焦距调整命令),并对这些命令发送确认消息进行响应;RS2232串口线控制模块通过RS2232串口线控制摄像机的拍摄焦距,以响应焦距调整命令;板卡采集管理模块主要负责板卡的初始化、采集信道的开启、H。264各种参数(I、P帧的间距、量化参数、编码格式(CIF、QCIF)等)的设置、回调函数的设置,与代理进行连接从而向代理发送视频流等操作。该模块基于采集卡开发包,通过接口调用厂商提供的驱动程序来实现各种功能。
  该模块的工作流程如下:
  a)调用厂商提供的驱动程序设置视频采集的初始参数;
  b)启动网络管理程序,打开套接字监听7020端口,当收到连接请求便响应连接请求并接收命令,收到命令后调用命令处理模块,根据不同命令进行不同处理;
  c)当收到启动视频命令,向代理发连接请求,请求响应后连接建立,通过该连接向代理发送视频数据,并将连接描述符保存到转发表中;
  d)当收到视频关闭命令,关闭与代理的视频传输连接,将转发表对应的表项清空;
  e)当收到焦距调整命令后,调用RS2232串口控制模块设置摄像头的拍摄焦距,然后与网络代理监听的7005端口建立连接,将当前的焦距级数信息报告给网络代理。
  2。2网络代理
  网络代理模块主要负责响应手持设备的连接请求和控制命令,并向其发送视频数据,它又包含以下子模块:
  a)连接请求监听模块。该模块作为一个单独的线程,监听9000端口,如收到手持设备的代理信息请求命令则回送一个确认消息。
  b)控制命令处理模块。它负责处理手持设备发来的各种命令,并向视频采集控制模块发送对应的处理命令;接收视频采集控制模块的命令响应,并对手持设备的命令作相应的响应。
  c)视频数据收发模块。当接收到来自视频采集控制模块的H。264视频码流便将此视频数据流转发给发出点播命令的手持设备。网络代理模块的结构关系如图3所示。
  2。3视频监控系统通信流程
  无线视频监控系统的总体流程如下:
  a)手持设备接入网络。手持设备通过3G无线网络跨过移动网关接入有线网,与视频服务网络代理交互,注册自己的信息,并从代理节点得到网络中采集设备的信息。
  b)进行视频浏览操作。手持设备接入网络后,可根据需要进行视频浏览,用户选定要进行浏览的节点和摄像头,向其发送控制命令,开启摄像头进行采集,得到的视频数据通过视频服务网络代理经3G网络传输给手持设备,在手持设备上进行观看。
  c)进行视频控制操作。手持设备获得拍摄节点视频后,可根据需要对拍摄节点进行控制以获取更感兴趣的视频区域,如用户对拍摄节点更远处的场景感兴趣,可发送放大指令,让采集视频的摄像机向远处变焦;用户也可以根据自己的需要发送摄像机或节点切换指令给代理,代理进行响应并按用户需求启动相应的摄像机。
  3码率控制优化算法
  在H。264标准中,码率控制是根据当前的带宽和缓冲区使用情况来动态地调节量化参数等系数实现的。考虑到移动终端的处理能力差异大以及无线网络误码率高抖动大等因素,本系统在实现了H。264标准中码率控制策略的基础上进行了优化,即在码率控制过程中,不仅考虑到带宽和缓冲区的使用度,还结合终端的视频处理能力以及无线网络的状况,动态地调节编码器的参数,此外,增加了跳帧策略,并结合本系统优化了跳帧策略,从而达到更好的码率控制效果。
  3。1移动终端反馈信息优化
  H。264标准中,码率控制根据式(1)计算第i个z帧组的第j帧配比特数:
  其中:u(ni,j)表示编码第i组第j帧时信道可获带宽;Fr表示预定帧率;Tbl(ni,j)表示第i个帧组编码第j帧时目标缓冲区的使用量;Bc(ni,j)表示编码完第j1帧时缓冲区的占用量。
  式(1)强调通用性而没有对无线环境以及嵌入式设备进行相关处理。本文结合无线网络误码率高以及移动终端处理能力弱的特点对标准中算法进行了优化。首先移动终端统计误码率和丢包率,分别记为Ei,j和Li,j,并设定一个值Mi,j表示移动终端反馈的其缓冲使用度。移动终端定时把几项数据反馈给网络代理模块,网络代理根据移动终端的反馈信息重新对网络带宽可用度进行评估并对原算法公式进行调整
  其中:BWij表示根据移动终端反馈信息获取的当前带宽可用度;gamma;i,j表示移动终端承载能力因子;beta;1、beta;2、beta;3和beta;4为加权系数。在帧组层码率控制计算第j帧分配的码字时把原算法的式(1)调整为式(4)。
  3。2跳帧
  为了避免溢出,当缓存区内比特数超过缓存区空间的85时,跳过当前帧而不对其进行编码,直到其低于临界值后再进行编码。在H。264码率控制算法的第二步中,根据目标缓存使用量、帧率、可用带宽和实际缓存占用度以及当前编码图像的复杂度,可以由下式计算得到第i个帧组第j帧的目标比特数,计算式如下:
  其中:。f(ni,j)表示考虑剩余比特数和图像复杂度后应该增加的比特数;gamma;为一常数,一般取值0。5,当没有B帧的情况下取值0。25;。f(ni,j)与式(1)的意义相同。本文利用该公式结果进行码率控制的同时,优化跳帧策略,即当预测的码率加上当前缓冲区使用量大于预定阈值Kmax(目前定位为95)时,可进行主动丢帧处理,即如果不是i帧,就将其丢掉,不作编码处理。
  当收到移动终端的反馈值M大于85时,同样采取跳帧策略,避免造成移动终端缓冲区不够的丢帧现象发生,因为丢帧丢的如果是i帧,会影响后续视频帧的重建。该策略可以通过跳过一些复杂度较低、对于整个序列而言并不重要的图像来为后面复杂度较高、不能丢失的图像留出缓存区空间。
  4测试结果
  针对本文的无线视频系统和优化算法,主要测试系统总体性能和码率控制优化的效果,码率控制的结果主要以传输比特数和PSNR值来衡量。在接收端程序中加入了iBufSizeTotal变量,用来统计发送的数据大小的总和;在拍摄端加入了编码启动时间iTimeStart和编码结束时间iTimeEnd,并加入了变量iFrameCount来统计共编码了多少帧。针对计算码率控制的效果,计算码率控制算法优化前和优化后平均每秒的输出比特数(码率),计算式如下:
  针对编码优化的效果计算出编码器优化前后编码的平均每秒编码帧数(帧率)
  在进行系统的测试时,将拍摄节点放置在以下四种背景环境中:
  a)纹理简单,运动缓慢;
  b)纹理比较丰富,运动平缓;
  c)纹理丰富,运动中等;
  d)纹理复杂,运动剧烈。拍摄的摄像头采样模式均设为YUV的420格式。
  表2给出了标准中原码率控制算法和本文提出的算法对于六种标准序列在不同目标码率和帧率下的实际编码码率和平均重建图像的峰值信噪比PSNR值的测试结果;表3给出了原标准算法和本文算法对应的比特率偏移与平均PSNR值差值比较。
  本文提出的算法可以更为合理地控制码率,六个序列中四个的峰值信噪比原算法有一定提高,表明本文提出的图像复杂度因子是合理有效的。
  为了进一步对比改进算法的效果,本文将视频序列每帧的PSNR值通过坐标图的形式给出,图中横坐标为帧的编号,纵坐标为对应的PSNR值。本文中给出了具有mobile(码率限制较高比特128kbps)的视频序列PSNR图,如图4所示,即限定码率分别为32kbps、64kbps和128kbps的典型视频。从图4中可以看出,改进算法的PSNR值波动相对较小,从而在视觉上不会感觉到明显的图像质量变化,这就保证了图像质量的平稳过渡,具有较高的主观视觉质量。
  5结语
  本文设计并实现了基于3G和H。264技术的无线实时监控系统,并结合无线传输以及智能手机处理能力弱的特点,对H。264标准中码率控制策略进行了优化。

如何利用百度云Windows版管家上传文件夹利用百度云Windows版管家上传文件夹方法:1)点击ldquo;上传rdquo;选择文件夹,然后点击【存入百度云】。2)将需要上传的文件夹拖拽到云管家界面里。……小米air3pro支持防水吗防水等级多少小米air3pro支持防水功能吗,防水级别是多少,防水性能怎么样呢,相信有很多用户都有这样的疑问,接下来小编就带来了最新解答!支持防水吗小米Air3pro支持防水,……制冷机的原理是什么制冷机有哪些种类简介说到制冷机也许你会感到陌生,其实制冷机在我们生活中非常常见。制冷机是将具有较低温度的被冷却物体的热量转移给环境介质从而获得冷量的机器,制冷机在工农业和日常生活中被广泛使用。下面……我的回收站不见了怎么办图解如今电脑的普及范围已经很广泛例了。相信每个人都非常熟悉电脑吧,因为可以说每个人都有用过电脑。众所周知,每台电脑都是有回收站的,而且会在我们电脑桌面中显示。而我们删除的电脑文件会……iphone4s升级ios7详细教程分享详解iPhone手机所使用的系统一直都是ios系统,这个系统一直都在升级,从ios3到ios6的升级,都赢得了广泛的认可。Ios7与之不同,它是的升级跨度很大,我们单单从全新的图标……怎么找回永久删除文件找回永久删除文件方法详细步骤怎么找回永久删除的文件?被永久删除的文件要怎么恢复呢?在电脑上难免会碰到一些删除文件的情况。但是电脑上删除的文件大部分都会被删除到回收站里面。可以在回收站里面找回,如果在回收站……Win10运行魔兽世界等游戏时出现卡顿怎么办玩《魔兽世界》等游戏时会偶尔卡顿(掉帧、掉线)的问题。这不是网速的问题,也不是电脑配置低、驱动程序旧,而是Windows10下某些系统自带的功能在捣乱:ldquo;游戏DVRr……ape格式是什么?ape文件如何打开?ape是什么文件?也许现在见到的ape文件不是那么多了,但大家应该知道ape就是CD中听到的音乐,这是一种非常先进的音频压缩格式,下面教大家ape文件如何打开。ape是什……中兴N880E通话过程中有回音如何处理中兴N880E通话过程中有回音处理方法:请在通话过程中将音量适当调低。确认对方是否使用了扬声器,耳机,或者其他车载设备,如果是,请对方切换到手机通话。另外当地网络情况也可能导致……佳能IXUS140支持自拍吗佳能IXUS140不支持自拍,2或10秒延时。佳能IXUS140配备一块3英寸46万像素的LCD屏幕,采用了金属材质的机身,表面经过了磨砂处理,手感细腻并能防止指纹的产生……华硕N43s怎么样华硕N43s最大亮点在机身外部的设计上,华硕请来周杰伦作为首席设计师,亲自操刀华硕N系列周杰伦特别版的外观设计,整机顶盖上的环纹设计灵感源自于青花瓷的工艺制作,并融合音符、曲谱……oppor15怎么电视投影首先确保电视和手机处于同一个WiFi网络内;在电视中打开【设置】找到Miracast功能,记录下电视的名称;在手机打开【设置】【其他无线连接】【多屏互动】,开启开关后,选中电视……
索尼LT26i能玩麦克大冒险吗索尼LT26i能玩麦克大冒险。麦克大冒险游戏简介麦克大冒险是一款画面非常出色的物理益智类的游戏大作,它让你充当外星球上的消防员,来扑灭那些因为陨石儿造成的火灾,还算……DARPA空战进化计划今年有望进行实际飞行测试美国国防部高级研究计划局(DARPA)有一个合作的空战自主计划,最近几个月取得了重大进展。这个项目被称为空战进化(ACE),DARPA已经宣布它已经完成了第1阶段的一半。在迄今……诺基亚800支持扩展储存卡吗诺基亚800没有扩展卡功能,不支持扩展储存卡。诺基亚808拥有4英寸ClearBlackAMOLED显示屏,采用Gorilla大猩猩玻璃材质,分辨率640x360像素,支……研究发现白蘑菇提取物能够抑制小鼠前列腺癌的发展据外媒报道,科学家们继续寻找越来越强大的药物来对付癌细胞和抑制肿瘤生长,而大自然也在继续为他们提供了丰富的灵感来源。最新的例子来自白蘑菇(whitebuttonmushroom……有谁知道视频剪辑软件pr所有快捷键操作pr的快捷键主要有Timeline时间线上操作;ctrla:全选;ctrlc:拷贝;ctrlv:粘贴;ctrlshiftv:将拷贝的剪辑适合粘贴到其它剪辑中;ctrlaltv:……马斯克希望最快在7月将一艘星际飞船原型送入轨道据外媒CNET报道,SpaceX公司将目标锁定在7月,希望在通往火星的道路上迈出下一大步。SpaceX首席执行官埃隆middot;马斯克表示,他希望届时能发射一艘星际飞船原型,……SpaceX与NASA共享信息,防止卫星碰撞据报道,为了组建星链(Starlink)网络,SpaceX近来发射了大量卫星。为确保卫星不会彼此碰撞,美国时间周四,NASA与SpaceX签署了新协议,以求解决问题。根据……点外卖怎么备注外卖APP已经成为我们生活必备工具,在点外卖的时如果有菜品口味要求或者送达地点的要求需要和店家或外卖员说的都可以通过备注实现,具体操作如下:1。以饿了么为例,登录相应账号……科学家重新编程的皮肤细胞恢复中风小鼠的运动功能科学家们继续在细胞重编程领域取得新的突破,这是一个新兴的医学研究领域,其中一种类型的细胞被重新训练以完成另一种类型的角色。俄亥俄州立大学(OSU)的一个团队利用这项技术修复了受……研究员开发出从紫玉米中提取出更多有益色素的新工艺据外媒报道,你在商店里看到的紫色玉米片并不只是噱头玉米中的紫色色素实际上对健康有益。现在,研究人员发明了一种可以从通常被丢弃的玉米芯中提取更多紫色色素的新方法,其用于多种用途。……360手机质量怎么样360手机哪款好国内一时之间市场上出现了众多优秀的手机,其中360做的智能手机性价比就是非常高的。因为360的智能手机是最近几年才进入手机行业中,它为了可以获得市场占有率,所以360的智能手机……诺基亚808如何保存附加的照片或其他文件诺基亚808保存附加的照片或其他文件方法如下:1、在会话中,选择包含文件的信息。2、选择并按住所需的文件,然后选择保存,再选择存储器。文件保存到其相应的应用程序(例……
友情链接:中准网快好知易事利快百科快传网七猫云快生活中准网快软网聚热点文好找快好找