您现在的位置:智能制造网>技术首页>分析标准

基于ARM的嵌入式MPEG-4远程网络监控系统的设计与实现

2008年02月27日 09:12来源:浙江启扬智能科技有限公司 >>进入该公司展台人气:1207

摘 要:本文详细介绍了基于arm的嵌入式mpeg-4远程网络监控系统的视频采集、压缩、传输和系统控制等方面的设计,提供了基于tcp/ip协议的c/s软件结构和多线程通信的设计与实现方法。
关键词:嵌入式;mpeg-4;s3c44b0x;多线程
在远程监控系统的应用中,往往要求监控中心的主机可以同时接收一路或多路监控数据,并且可以同时发送一路或多路的控制指令。因此,如何在有限带宽的前提条件下,将多个现场的监控数据方便、地通过计算机网络传送到监控主机上,是该类系统要解决的主要问题。
系统整体结构
为了实现一个基于tcp/ip网络的嵌入式远程数字视频监控系统,本设计的系统结构如图1所示。
图1中,摄像机通过rs-232接口受外界控制,控制命令为一系列的ascii码,可以调整摄像头的焦距和控制云台的转动。嵌入式硬编码板也有一个rs-232接口,可通过它设置信源制式(pal/ntsc)、编码亮度、编码色度、音频速率、编码音量和编码速率。编码板与网络服务器集成到一个机箱里,编码板通过pci接口向网络服务器输出数据。网络服务器有多个rs-232接口,分别与摄像机和硬编码板上的rs-232接口相连。
播放设备由嵌入式硬解码板和电视机组成。解码板采用速率自适应方式设计,解码速率自动匹配远端编码器的编码速率。解码板和网络服务器同样集成在一个机箱里。该系统还实现了软解码方式,在这种方式中,播放设备由一台安装了视频采集卡的pc机构成,其上运行解码软件和媒体播放器,通过pc机的显示器和音箱输出图像和声音。
系统的记录设备由硬盘录像机构成,安放于显示点一侧,用来存储系统图像。
控制台由一台运行windows2000操作系统的pc机实现,pc机上运行客户端的控制软件。管理服务器也由一台运行windows2000操作系统的pc机实现,pc机上运行系统管理软件。在简化的系统实现中,管理服务器和控制台可以在同一台pc机上实现,在这种情况下,管理软件和控制软件运行在同一台主机上,但仍然通过网络接口通信。
系统硬件设计
网络服务器是系统硬件的核心部件,它由运行嵌入式操作系统的嵌入式计算机构成,在嵌入式操作系统之上运行着系统的核心软件。
网络服务器采用的是基于arm 内核的cpu——s3c44b0x。该芯片是一款基于arm 7tdmi risc芯片。它一方面具有arm处理器的:低功耗、高性能等优点;同时又具有丰富的片上资源,非常适合嵌入式产品的开发。
mpeg-4多媒体编码芯片则采用韩国intime公司生产的ime6400,该芯片提供了丰富的外围硬件接口:支持ccir601建议的16bit视频*接口、32bit数据、81mhz的sdram数据总线接口、i2c总线接口、i2s外部音频/pcm编码器/dsp接口以及灵活的主机接口,可以支持多种类型的cpu。
图2简单介绍了mpeg-4硬件视频压缩处理的结构和网络接口。mpeg-4视频采集压缩模块以ime6400芯片为核心,完成对标准视频信号(pal或ntsc信号)的a/d转换、mpeg-4压缩以及与s3c44b0x之间的通信功能。图2中视频解码adc把从摄像头输入的模拟视频信号转化为数字视频信号,然后进行编码预处理,即把视频解码输出的ccir601格式的信号转化为编码器可以处理的cif或qcif格式,然后再进行mpeg-4压缩编码。s3c44b0x上的软件则通过总线接口单元来控制编码器的参数设置和读取编码压缩后的码流数据。视频数据处理模块包括以下功能单元:以bt829为核心的视频adc单元;以ime6400为核心的mpeg-4视频压缩单元;以s3c44b0x 为核心构成的控制逻辑和总线接口单元。总线接口单元是视频数据处理模块与s3c44b0x进行交互的通道,可以和主机进行视频码流和控制数据的交换。控制逻辑是视频采集压缩模块的核心,它控制并协调各模块工作,提供控制信号,通过指令实现系统各模块所需要的选通、缓冲、读/写使能、数据总线和地址总线的切换等等。
镜头云台控制是通过s3c44b0x上的rs-232口进行的,允许用户根据自己的要求调节系统。用户可以通过调节镜头的景深、焦距以及光圈来调整图像质量,还可以通过云台的上下左右调节来获取不同角度的图像。由监控中心的客户机端软件通过socket网络接口,把调整信息发送给服务器端,服务器接收到控制指令后,进行指令识别,然后向对应的rs-232口发送指令去控制云台,完成调整任务。
视频数据发送、指令控制模块的设计与实现
监控现场主机通过视频数据发送模块,将现场采集到的视频流数据经过编码后,以ip 组播的形式通过计算机网络发送出去。对于发送来的视频数据,运行在监控中心主机端的视频数据接收播放模块一方面可以将其保存起来,作为资料库便于以后查询及回放;另一方面还可以实时播放出来。
本系统的软件结构采用了客户机服务器结构,两端通过网络建立tcp/ip连接,按照自定义的数据通信协议交换数据,完成数据通信和系统控制功能。监控中心的客户端向服务器端申请建立连接,服务器监听到连接请求之后,和客户端建立socket连接,客户端向服务器发送控制信号,服务器端向客户端发送视频码流。
服务器端软件运行在s3c44b0x上,软件设计的主要思想如下:读取线程、发送线程和控制线程之间的同步,防止有限资源的浪费。
为了充分利用cpu计算能力,提高系统的整体性能,在该系统中采用多线程技术实现任务的调度。
考虑到监控中心主机要同时监控多个现场,需要加入多个组播组的情况。我们在设计系统时要求监控中心端在接收视频数据前应向相应的监控现场发送数据请求。为此,我们要建立两个通讯通道:一个是控制通道,一个为数据通道。控制通道用来在发送端和接收端之间建立会话,包括发送一些数据请求和确认控制等信息。接收端在接收视频流数据前先向相应的发送端发送数据请求,发送端在接收到数据请求后向接收端发回相应的ip 组播地址和端口,接收端则加入该组接收视频流数据。为了保证这些控制信息准确无误地到达对方,对于控制通道我们选择可靠性较高的tcp 协议。数据通道用于视频流数据的通信,我们选用vxworks ip组播组来实现。这两个通讯通道互不相关,各自执行自己的任务。
视频数据发送模块的设计
在视频传输中,服务器端要求码流读取和发送互不干扰,避免读取和发送相互等待或者相互冲突的情况出现。同样,在客户端解码和接收也存在这个关系,我们可以采用任务间的通信功能来协调多个独立任务间的活动。vxworks提供了一套丰富的任务间通信机制,包括共享内存、信号量、消息队列和管道等等。任务间通信zui直接、*的方法是访问共享数据结构。由于所有vxworks任务共存单一的线性地址空间,在多个任务间共享数据结构是非常容易的,任一程序中定义的各种类型的全局变量,都可以被所有任务直接访问。
由于实时组播的视频流来自于mpeg-4编码器,所以首先要从编码器中获得视频数据,这主要通过访问编码器所提供的i/o端口来完成。本设计采用了一种基于环形缓冲区的多任务视频传输技术,较好的解决了码流读取和发送互不干扰的问题。系统的环形缓冲区除了达到数据分离互斥作用外,还可以起到平滑码流的作用。读取任务和发送任务是互斥的关系,读取任务一次从编码模块中读入4k的视频数据供发送任务处理。在读取时为了避免竞争,使用信号量对该环形缓冲区进行上锁,以保证访问的互斥进行。发送任务的访问环形缓冲区的情况也类似。通过利用环形缓冲区和互斥锁*可以解决这两个任务的同步问题。
指令控制模块的设计
系统定义了自己的指令系统和指令传输协议。指令可以分为以下几类:工作控制(传输开始、传输停止、存储控制等);镜头云台控制(焦距、光圈、自动转动等);系统设置(用户管理、通信参数设置等),每条指令前面都有其*的识别标志,服务器接收到后可以用来和其它指令进行区分。
多路复用的输入/输出模型se-lect函数可以实现的管理套接字。使用工作在无阻塞方式的套接字,在一定程度上提高了程序的效率(与阻塞套接字相比)。但是,程序需要不断的轮询各个套接字描述符的情况,这浪费了大量的cpu时间。如果进程不是主动地轮询套接字的情况,而是将希望监视的套接字向系统进行登记,而后采取被动的态度等待,当套接字上发生了某些事件后,系统再以某种方式通知进程,接着进程去检测套接字的情况,发现对应的事件并进行处理。在这种工作方式下,进程是在已经知道在套接字上发生了事件时,才对套接字进行检测,而在没有事件的情况下,进程将睡眠,所以这种工作方式节省了大量的cpu时间,对于资源本来就非常紧张的系统,可以大大提高系统的整体性能。
结语
本文设计的基于arm s3c44b0x的嵌入式mpeg-4远程网络监控系统,目前已经在某省高速公路监控中得到了应用,并取得了很好的应用效果。该监控系统稳定性高,支持基于internet的数据传输,c/s的结构体系允许用户进行远端操纵系统的工作方式。系统的各个子模块相对独立,通过采用mpeg-4视频压缩技术,图像高清晰,画质可接近dvd效果,能够实现单画面轮流监看和1~16个画面同屏监看。支持远程和本地云台控制,支持多任务工作方式,而且图像存储、监看、远程控制可同步进行,监控距离随网络延伸而不断加长,具有良好的发展应用前景。

全年征稿/资讯合作 联系邮箱:1271141964@qq.com
  • 凡本网注明"来源:智能制造网"的所有作品,版权均属于智能制造网,转载请必须注明智能制造网,https://www.gkzhan.com。违反者本网将追究相关法律责任。
  • 企业发布的公司新闻、技术文章、资料下载等内容,如涉及侵权、违规遭投诉的,一律由发布企业自行承担责任,本网有权删除内容并追溯责任。
  • 本网转载并注明自其它来源的作品,目的在于传递更多信息,并不代表本网赞同其观点或证实其内容的真实性,不承担此类作品侵权行为的直接责任及连带责任。其他媒体、网站或个人从本网转载时,必须保留本网注明的作品来源,并自负版权等法律责任。
  • 如涉及作品内容、版权等问题,请在作品发表之日起一周内与本网联系,否则视为放弃相关权利。


编辑精选

更多


宣传样本推荐图书

旗下子站

工控网机器人仪器仪表物联网3D打印工业软件金属加工机械包装机械印刷机械农业机械食品加工设备制药设备仓储物流环保设备造纸机械工程机械纺织机械化工设备电子加工设备水泥设备海洋水利装备矿冶设备新能源设备服装机械印染机械制鞋机械玻璃机械陶瓷设备橡塑设备船舶设备电子元器件电气设备



关于我们|本站服务|会员服务|企业建站|旗下网站|友情链接| 兴旺通| 产品分类浏览|产品sitemap

智能制造网 - 工业4.0时代智能制造领域“互联网+”服务平台

Copyright gkzhan.comAll Rights Reserved法律顾问:浙江天册律师事务所 贾熙明律师

客服热线:0571-87756395加盟热线:0571-87759904媒体合作:0571-89719789

客服部:编辑部:展会合作:市场部:

关闭