SIP协议栈的研究

本文介绍了会话初始化协议(SIP)的基本内容,提出了基于C 语言的SIP协议栈的设计和实现方案,设计了SIP协议栈的结构、消息的收发和并发处理机制.     

IPv4及IPv6中的IPSec实现

IPSec协议体系是IETF制定的新一代网络安全协议标准,该文深入剖析了IPSec在自由操作系统下的实现方式,针对IPv4协议栈和IPv6协议栈提出了不同的实现方案,并提供这两种方案下的测试环境及其结果。     

基于Windows CE的SIP软件电话的设计与实现

本文提出了一种基于SIP协议的软件电话的软件结构和设计实现方案。该方案以嵌入式Windows C为平台,中间件采用开源的SIP协议栈oSIP/eXosip,通过协议栈的移植和在协议栈之上应用程序的开发,实现了SIP软件电话。测试结果表明,该软件电话在布置Windows CE的PDA上具有良好的语音通话质量。     

基于FPGA的万兆以太网UDP_IP硬件协议栈设计与实现

针对传统基于软件的协议栈无法满足高速数据传输处理需求的问题,提出了一种基于硬件加速的UDP协议栈设计方案,该方案基于硬件高效并行的特点,实现了UDP/IP协议栈,满足了万兆以太网数据高带宽传输的需求通过实际测试表明,该设计最高可以达到9.32 Gbps传输速率,满足10 Gbps带宽下线速处理的需求,与传统软件实现相比,处理能力更接近理论极限。     

IPv6的嵌入式设计与实现

随着网络的发展,新的IPv6协议可以更好地满足嵌入式系统对联网功能的需求,在嵌入式系统中实现IPv6协议有着良好的应用前景,因此着重研究了如何对复杂的TCP/IPv6协议栈进行精简,并提出了一套可行的方案,此方案能够适应嵌入式系统的需要,然后用软件实现嵌入式系统中的精简的TCP/IPv6协议栈,模块之间能够互相通信.     

计算机网络协议栈实验平台的设计与实现——基于MSP430

针对计算机网络课程教学中协议栈实验部分的教学实际,分析协议栈学习对于计算机网络课程的重要性,探讨目前的实验方法,提出基于msp430的计算机网络协议栈实验平台的设计及实现方案,指出通过此实验平台,学生可进行协议栈重演,真切感受到抽象协议的具体应用方法,提高学生的协议分析能力和开发能力。     

SIP协议栈的多媒体组播设计与实现

分析SIP协议和其实现方法,利用开源程序代码开发具有一定实用价值的多媒体应用,设计并实现基于SIP协议栈的IP网络多媒体组播.     

嵌入式系统TCP/IP协议栈的设计与实现

讨论了一个适合嵌入式系统TCP/IP协议栈的设计思想,实现技术以及应用,关键性技术是如何裁减标准TCP/IP协议栈以适应嵌入式系统的特点而又要保证该协议栈可以和标准协议栈正常通讯。     

Epilogue和BSD协议栈的实现机制的比较

协议栈是网络通信中最重要的软件部分,在数据交换中起着重要作用。对其进行研究分析有助于进行特定情况下的协议栈实现。文中对两种典型协议栈的实现方式进行比较,分析了两者在各个层次上的协议的实现,并比较其协议栈所占用资源,从而对其可靠性和进行二次开发的可能性进行研究,最后分析了这两种协议栈的实现方式的优缺点。两种协议栈的比较可为实现某种协议栈时提高其可靠性、可读性、可移植性提供有益参考。     

基于DSP的WMGCP协议栈的设计与实现

基于DSP技术设计实现了一种运行于局域网VoIP电话通信系统的WMGCP协议栈.采用分层结构和会话状态机设计,完成基本呼叫、群呼、全呼和扩音呼叫功能,实现WMGCP消息的构建、存储和解析,利用μC/OS-Ⅱ嵌入式实时操作系统创建WMGCP任务.实验表明该协议栈运行稳定,节省了系统资源和成本.     

基于RTP／RTCP的音视频同步方法研究

分析音频和视频同步的标准以及造成音视频不同步的原因,提出一种基于RTP／RTCP协议的音视频同步控制方法。以音频为主媒体,视频为从媒体,在接收端通过设置缓冲区实现音频流的媒体内同步,通过比较音视频数据包的时间戳判断同步关系,对视频采取重复或丢弃的方法实现音视频同步控制。在实验环境下模拟音视频流经网络传输后在接收端经过同步控制后播放和直接播放两种情况,表明,提出的同步方法能很好的纠正音视频不同步的现象。     

基于WebRTC技术的诊后医疗系统实时通信研究

WebRTC技术的出现提出了实时音视频处理的解决方案,所具有的开放标准为研究实时音视频的处理流程提供了技术依据.通过对WebRTC的核心音视频操作库进行研究,将WebRTC的技术方案应用于诊后医疗系统的在线问诊模块,用以提升线上问诊服务的音视频质量.通过对实时通信进行研究并依托WebRTC协议的通信体系结构,设计了信令和媒体代理方案并最终实现了诊后医疗系统的实时通信.     

Vaudeville: A High Performance,Voice Activated Teleconferencing Application

We present Vaudeville, a voice-activated, hands-free, ATM-based video conferencing application. This system is scalable; although video bandwidth is normally a limiting factor in the number of conferences participants, the bandwidth attributed to the video is not a function of conference size. This is achieved through an automatic, distributed floor control mechanism that gives the appearance of an open floor. Audio and video are encoded in hardware using a platform-independent, ATM hardware multimedia interface. Vaudeville features digitally transmitted NTSC video, voice-activated audio transmission, audio bridging of two audio streams, and voice-activated video switching. Multiple simultaneous multiparty conferences are supported. Users can move freely among conferences without knowledge of the underlying network structure. We describe how Vaudeville was built using a component-based distributed programming environment. We also describe the algorithms used to control the audio and video of the application.     

A Survey of MPEG-1 Audio,Video and Semantic Analysis Techniques

Digital audio & video data have become an integral part of multimedia information systems. To reduce storage and bandwidth requirements, they are commonly stored in a compressed format, such as MPEG-1. Increasing amounts of MPEG encoded audio and video documents are available online and in proprietary collections. In order to effectively utilise them, we need tools and techniques to automatically analyse, segment, and classify MPEG video content. Several techniques have been developed both in the audio and visual domain to analyse videos. This paper presents a survey of audio and visual analysis techniques on MPEG-1 encoded media that are useful in supporting a variety of video applications. Although audio and visual feature analyses have been carried out extensively, they become useful to applications only when they convey a semantic meaning of the video content. Therefore, we also present a survey of works that provide semantic analysis on MPEG-1 encoded videos.     

音视频流实时分离及同步播放系统设计与实现

通过音频与视频解码器和相关的音视频流方案实现上位机与下位机音视频流数据的编码解码及重新合成,并给出了音视频在播放过程中实现同步校正的方法,实现了在有高音质外放设备情况下的上下位机播放的准确同步。系统在Android平台上已获得实现,所使用的音视频实时分离及同步播放方法能成功实现智能终端视频播放和高音质外放音频播放的准确同步,并在上位机成功合成新的音视频文件。     

基于Android平台的无线视频监控

随着科技生活的发展,人们对视频监控的要求越来越高.提出了一种基于Android平台的移动音视频监控系统.该系统利用Mediastream2实现流媒体的处理,ORTP实现流媒体的安全可靠传输,以及FFMpeg实现音视频的编解码.重点讲解了音视频库FFMpeg中对视频和音频的编解码处理过程以及是如何将音视频同步输出的.最后在嵌入式平台TQ210上测试可实现实时的视频监控.     

一种基于多模态感知的双声道音频生成方法

现有多数视频只包含单声道音频,缺乏双声道音频所带来的立体感。针对这一问题,本文提出了一种基于多模态感知的双声道音频生成方法,其在分析视频中视觉信息的基础上,将视频的空间信息与音频内容融合,自动为原始单声道音频添加空间化特征,生成更接近真实听觉体验的双声道音频。我们首先采用一种改进的音频视频融合分析网络,以编码器-解码器的结构,对单声道视频进行编码,接着对视频特征和音频特征进行多尺度融合,并对视频及音频信息进行协同分析,使得双声道音频拥有了原始单声道音频所没有的空间信息,最终生成得到视频对应的双声道音频。在公开数据集上的实验结果表明,本方法取得了优于现有模型的双声道音频生成效果,在STFT距离以及ENV距离两项指标上均取得提升。     

Android平台中轻量级音视频引擎

随着移动互联网络和移动终端设备硬件的快速发展,移动音视频的应用越来越普遍,这要求应用软件能高效的处理音视频文件以满足大众的需求.为提高软件运行效率,通过对多媒体处理流程的分析研究,设计和实现了轻量级的音视频引擎,通过模块化的设计方法,实现了对媒体文件的接收、解析识别文件格式、分离容器中的音频和视频流并分别解码输出,只使用HTTP传输协议和H.265视频解码、AAC音频解码,将软件的体积降到最小,实现与Android平台交互JNI的接口,在应用程序中使用MediaPlayer类实现音视频的播放.     

Example-based video remixing

A video remix is generally created by arranging selected video clips and combining them with other media streams such as audio clips and video transition effects. This paper proposes a system for semi-automatically creating video remixes of good expressive quality. Given multiple original video clips, audio clips, and transition effects as the input, the proposed system generates a video remix by five processes: I) video clip sequence generation, II) audio clip selection, III) audio boundary extraction, IV) video segment extraction, and V) transition effect selection, based on the spatial and temporal structural patterns automatically learned from professionally created video remix examples. Experiments using movie trailers of action genre as video remix examples not only demonstrate that video remixing by professionals can be imitated based on examples but also reveal that the video clip sequence generation and audio clip selection are the most important processes to improve the perceived expressive quality of video remixes.     

面向编钟乐舞的音视频同步技术的研究

音视频同步作为连接音乐,动作的纽带在面向编钟乐舞的音乐驱动动作编辑流程中起到关键性的作用,通过从音频解析入手,提出了音频乐段与动作序列的对应关系,讨论了音频流与视频流如何在实时的环境中同步展示,并给出了音频,视频同步模型的具体实现方法。