流媒体服务器设计文档Word格式文档下载.docx
- 文档编号:19935156
- 上传时间:2023-01-12
- 格式:DOCX
- 页数:9
- 大小:194.39KB
流媒体服务器设计文档Word格式文档下载.docx
《流媒体服务器设计文档Word格式文档下载.docx》由会员分享,可在线阅读,更多相关《流媒体服务器设计文档Word格式文档下载.docx(9页珍藏版)》请在冰豆网上搜索。
Live555支持H.264源视频文件的流化,需添加对实时流直播的支持;
已有优化的G.729编码库,需要添加在live555中添加对G.729音频编码格式的支持。
3.1RTSP服务器
参考live555源码mediaserver/目录下的live555MediaServer.cpp,实现媒体流请求的点播功能。
客户端(Client)与服务器(Server)之间的RTSP信令交互过程如下图2所示:
图2RTSP信令交互过程
1.RTSP连接的建立过程
RTSPServer类用于构建一个RTSP服务器,该类内部定义了一个RTSPClientSession类,用于处理单独的客户会话。
首先创建RTSP服务器(具体实现类是DynamicRTSPServer),在创建过程中,先建立setUpOurSocket(ourSocket)在TCP的554(或8554)端口进行监听,然后把连接处理函数句柄(RTSPServer:
:
incomingConnectionHandler)和socket句柄传给任务调度器(taskScheduler)。
任务调度器把socket句柄放入后面select调用中用到的socket句柄集(fReadSet)中,同时将socket句柄和incomingConnectionHandler句柄关联起来。
接着,主程序开始进入任务调度器的主循环(doEventLoop),在主循环中调用系统函数select阻塞,等待网络连接。
当RTSP客户端输入(rtsp:
//192.168.0.1/test.264)连接服务器时,select返回对应的scoket,进而根据前面保存的对应关系,可找到对应处理函数句柄,这里就是前面提到的incomingConnectionHandler了。
在incomingConnectionHandler中创建了RTSPClientSession,开始对这个客户端的会话进行处理。
2.DESCRIBE请求消息处理过程
RTSP服务器收到客户端DESCRIBE请求后,根据请求URL(rtsp:
//192.168.0.1/test.264),找到对应的流媒体资源,返回响应消息。
live555中的ServerMediaSession类用来处理会话中描述,它包含多个(音频或视频)的子会话描述(ServerMediaSubsession)。
RTSP服务器收到客户端的连接请求,建立了RTSPClientSession类,处理单独的客户会话。
在建立RTSPClientSession的过程中,将新建立的socket句柄(clientSocket)和RTSP请求处理函数句柄RTSPClientSession:
incomingRequestHandler传给任务调度器,由任务调度器对两者进行一对一关联。
当客户端发出RTSP请求后,服务器主循环中的select调用返回,根据socket句柄找到对应的incomingRequestHandler,开始消息处理。
先进行消息的解析,如果发现请求是DESCRIBE则进入handleCmd_DESCRIBE函数。
根据客户端请求URL的后缀(如test.264),调用成员函数DynamicRTSPServer:
lookupServerMediaSession查找对应的流媒体信息ServerMediaSession。
若ServerMediaSession不存在,但是本地存在test.264文件,则创建一个新的ServerMediaSession。
在创建ServerMediaSession过程中,根据文件后缀.264创建一个子会话描述H264VideoFileServerMediaSubsession。
最后由ServerMediaSession完成组装响应消息中的SDP信息(SDP组装过程见下面的描述),然后将响应消息发给客户端,完成一次消息交互。
SDP消息组装过程:
ServerMediaSession负责产生会话公共描述信息,子会话描述由H264VideoFileServerMediaSubsession产生。
H264VideoFileServerMediaSubsession在其父类成员函数OnDemandServerMediaSubsession:
sdpLines()中生成会话描述信息。
在sdpLines()实现里面,创建一个虚构(dummy)的FramedSource(具体实现类为H264VideoStreamFramer)和RTPSink(具体实现类为SimpleRTPSink和H264VideoRTPSink),最后调用setSDPLinesFromRTPSink(...)成员函数生成子会话描述。
3.SETUP请求消息处理过程
RTSPClientSession类用于处理单独的客户会话。
其类成员函数handleCmd_SETUP()处理客户端的SETUP请求。
调用parseTransportHeader()对SETUP请求的传输头解析,调用子会话(这里具体实现类为OnDemandServerMediaSubsession)的getStreamParameters()函数获取流媒体发送传输参数。
将这些参数组装成响应消息,返回给客户端。
客户端发送两个SETUP请求,分别用于建立音频和视频的RTP接收。
4.PLAY请求消息处理过程
RTSPClientSession类成员函数handleCmd_PLAY()处理客户端的播放请求。
首先调用子会话的startStream(),内部调用MediaSink:
startPlaying(),然后是MultiFramedRTPSink:
continuePlaying(),接着调用MultiFramedRTPSink:
buildAndSendPacket()。
buildAndSendPacke内部先设置RTP包头,内部再调用MultiFramedRTPSink:
packFrame()填充编码帧数据。
packFrame内部通过FramedSource:
getNextFrame(),接着MPEGVideoStreamFramer:
doGetNextFrame(),再接着经过MPEGVideoStreamFramer:
continueReadProcessing(),FramedSource:
afterGetting(...),MultiFramedRTPSink:
afterGettingFrame(...),MultiFramedRTPSink:
afterGettingFrame1(...)等一系列繁琐调用,最后到了MultiFramedRTPSink:
sendPacketIfNecessary(),这里才真正发送RTP数据包。
然后是计算下一个数据包发送时间,把MultiFramedRTPSink:
sendNext(...)函数句柄传给任务调度器,作为一个延时事件调度。
在主循环中,当MultiFramedRTPSink:
sendNext()被调度时,又开始调用MultiFramedRTPSink:
buildAndSendPacket(...)开始新的发送数据过程,这样客户端可以源源不断的收到服务器传来的RTP包了。
5.TEARDOWN删除会话过程
代码实现如下所示:
elseif(strcmp(extension,"
.264"
)==0){
NEW_SMS("
H.264Video"
);
OutPacketBuffer:
maxSize=100000;
//allowforsomepossiblylargeH.264frames
sms->
addSubsession(H264VideoFileServerMediaSubsession:
createNew(env,reuseSource));
sms->
addSubsession(G729ServerMediaSubsession:
//addbyyezi
}
3.2H.264视频流化
获取发送传输参数的过程:
调用子会话(具体实现类H264VideoServerMediaSubsession)的createNewStreamSource()创建H264liveSource视频数据源,选择发送传输参数,并调用子会话的createNewRTPSink()创建H264VideoRTPSink。
同时将这些信息保存在StreamState类对象中,用于记录流的状态。
H.264视频实现相关类图如图3所示:
图3H.264视频实现类图
H.264视频流解析过程如图4所示:
图4H.264视频流解析过程
3.3G.729音频编码与流化
调用子会话(具体实现类G729AudioServerMediaSubsession)的createNewStreamSource()创建G729AudioSource视频数据源,选择发送传输参数,并调用子会话的createNewRTPSink()创建SimpleRTPSink。
G.729音频实现相关类图如图5所示:
图5G.729音频实现类图
G.729音频流解析过程如图6所示:
图6G.729音频流解析过程
4系统实现
系统整体的类图结构如下所示:
1.Medium
2.
RTSPServer
RTSPOverHTTPServer
MediaSession
ServerMediaSession
2.ServerMediaSubsession
3.OnDemandServerMediaSubsession
4.FileServerMediaSubsession
5.H264VideoFileServerMediaSubsession
4.G711ServerMediaSubsession
2.MediaSource
3.FramedSource
4.H264VideoSource
4.
G711AudioSource
2.MediaSink
3.
RTPSink
4.MultiFramedRTPSink
5.MPEG4GenericRTPSink
5.VideoRTPSink
6.H264VideoRTPSink
5.SimpleRTPSink
RTCPInstance
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 流媒体 服务器 设计 文档