实时音视频的整体框架简介

来源:互联网 发布:阿里云服务器默认端口 编辑:程序博客网 时间:2024/06/06 03:51

接触流媒体,一大堆概念袭来,RTP,RTCP, RTSP,h264,aac,ffmpeg,live555.............顿时晕头转向,沉浸在其中不能自拔,经过一个多月的学习,初步框架如下:

第一部分:

音视频采集(基于安卓视频采集,这部分参考 spydroid即可)

1、采集

2、音视频编码(视频h264,音频aac)

3、音频噪声消除(高级技能,暂不分析)

第二部分:

音视频传输(需要跨平台,所有这部分由C++完成,现基于 jrtplib实现。

1、音视频分包(视频需要查找帧头,音频查找ADTS单元)

2、音视频发送(rtp实现)

3、音视频同步控制(RTCP实现)

第三部分:

音视频播放 vlc或者ffplay都可以实现

1、sdp文件解析

2、vlc使用方法简介


未完待续









0 0