您当前的位置:首页 > 电脑百科 > 程序开发 > 语言 > C/C++/C#

c++之流媒体传输--Live555源码解读

时间:2019-11-22 11:53:54  来源:  作者:

Live555是一个为流媒体提供解决方案的跨平台的C++开源项目,它实现了对标准流媒体传输是一个为流媒体提供解决方案的跨平台的C++开源项目,它实现了对标准流媒体传输协议如RTP/RTCP、RTSP、SIP等的支持。Live555实现了对多种音视频编码格式的音视频数据的流化、接收和处理等支持,包括MPEG、H.263+、DV、JPEG视频和多种音频编码

关注+私信免费领取一份99的视频学习资料哦

c++之流媒体传输--Live555源码解读

 

流媒体服务器搭建

框架

Live555获取网络相机流ffmpeg对获取网络相机码流转码视频码流的高效显示

1

一、 live555、ffmpeg及D3D的简介

Live555是一个标准流媒体传输的跨平台C++开源项目。

Ffmpeg是一个音视频解码的开源项目。

DerictX9是微软的游戏引擎库。

二、 搭建开发环境

a) Live555的源码编译及环境配置

b) Ffmpeg的SDK获取

c) D3D9的SDK获取

三、 框架搭建

a) Live555获取相机码流的方法

a.1 支持rtsp相机的流URL地址

海康相机含账户密码的url地址格式:

Rtsp://用户名:密码@码流地址

主码流:rtsp://admin:12345@192.168.96.10/MPEG-4/ch2/main/av_stream

子码流:rtsp://admin:12345@192.168.96.10/MPEG-4/ch2/main/av_stream

a.2 live555获取rtsp流

Live555 提供了一个简单的客户端工程,testRTSPClient。Live55获取流的过程:打开URL进入工作调度循环,当连接失败时会调用shutdownStream断开流,并执行清理工作。只有当eventLoopWatchVariable为非零时才会停止工作调度循环。需要注意的是live555支持子会话,只有当所有子会话都停止时,才会将eventLoopWatchVariable设置为非零值,退出工作调度循环。参考testRTSPClient的shutdownStream函数。

// All subsequent activity takes place within the event loop:

env->taskScheduler().doEventLoop(&eventLoopWatchVariable);

// This function call does not return, unless, at some point in time, “eventLoopWatchVariable” gets set to something non-zero.

Live555工程有一个mediaServer工程,我们可以用它来测试我们的rtsp客户端程序,此外也有一些公开的rtsp测试地址可用,比如

rtsp://218.204.223.237:554/live/1/67A7572844E51A64/f68g2mj7wjua3la7.sdp。还有一个比较好用的播放工具 VLC ,通过配置可以播放h.264的网络视频流。

b) Ffmpeg对获取到H.264码流的解码方法

Ffmpeg的工作方式类似于插件的工作方式,解码流程:

Ffmpeg初始化化Ffmpeg解码Ffmpeg退出清理资源

b.1、Ffmpeg初始化内容

 

c++之流媒体传输--Live555源码解读

 

b.2、解码函数

c++之流媒体传输--Live555源码解读

 

 

c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 

c) D3D9 YV12图像渲染方法 
c.1 初始化D3D设备,渲染视频

c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 

c.4设备丢失问题及解决办法

c.4.1设备丢失

Direct3D设备要么处于可操作状态,要么处于丢失状态,可操作状态即正常状态,设备按预期运行并渲染。当某些事件发生时,设备将转入丢失状态,比如在全屏状态下失去键盘焦点,这将导致无法继续渲染。设备丢失的一个特点是所有的渲染操作都会silent failure,这就意味着即使渲染操作失败了,渲染函数也能正确返回。在这种情况下,函数Present将返回D3DERR_DEVICELOST。

c.4.2解决办法

c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 

d) 将三个技术组合搭建组合流媒体服务器,主要是数据的异步处理,三个技术的衔接

三个关键技术实现后,我们便可以根据工作所需组合起来实现需求。

Live555获取到流后加入缓冲队列,FFmpeg从缓冲队列中取出数据解码之后便可用D3d渲染播放,很明显,在对这个缓冲队列操作时,要使用使用锁机制操作。这其中有两个关键点。其一,视频缓冲队列要有限制,不能过大,超出一个最大值之后,就要对缓冲清理。其二D3d9的渲染速率跟live555网络流的获取速率不一致,渲染速率大于获取速率,就会造成视频卡顿。最简单的一个办法就是,按照获取速率控制渲染,即以一帧为单位渲染,缓冲中小于一帧是,就不再渲染,并让出cpu视频,Sleep一段时间。这两点总结为我们要对缓冲队列里的缓冲帧数设置一个合理的范围。

四、 优缺点

a) 性能:

i. 使用GPU解码渲染视屏,大大降低CPU的使用率。

ii. 普通pc能够播放视频的路数。Intel Xeon E3-1220 3.1GHz cpu,NVIDIA NVS300 gpu播放视频时每路大于占5%左右的cpu。

b) 易用性:使用的三个组件资料比较丰富,只要通过简单的组合即可开发出网络相机播放程序。

c) 稳定性:使用的三个组件,经过了长时间的检验,相当稳定,只要我们合理组合使用,便可开发出较为稳定的视频程序。

五、 待改进的地方

a) 对流的有效控制。

b) 所依赖的三个SDK功能强大,但只用到了部分功能,因此对live555、ffmpeg源码的裁剪精小,使其更适合此流媒体服务器。

c) D3D9仅能在windows平台使用,需要使用跨平台视频渲染引擎,如OpenGl,或者使用并行计算的方式,如OpenCl。均是跨平台,又是使用GPU解码渲染,大大减轻CPU的负担。

d) Ffmpeg是在cpu上解码的,如果能够通过并行计算(如OpenCl)的方式交由GPU解码,将能进一步减少CPU的压力,提升系统的流畅度。

e) 如果仅仅是播放网络相机的rtsp流,我们可以使用VLC的SDK实现程序的快速开发。

六、参考资料免费获取方法 关注+私信免费领取一份99的视频学习资料哦

[1] live555源码获取及编译

[2]ffmpeg开发库获取

[3]ffmpeg解码h264

[4]yuv播放几种方案(sdl、d3d、opengGl)

[5]使用VLC快速开发视频流播放程序

[6]多路RTSP播放器直播与点播技术实现

C++ 高级语法学习

C++11增加了许多的特性,auto就是一个很明显的例子。 还有就是typedid()获取数据变量的类型

看下面简短的代码:

atuo: 很像JAVA中的加强for循环....。

c++之流媒体传输--Live555源码解读

 

关于C++关于款字符的使用:

c++之流媒体传输--Live555源码解读

 

关于数组类型的使用:

c++之流媒体传输--Live555源码解读

 

对于这里,我们需要知道的是,array的建立实在栈的基础上,所以最大尺寸不要大于1M ,不然会出现栈溢出。

而对于vector而言,是建立在堆上的,所以没有溢出的说法。

4, C++新特性,lambda表达式(匿名函数)

c++之流媒体传输--Live555源码解读

 

上面的实例,做的就是一个一个从1~5的累加过程。采用迭代器实现lambda函数。

5. 函数包装器管理内嵌函数:

对于这一个C++高级语法的作用:

第一: 可以用作设计执行接口,接口设计关卡,也可以用来计数。

第二: 可以内嵌到另一个函数,实现函数的内嵌。游戏开发中,经常使用到这种方法。

c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 

运行结果如图:

c++之流媒体传输--Live555源码解读

 

当然对于函数包装器而言,还是可以调用外部函数的。不然怎么彰显它的高级二字。

代码:

 

c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 


c++之流媒体传输--Live555源码解读

 

编程是一种快乐,享受代码带给我的乐趣!!!



Tags:c++   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除,谢谢。
▌相关推荐
一、编程语言1.根据熟悉的语言,谈谈两种语言的区别?主要浅谈下C/C++和PHP语言的区别:1)PHP弱类型语言,一种脚本语言,对数据的类型不要求过多,较多的应用于Web应用开发,现在好多互...【详细内容】
2021-12-15  Tags: c++  点击:(17)  评论:(0)  加入收藏
函数调用约定(Calling Convention),是一个重要的基础概念,用来规定调用者和被调用者是如何传递参数的,既调用者如何将参数按照什么样的规范传递给被调用者。在参数传递中,有两个很...【详细内容】
2021-11-30  Tags: c++  点击:(19)  评论:(0)  加入收藏
一、为什么需要使用内存池在C/C++中我们通常使用malloc,free或new,delete来动态分配内存。一方面,因为这些函数涉及到了系统调用,所以频繁的调用必然会导致程序性能的损耗;另一...【详细内容】
2021-11-17  Tags: c++  点击:(38)  评论:(0)  加入收藏
C++编程中,你是否有为 我到底该写个struct还是class 而苦恼过?如果你到现在还不知道该如何选择,那么请求继续阅读,下文或许能给你些建议。问题的产生C++语言继承了 C语言的 stru...【详细内容】
2021-10-18  Tags: c++  点击:(63)  评论:(0)  加入收藏
C++在C的面向过程概念的基础上提供了面向对象和模板(泛型编程)的语法功能。下面以一个简单实例(动态数组的简单封装,包括下标的值可以是任意正数值,并提供边界检查)来说明C++是如...【详细内容】
2021-10-18  Tags: c++  点击:(50)  评论:(0)  加入收藏
0 前言Hello,大家好,欢迎来到『自由技艺』的 C++ 系列专题。代码重用,尽可能避免冗余代码是程序员的一项必备技能,今天就来给大家介绍其中一种:函数装饰器。在设计模式中,与它对应...【详细内容】
2021-09-28  Tags: c++  点击:(75)  评论:(0)  加入收藏
今天我们就来聊一聊 C++ 中的异常机制吧。在学校期间,我们很少会用得上异常机制。然而,工作之后,很多时候却不得不引入异常机制。因为一般情况下,使用函数的返回值来确定函数的...【详细内容】
2021-09-26  Tags: c++  点击:(182)  评论:(0)  加入收藏
一、内存泄漏(memory leak)内存泄漏(memory leak)是指由于疏忽或错误造成了程序未能释放掉不再使用的内存的情况。内存泄漏并非指内存在物理上的消失,而是应用程序分配某段内存...【详细内容】
2021-09-03  Tags: c++  点击:(105)  评论:(0)  加入收藏
stack容器#include <iostream>using namespace std;#include <stack>//容器头文件void test(){stack<int>p;p.push(100);p.push(1000);p.push(100);while(!p.empty()){cout<...【详细内容】
2021-08-17  Tags: c++  点击:(81)  评论:(0)  加入收藏
stl 常用遍历算法(for_each transform)示例代码(结论在结尾!!!!)#include<iostream>using namespace std;#include"vector"#include"map"#include"string"#include"list"#in...【详细内容】
2021-08-13  Tags: c++  点击:(89)  评论:(0)  加入收藏
▌简易百科推荐
一、简介很多时候我们都需要用到一些验证的方法,有时候需要用正则表达式校验数据时,往往需要到网上找很久,结果找到的还不是很符合自己想要的。所以我把自己整理的校验帮助类分...【详细内容】
2021-12-27  中年农码工    Tags:C#   点击:(2)  评论:(0)  加入收藏
引言在学习C语言或者其他编程语言的时候,我们编写的一个程序代码,基本都是在屏幕上打印出 hello world ,开始步入编程世(深)界(坑)的。C 语言版本的 hello world 代码:#include <std...【详细内容】
2021-12-21  一起学嵌入式    Tags:C 语言   点击:(11)  评论:(0)  加入收藏
读取SQLite数据库,就是读取一个路径\\192.168.100.**\position\db.sqlite下的文件<startup useLegacyV2RuntimeActivationPolicy="true"> <supportedRuntime version="v4.0"/...【详细内容】
2021-12-16  今朝我的奋斗    Tags:c#   点击:(21)  评论:(0)  加入收藏
什么是shellshell是c语言编写的程序,它在用户和操作系统之间架起了一座桥梁,用户可以通过这个桥梁访问操作系统内核服务。 它既是一种命令语言,同时也是一种程序设计语言,你可以...【详细内容】
2021-12-16  梦回故里归来    Tags:shell脚本   点击:(18)  评论:(0)  加入收藏
一、编程语言1.根据熟悉的语言,谈谈两种语言的区别?主要浅谈下C/C++和PHP语言的区别:1)PHP弱类型语言,一种脚本语言,对数据的类型不要求过多,较多的应用于Web应用开发,现在好多互...【详细内容】
2021-12-15  linux上的码农    Tags:c/c++   点击:(17)  评论:(0)  加入收藏
1.字符串数组+初始化char s1[]="array"; //字符数组char s2[6]="array"; //数组长度=字符串长度+1,因为字符串末尾会自动添&lsquo;\0&lsquo;printf("%s,%c\n",s1,s2[2]);...【详细内容】
2021-12-08  灯-灯灯    Tags:C语言   点击:(47)  评论:(0)  加入收藏
函数调用约定(Calling Convention),是一个重要的基础概念,用来规定调用者和被调用者是如何传递参数的,既调用者如何将参数按照什么样的规范传递给被调用者。在参数传递中,有两个很...【详细内容】
2021-11-30  小智雅汇    Tags:函数   点击:(19)  评论:(0)  加入收藏
一、问题提出问题:把m个苹果放入n个盘子中,允许有的盘子为空,共有多少种方法?注:5,1,1和1 5 1属同一种方法m,n均小于10二、算法分析设f(m,n) 为m个苹果,n个盘子的放法数目,则先对...【详细内容】
2021-11-17  C语言编程    Tags:C语言   点击:(49)  评论:(0)  加入收藏
一、为什么需要使用内存池在C/C++中我们通常使用malloc,free或new,delete来动态分配内存。一方面,因为这些函数涉及到了系统调用,所以频繁的调用必然会导致程序性能的损耗;另一...【详细内容】
2021-11-17  深度Linux    Tags:C++   点击:(38)  评论:(0)  加入收藏
OpenCV(Open Source Computer Vision Library)是一个(开源免费)发行的跨平台计算机视觉库,可以运行在Linux、Windows、Android、ios等操作系统上,它轻量级而且高效---由一系列...【详细内容】
2021-11-11  zls315    Tags:C#   点击:(50)  评论:(0)  加入收藏
最新更新
栏目热门
栏目头条