EasyDarwin开源流媒体服务器低延时直播之转发缓存跟进算法

前言

前一段时间，我们为EasyDarwin实现了客户端快速显示画面/听到同步声音的缓存关键帧检索方案，具体的实现方法分别在《EasyDarwin手机直播是如何实现的快速显示视频的方法》和《EasyDarwin手机直播转发快速显示问题之音频处理过程》两篇博客中可以了解到具体的实现原理，实现的方法代码也可以在EasyDarwin的ReflectorStream类中找到：

问题需求

经过了一段时间的测试和项目检验，按照上述描述的流程，能够很好地实现快速显示功能，但转发过程中，还会出现随着转发时间的不断累积，转发的延时会越来越大，而通过我们的测试发现，这个延时主要是存在于长时间观看的客户端，而且新加入的客户端延时会很小，但过一段时间，延时就开始累积，那么我们就来进行一下问题的分析：

由上图的分析我们可以看出，由于EasyDarwin转发到不同的客户端，客户端所在的网络环境不一样，发送的速度也就各不相同，一开始发送的开始位置P1的时候延时最小，最接近实时场景，但当客户端网络较差的时候，数据包发送就缓慢，那么这个过程中累积的数据就会越来越多，造成P2缓慢推进，而最新关键帧数据会不断更新P3，那么P2-P3的这个累积，就是主要延时所在；

问题解决

于是，我们定义了一个P2与P3之间的最大距离阀值，当P2 - P3超过了这个时间阀值，我们就发送的索引位置由P2跳动到P3，或者称这个过程为缓存跟进，由于是从当前发送帧（无论是I帧或者P帧）跳到最新的I关键帧，所以客户端不会出现花屏，只会出现画面跳动，P2与P3之间的最大距离阀值我们定义的越大，画面跳跃性可能就会越大，当然，阀值越大，出现跳跃的次数可能会越少，所以，我们需要定一个自己需要的阀值大小；

此算法在EasyDarwin源码中的实现位置：ReflectorStream.cpp中的ReflectorSender::NeedRelocateBookMark方法；

版本及源码下载

1. 流媒体服务器EasyDarwin：https://github.com/EasyDarwin/EasyDarwin
2. EasyCamera手机直播/移动单兵监控端v1.0.16.0620：https://github.com/EasyDarwin/EasyCamera/releases/tag/v1.0.16.0620
3. 手机直播客户端EasyClient：https://github.com/EasyDarwin/EasyClient

获取更多信息

邮件：support@easydarwin.org

WEB：www.EasyDarwin.org

Copyright © EasyDarwin.org 2012-2016