一种云会议中多层视频传输去峰值方法、系统和存储介质技术方案

本发明专利技术提供一种云会议中多层视频传输去峰值方法、系统和存储介质，通过对多层视频进行初始化，依据每层设定码率及初始化错帧参数，对每层编码帧进行合理控制，均匀错开每层视频中数据量最大的IDR帧，同时，采用了动态调整错帧间隔的方法，可以保证视频质量不下降，视频延时不增加，视频连续性不降低的情况下，在多层视频编码端降低并消除码率峰值出现的可能，简化了与后端传输的交互，并结合传输层流量控制算法，实现了多层视频流的平稳传输，提升了广域互联网络视频通信的可靠性和用户体验。体验。体验。

【技术实现步骤摘要】
一种云会议中多层视频传输去峰值方法、系统和存储介质


[0001]本专利技术涉及视频传输
，尤其涉及一种云会议中多层视频传输去峰值方法、系统和存储介质。

技术介绍

[0002]随着视频会议的需求趋于普及化、多元化，解决方案也从传统视频会议发展到现在的云视频会议。为了同时支持多种设备，且保证不同设备上质量最大化，孕育出多层视频的需求。为了多层视频同步，将同时发送多层视频，在WIFI、4G/5G、卫星等无线信道中传输，而码率峰值会影响视频质量，所以需要降低并去除多层视频传输中码率峰值。
[0003]目前现有的码率控制方案，大致有两种。一种方案是依赖于控制视频的码率参数、GOP值、场景切换参数等，在编码阶段进行控制视频码率峰值。另一种方案是通过在传输阶段根据设定的传输策略，来解决信道传输中视频码率峰值问题。基于上述传统的码率峰值控制方案，其中前一种方案是通过调控多层视频编码参数，在相同视频编码码率下，可以降低峰值出现概率，但并没有消除峰值出现的可能。后一种方案是通过优化传输策略来解决，这样会增加视频延时及其不连续性。

技术实现思路

[0004]为了解决上述至少一个技术问题，本专利技术提出了一种云会议中多层视频传输去峰值方法、系统和存储介质。
[0005]为了实现上述目的，本专利技术第一方面提出了一种云会议中多层视频传输去峰值方法，所述方法包括：步骤1，设置多层视频中每层的媒体信息码率InitBitrate，初始化错帧间隔InitInterval、总编码帧数FrameNum均为0；步骤2，初始化多层视频起始位置，重置IDR帧标记Idr_Flag为0；步骤3，根据当前层的错帧间隔InitInterval，及帧序号统计值，IDR帧标记Idr_Flag计算出当前层的编码精准帧类型FrameType；步骤4，统计当前层编码后的码率，并做后处理下采样作为下一层编码的输入参数；步骤5，对每层视频执行上述步骤2
‑
4后，统计当前总编码帧数FrameNum，并将每层的实时码率RealBitrate与初始码率InitBitrate进行比较，动态调整每层的错帧间隔InitInterval。
[0006]本方案中，上述步骤1，具体包括：步骤1
‑
1，根据分辨率对多层进行从大到小排序并编号，同时获取多层中码率最大层的编号LayerMax以及对应的GOP值GopInit；步骤1
‑
2，比较码率最大层的GOP值与默认最大间隔，并取最大值作为码率最大层的错帧间隔Interval[LayerMax]；
步骤1
‑
3，根据多层中最大码率BitrateMax与多层总码率BitrateAll的占比比例，计算出非最大其余层错帧间隔总和IntervalOther= Interval[LayerMax]*(( BitrateAll
ꢀ‑
BitrateMax) / BitrateAll)；步骤1
‑
4，分别根据非最大层码率的比例，计算出其余层的错帧间隔。
[0007]本方案中，上述步骤2，具体包括：步骤2
‑
1，根据层编号LayerNum及Interval[LayerMax]，设定多层中的起始序号StartNum；步骤2
‑
2，重置IDR帧标记Idr_Flag为0，并根据处理当前层ID及总编码帧数FrameNum，判断当前是否需要执行多层编码；如果满足条件，则执行步骤3，如果不满足条件，则针对下一层执行步骤2。
[0008]本方案中，上述步骤3，具体包括：步骤3
‑
1，先对IDR帧标记Idr_Flag进行判断，如果Idr_Flag为“1”，则直接设置编码精准帧类型FrameType=TYPE_AUTO；否则，进行如下步骤3
‑
2处理；步骤3
‑
2，根据总编码帧数FrameNum与当前层起始序号位置StartNum[LayerNum]，计算得到当前层总差值Delta=FrameNum
‑
StartNum[LayerNum]；步骤3
‑
3，基于当前层总差值进行判断得到当前层的编码精准帧类型FrameType；步骤3
‑
4，根据获取到的编码精准帧类型FrameType，设置给当前层当前编码器需要编码的帧类型，并按照精准帧类型获得编码后的数据。
[0009]本方案中，上述步骤3
‑
3，具体包括：如果当前层总差值Delta能整除当前层的错帧间隔IntervalNum[LayerNum]，则当前层的编码精准帧类型FrameType=TYPE_IDR；否则，当前层的编码精准帧类型FrameType=TYPE_AUTO。
[0010]6.根据权利要求1所述的一种云会议中多层视频传输去峰值方法，其特征在于，上述步骤4，具体包括：步骤4
‑
1，统计当前层的码率值，RealBitrate[LayerNum] += Bitrate，以用于进行后续的动态调整处理；步骤4
‑
2，按照各层的分辨率从高到低依次进行下采样，作为下一层编码的输入参数。
[0011]本方案中，上述步骤5，具体包括：步骤5
‑
1，当所有层循环处理完毕后，先对总编码帧数FrameNum进行递增，然后获取定时器，判断是否达到预设时间，如果达到进行错帧间隔动态调整；步骤5
‑
2，循环遍历多层，获取当前层的实时码率与初始码率的比率Ratio=RealBitrate[LayerNum]/ InitBitrate[LayerNum]*100%，根据所述比率Ratio进行调整当前层的错帧间隔值Interval[LayerNum]；步骤5
‑
3，获取错帧间隔比例系数Coef；如果Ratio>=125%，当前层的错帧间隔值Interval [LayerNum] += 5*Coef [LayerNum]；如果Ratio>=120%，当前层的错帧间隔值Interval [LayerNum] += 4*Coef [LayerNum]；
如果Ratio>=115%，当前层的错帧间隔值Interval [LayerNum] += 3*Coef [LayerNum]；如果Ratio>=110%，当前层的错帧间隔值Interval [LayerNum] += 2*Coef [LayerNum]；如果Ratio>=105%，当前层的错帧间隔值Interval [LayerNum] += 1*Coef [LayerNum]；如果Ratio<=95, 当前层的错帧间隔值Interval [LayerNum] = InitInterval[LayerNum]；步骤5
‑
4，初始化定时器，初始化实时码率RealBitrate。
[0012]本专利技术第二本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种云会议中多层视频传输去峰值方法，其特征在于，所述方法包括：步骤1，设置多层视频中每层的媒体信息码率InitBitrate，初始化错帧间隔InitInterval、总编码帧数FrameNum均为0；步骤2，初始化多层视频起始位置，重置IDR帧标记Idr_Flag为0；步骤3，根据当前层的错帧间隔InitInterval，及帧序号统计值，IDR帧标记Idr_Flag计算出当前层的编码精准帧类型FrameType；步骤4，统计当前层编码后的码率，并做后处理下采样作为下一层编码的输入参数；步骤5，对每层视频执行上述步骤2
‑
4后，统计当前总编码帧数FrameNum，并将每层的实时码率RealBitrate与初始码率InitBitrate进行比较，动态调整每层的错帧间隔InitInterval。2.根据权利要求1所述的一种云会议中多层视频传输去峰值方法，其特征在于，上述步骤1，具体包括：步骤1
‑
1，根据分辨率对多层进行从大到小排序并编号，同时获取多层中码率最大层的编号LayerMax以及对应的GOP值GopInit；步骤1
‑
2，比较码率最大层的GOP值与默认最大间隔，并取最大值作为码率最大层的错帧间隔Interval[LayerMax]；步骤1
‑
3，根据多层中最大码率BitrateMax与多层总码率BitrateAll的占比比例，计算出非最大其余层错帧间隔总和IntervalOther= Interval[LayerMax]*(( BitrateAll
ꢀ‑
BitrateMax) / BitrateAll)；步骤1
‑
4，分别根据非最大层码率的比例，计算出其余层的错帧间隔。3.根据权利要求1所述的一种云会议中多层视频传输去峰值方法，其特征在于，上述步骤2，具体包括：步骤2
‑
1，根据层编号LayerNum及Interval[LayerMax]，设定多层中的起始序号StartNum；步骤2
‑
2，重置IDR帧标记Idr_Flag为0，并根据处理当前层ID及总编码帧数FrameNum，判断当前是否需要执行多层编码；如果满足条件，则执行步骤3，如果不满足条件，则针对下一层执行步骤2。4.根据权利要求1所述的一种云会议中多层视频传输去峰值方法，其特征在于，上述步骤3，具体包括：步骤3
‑
1，先对IDR帧标记Idr_Flag进行判断，如果Idr_Flag为“1”，则直接设置编码精准帧类型FrameType=TYPE_AUTO；否则，进行如下步骤3
‑
2处理；步骤3
‑
2，根据总编码帧数FrameNum与当前层起始序号位置StartNum[LayerNum]，计算得到当前层总差值Delta=FrameNum
‑
StartNum[LayerNum]；步骤3
‑
3，基于当前层总差值进行判断得到当前层的编码精准帧类型FrameType；步骤3
‑
4，根据获取到的编码精准帧类型FrameType，设置给当前层当前编码器需要编码的帧类型，并按照精准帧类型获得编码后的数据。5.根据权利要求4所述的一种云会议中多层视频传输去峰值方法，其特征在于，上述步骤3
‑
3，具体包括：如果当前层总差值Delta能整除当前层的错帧间隔IntervalNum[LayerNum]，则当前层
的编码精准帧类型FrameType=TYPE_IDR；否则，当前层的编码精准帧类型FrameType=TYPE_AUTO。6.根据权利要求1所述的一种云会议中多层视频传输去峰值方法，其特征在于，上述步骤4，具体包括：步骤4
‑
1，统计当前层的码率值，RealBitrate[LayerNum] += Bitrate，以用于进行后续的动态调整处理；步骤4
‑
2，按照各层的分辨率从高到低依次进行下采样，作为下一层编码的输入参数。7.根据权利要求1所述的一种云会议中多层视频传输去峰值方法，其特征在于，上述步骤5，具体包括：步骤5...

【专利技术属性】
技术研发人员：马华文，
申请(专利权)人：全时云商务服务股份有限公司，
类型：发明
国别省市：