极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

近日,艾媒咨询发布了《2021 年中国泛娱乐行业体验共享专题报告》,首次提出「体验共享」将成为泛娱乐行业日后发展的重要方向。针对该趋势,网易云信推出「体验共享」技术专题,从 QoS 策略、WE-CAN 全球智能路由网络、视频、音频等维度解读一起听、一起看、一起唱、一起玩等场景背后的技术支持。

作者:王任 网易云信资深音视频引擎开发工程师

随着移动网络的普及和发展,视频会议、互动直播等音视频交互式应用迎来了爆发式的增长,为满足人们对音视频高品质、低延时、极致流畅体验的要求,网络 QoS(Quality of Service,服务质量)策略提供了对数据传输通道的基础保障。

音视频网络传输常见的问题和挑战有:拥塞、延时抖动、丢包等。当网络出现拥塞,对拥塞的处理不当,会导致网络延时不断变大,严重时甚至会出现丢包,最终导致音视频播放延时久、卡顿等。拥塞控制是网络 QoS 非常重要的部分,本文主要介绍网易云信的拥塞控制技术和策略。

一、什么是网络拥塞和拥塞控制

网络拥塞是指对网络资源(包括链路带宽、存储空间和处理器能力等)的使用超过了固有的处理能力和容量,造成网络传输性能下降的情况。拥塞控制的目的是通过控制发送端发送数据的速率,避免出现网络拥塞,以及出现拥塞之后,进行拥塞消除,从而提升网络吞吐率。如果把网络中传输的数据比喻为道路交通中的车辆,网络拥塞就如同交通拥塞,拥塞控制策略就像是交通秩序管理和疏通措施。

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

二、网络拥塞产生的原因与网络分类

在 WIFI 网络中,信号强度和传输能力随着传输距离的增加而下降,物理遮挡、信号干扰、接入设备众多等原因都会导致链路的可用传输带宽受到限制。

移动通信网络中,同样也会受到移动网络信号强度以及基站接入容量的限制。

有线网络中,如果分配的是共享带宽,而不是独享带宽,上网高峰期间同样也有可能存在带宽的限制。

无论是哪种物理类型的网络,根据拥塞后不同的表现现象,可把网络大致分为两类:

浅缓冲区(shallow buffers) 网络:几乎没有网络节点 buffers,拥塞后直接表现为丢包,丢包前延时不增加或增加不明显。

深缓冲区(depth buffers)网络:有较大的网络节点 buffers,拥塞后最先表现为延时增加,只有当网络节点 buffers 消耗殆尽时,才会产生丢包。

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

Figure 1:负载延时示意图

三、拥塞控制策略介绍

拥塞控制策略,主要包括实时带宽估计算法、码率分配策略以及平滑发送。

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

(一)融合的带宽估计算法

采用融合算法,分别使用基于延时变化 (delay-based)的算法和基于丢包 (loss-based)的算法,对网络拥塞状态、丢包趋势进行检测,并结合 ACK 码率,计算得到带宽估计值。

算法流程如下:

  1. 发送端平滑发送数据,接收端周期性反馈收包情况,包括每个包是否到达,以及具体的到达时间;
  2. 发送端在接收到反馈信息后,把包到达时间以及包大小进行输入,计算给定时间窗内(通常是数百 ms)接收方接收码率的样本值,并通过贝叶斯估计算法(使用当前估计值和新的样本码率计算得到新的估计值,与当前估计值相差甚远的样本,被赋予较小的权重,因为它们被认为更有可能是与拥塞无关的延迟峰值造成的),计算接收方的接收码率(以下称为 ACK 码率),网络出现拥塞时,把 ACK 码率作为估计带宽值的参考值。
  3. delay-based 算法进行带宽估计时,首先,把发送数据包进行分组(burst group)处理,并计算得到相邻包组的传输延时梯度变化值,然后把它作为输入,通过趋势线性(trendline)算法,对网络负载情况进行估计。一共有三种网络状态:拥塞(overuse)、正常(normal)、低负载(underuse)。
  4. loss-based 算法,根据反馈信息,计算得到样本丢包率,然后把它和发送码率一起作为输入,通过滤波算法对丢包率趋势做出判定,有三种趋势状态:LossIncr、LossHold、LossDecr。
  5. 首先根据网络负载状态、丢包趋势状态以及 ACK 码率,进行码率计算(Rate Control ),有三种状态:RC Decr、RC Hold、RC Incr,得到 RC 估计值,然后再结合当前丢包率和丢包趋势状态,计算得到最终的带宽估计值(Bandwidth Estimate)。

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

  • 丢包率小于设定的阈值(低),取 θ*RC 估计值为最终估计值(θ 取值大于 1.0,根据 RTT 动态调整,RTT 越大,越接近 1.0);
  • 丢包率大于设定的阈值(高)且处于 LossIncr 状态持续超过阈值,取 ACK 码率为最终估计值;
  • 其他情况,取 RC 估计值为最终估计值。
  • 对于深缓冲区网络,当网络出现拥塞时,传输延时呈现逐渐增加的趋势,所以 delay-based 算法能够及时检测网络处于拥塞状态,从而可以准确计算得到带宽估计值,并进行拥塞控制。
  • 而对于浅缓冲区网络,当网络出现拥塞时,延时没有增加或增加不明显,delay-based 算法无法或无法及时检测到网络处于拥塞状态。此时,需结合丢包率和丢包趋势进行估计。

网络带宽变化时,根据实时带宽估计值动态调整编码码率,示例:

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

(二)码率分配

通常,我们把带宽估计值的上限设置为视频的最大推荐码率(由视频质量控制 VQC 模块根据采集分辨率和帧率等计算得到)。当网络没有丢包时,带宽估计的所有码率,全部分配用于编码;当网络存在丢包时,采用前向纠错(FEC)+丢包重传(NACK)的策略,进行丢包恢复,因此,带宽码率分配时,需保证带宽估计值等于 FEC 码率+重传码率+编码码率三者之和,才不会导致网络拥塞。可见,丢包情况下,FEC 和重传码率会挤占编码码率,视频质量会有一定程度上的下降。

动态码率上限策略:根据过去一段时间统计的发送总码率与编码码率的比值,得到当前的带外系数样本值,经滤波平滑处理(取观察窗口内的均值)后,得到最终的带外系数,用它乘以编码最大推荐码率,作为新的带宽估计上限。上限值的更新采取快升慢降的策略。

通过动态上限机制,即通过计算带外系数,把带宽估计值的上限进行提升,在可用带宽足够的情况下,使 FEC 和重传码率占用带外码率,提升编码码率。

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

70% 丢包+2 Mbps 带限 VS 70% 丢包不限带宽,后者视频清晰度提升效果明显:

VS

(三)平滑发送

平滑发送(Paced Send)通过令牌桶限速机制来实现对发送速度的控制:所有待发送的 RTP 数据包(包括编码、FEC、重传包),都先放入优先级队列中进行管理,定时器根据带宽估计值和 Pacer 系数定期更新预算,当预算不为零时,直接发送队列中的数据并消耗预算,预算消耗完,暂停发送数据。

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

由 Pacer 系数控制平滑力度,若 Pacer 系数等于 1.0,则表示严格按照带宽估计值发送数据,此时对网络的突发冲击最小,有利于提升带宽利用率和稳定性,但可能会引入一定的帧发送延时(Pacer 延时)。

在音视频应用中,由于以下原因,往发送队列中添加数据的速率存在波动:

  1. 周期性的 I 帧、场景变化等导致编码器输出的帧大小、帧码率不均匀;
  2. 应对突发丢包而增加的 FEC、重传码率。

一方面要通过平滑减少码率波动峰值对网络造成的拥塞,避免引入大的拥塞延时导致卡顿,另一方面要减少较大帧的帧发送耗时,两者不可兼得。因此平滑系数的设置显得尤其重要,这实际上是 Pacer 延时、拥塞延时、带宽利用率、卡顿率等 QoE 评价指标之间的平衡。

极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题

动态 pacer 系数策略

设计原则:在带宽受限的时候,把平滑系数尽量设置小一些,并根据排队延时,动态增减。在带宽不受限时,把平滑系数设置大一些。结合当前带宽估计值和过去一段时间内(观察窗口期)的网络拥塞状态,判定带宽是否受限。

四、总结

本文主要介绍了网络 Qos 中的拥塞控制策略,包括带宽估计算法、码率分配以及平滑发送策略。拥塞控制应用到具体的音视频业务中,实际是各种 QoE 指标之间的平衡,算法的改进通常不是一蹴而就的,通过实验室弱网模拟结合线上灰度观察关键指标来验证,采用数据驱动的方式,帮助打磨出最合适的拥塞控制策略和参数:在保障低端到端播放延时、低卡顿率的同时,拥有高带宽利用率,为打造极致流畅的高品质音视频体验保驾护航。

作者介绍

王任,网易云信资深音视频引擎开发工程师,主要负责网络引擎的 QoS 算法开发,在流媒体传输协议、弱网对抗、拥塞控制算法设计方面有丰富的经验。

关于网易云信

网易云信:网易智企旗下融合通信云服务专家、通信与视频 PaaS 平台。集网易 24 年 IM 以及音视频技术打造的融合通信云服务专家,稳定易用的通信与视频 PaaS 平台。提供融合通信与视频的核心能力与组件,包含 IM 即时通讯、5G 消息平台、一键登录、信令、短信与号码隐私保护等通信服务,音视频通话、直播、点播、互动直播与互动白板等音视频服务,视频会议等组件服务,并联合网易易盾推出一站式安全通信方案「安全通」。目前,网易云信已经成功发送 1.6 万亿条消息,覆盖智能终端 SDK 数累计超过 186 亿,我们期待每个智能终端都有云信的融合通信能力。

文章标题:极致流畅体验的密码:网易云信 QoS 策略介绍|体验共享技术专题,发布者:网易智企,转载请注明出处:https://worktile.com/kb/p/5801

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
网易智企的头像网易智企认证作者
上一篇 2022年3月16日 下午10:21
下一篇 2022年3月16日 下午10:38

相关推荐

  • 软件开发版本排期工具有哪些

    软件开发版本排期工具有:一、Microsoft Project;二、Trello;三、TeamGantt;四、WPS Office;五、Smartsheet。Microsoft Project是一个由微软公司开发的项目管理软件。它可以帮助项目经理规划和监控项目进度、资源分配和成本控制。 一、Micr…

    2023年4月16日
    1.3K00
  • 研发项目管理台账

    标题:研发项目管理台账的构建与应用 研发项目管理台账是组织内对各种研发项目信息的集中记录与追踪系统,它支撑研发工作的有效推进、强化项目执行的透明度以及为管理层提供决策依据。一个典型的研发项目管理台账包含项目基本信息、研发进度、资源配置、财务预算等关键数据。1、构建符合组织实际需要的定制化维度;2、确…

    2024年1月10日
    31100
  • 仓库库存管理系统设计

    标题:仓库库存管理系统设计 仓库库存管理系统是物流管理中不可缺失的一环。重要性体现于高效率货物流转、准确数据分析以及成本控制。系统设计需要1、用户友好的界面设计;2、精确的库存追踪;3、灵活的库存分析工具;4、实时数据更新和5、安全的信息保障机制。解决传统库存管理中的盲点,即提供根据库存动态优化采购…

    2024年1月9日
    14500
  • devops是什么服务器

    DevOps不是一种服务器, 而是一套流程与方法论,旨在加强软件开发(DEVelopment)与IT运维(Operations)的协作,提升持续集成与快速部署的能力;3、重要的是,DevOps致力建立跨职能团队的文化,运用自动化工具链优化工作流程。 对于DevOps,可展开详细描述其引介出的持续集成…

    2024年3月26日
    1700
  • Android开发中用SQLite保存时间最好是存成什么类型

    Android开发中用SQLite保存时间最好是存成integer类型。unix时间是通用的标准表达方法,一般直接存成integer就好了,它只表示一串数字,当初设计保存成秒就是秒,保存成毫秒那就是毫秒。至于保存成datetime,即便是mysql上,一般也不怎么推荐。 Android开发中用SQL…

    2023年5月30日
    37100
  • 如何提高进度计划的准确性

    精确预估工作量、仔细考虑资源分配、引入调度弹性、应用恰当的进度管理工具是提高进度计划准确性的四个关键要素。详细而言,精确预估工作量要求深入了解项目的全部细节及其复杂性,它决定了整个进度计划的基础可靠性。 对精确预估工作量进行展开:应从历史数据、专家经验和任务分解入手。首先,收集历史数据能够提供先前相…

    2023年12月26日
    21000
  • DevOps如何提高故障排除速度

    DevOps能够通过自动化流程提高故障排除速度、采用监控和预警机制、实施持续的反馈循环和强化团队协作文化。较深入地揭示,自动化流程能够实现快速检测和响应问题。通过将重复性问题的诊断和修复编码成脚本,可以显著压缩问题定位和解决所需时间,这对于快速的故障恢复至关重要。 一、自动化流程 DevOps的一大…

    2024年1月18日
    13300
  • devops是什么时候提出的

    DevOps概念诞生于2009年左右,通过整合软件开发(Development)与信息技术运维(Operations)的实践和工具,目标在于缩短系统开发周期,确保持续交付高质量软件。专注于提升跨功能团队之间的沟通、合作与协同,DevOps已转型为一种新兴的IT文化基石,并通过一系列自动化手段大大提高…

    2024年3月26日
    2000
  • 真成投资李剑威:在非线性事业中建立成长秩序

    文| babayage 编辑 | 笑 笑 从咨询起步转型投资,李剑威的成长模式与众不同:非线性曲线、模块化能力沉淀、强调底层价值观、擅长把握核心价值、充分自信,比如“我们参与的项目战略层面不会出问题”。 非线性成长路径背后,是秩序井然的成长逻辑,是高效、精准沉淀长期价值的能力。 从咨询到投资 建立跨…

    2022年3月20日
    59800
  • devops 需要会什么

    DevOps领域要求掌握的技能广泛,涵盖自动化、编程、系统运维、项目管理至软件部署与监控等多个方面。紧跟这一跨学科领域发展的必备能力包括版本控制、编码与脚本编写、持续集成与持续部署、自动化测试、系统管理与监控。详解如下: 版本控制:版本控制是维护软件产品开发的完整性与追溯性的关键手段。使用如Git这…

    2024年3月26日
    2400

发表回复

登录后才能评论
站长微信
站长微信
电话联系

400-800-1024

工作日9:30-21:00在线

分享本页
返回顶部