webRTC中音頻相關的netEQ（一）：概述
上篇文章（語音通信中終端上的時延(latency)及減小方法）說從本篇開始會切入webRTC中的netEQ主題，netEQ是webRTC中音頻技術方面的兩大核心技術之一（另一核心技術是音頻的前后處理，包括AEC、ANS、AGC等，俗稱3A算法）。webRTC是Google收購GIPS重新包裝后開源 ...
原文：webRTC中音頻相關的netEQ（五）：DSP處理
上篇 webRTC中音頻相關的netEQ 四 ：控制命令決策 講了MCU模塊是怎么根據網絡延時 抖動緩沖延時和反饋報告等來決定給DSP模塊發什么控制命令的。DSP模塊根據收到的命令進行相關處理，處理簡要流程圖如下。 從上圖看出如果有語音包從packet buffer里取出來先要做解碼得到PCM數據，沒有就不用做解碼了。編解碼也是數字信號處理算法的一種，是個相當大的topic，不是本文所關注的，本文 ...
2018-11-20 07:41 2 2201 推薦指數：
相關推薦
webRTC中音頻相關的netEQ（四）：控制命令決策
上篇（webRTC中音頻相關的netEQ（三）：存取包和延時計算）講了語音包的存取以及網絡延時和抖動緩沖延時的計算，MCU也收到了DSP模塊發來的反饋報告。本文講MCU模塊如何根據網絡延時、抖動緩沖延時和反饋報告等決定發給DSP模塊的控制命令， 好讓DSP模塊先對取出的語音包做解碼處理（如果有的話 ...
webRTC中音頻相關的netEQ（二）：數據結構
上篇（webRTC中音頻相關的netEQ（一）：概述）是netEQ的概述，知道了它主要是用於解決網絡延時抖動丟包等問題提高語音質量的，也知道了它有兩大單元MCU和DSP組成。MCU 主要是把從網絡收到的語音RTP包放進packet buffer內，同時也會根據計算出來的網絡延時和抖動緩沖延時 ...
webRTC中音頻相關的netEQ（三）：存取包和延時計算
上篇（webRTC中音頻相關的netEQ（二）：數據結構）講了netEQ里主要的數據結構，為理解netEQ的機制打好了基礎。本篇主要講MCU中從網絡上收到的RTP包是怎么放進packet buffer和從packet buffer里取出來，以及網絡延時值（optBufLevel）和抖動緩沖延時 ...
白話解讀 WebRTC 音頻 NetEQ 及優化實踐
NetEQ 是 WebRTC 音視頻核心技術之一，對於提高 VoIP 質量有明顯的效果，本文將從更為宏觀的視角，用通俗白話介紹 WebRTC 中音頻 NetEQ 的相關概念背景和框架原理，以及相關的優化實踐。 作者｜ 良逸 審校｜ 泰一 為什么要 “白話” NetEQ? 隨便搜索一下 ...
WebRTC中音頻設備的約束有哪些以及使用的方法
音頻約束參數 volume 音量約束 sampleRate: 采樣率 sampleSize: 采樣大小，采樣的位數 echoCancellation: 回音消除 autoGaincontrol： 增加音量 noiseSuppression: 降噪 latency ...
WebRTC中的NetEQ
NetEQ使得WebRTC語音引擎能夠快速且高解析度地適應不斷變化的網絡環境，確保了音質優美且緩沖延遲最小，其集成了自適應抖動控制以及丟包隱藏算法。 WebRTC和NetEQ概述 WebRTC WebRTC （Web Real-Time Communications） 是一項實時通訊技術 ...
WebRTC APM音頻處理流程概述
本文主要介紹WebRTC的APM。 現在主要介紹一下audio_processing.h。 首先插入了幾個類，這些都是audio_processing的核心模塊。 class AudioFrame; class EchoCancellation; class ...