DAV首页
数字音视工程网

微信公众号

数字音视工程网

手机DAV

null
null
null
卓华,
null
null
null
null
null
null
null

我的位置:

share

【itc干货分享】视频会议中核心音频处理技术解析

来源:itc        编辑:lsy631994092    2021-04-13 08:41:03     加入收藏

WebRTC技术即实时通信技术,由语音引擎,视频引擎和网络传输三大模块组成,其中语音引擎是WebRTC中最具价值的技术之一,也是视频会议系统为提升音频处理能力...

  WebRTC技术即实时通信技术,由语音引擎,视频引擎和网络传输三大模块组成,其中语音引擎是WebRTC中最具价值的技术之一,也是视频会议系统为提升音频处理能力而采用的一项重点技术,实现了音频数据的采集、前处理、编码、发送、接受、解码、混音、后处理、播放等一系列处理流程。

  音视频数据的处理有个预处理过程,也就是在音视频数据采集完成之后的一步,主要是对采集录制的音频数据的预处理,预处理技术用的是3A处理,即AEC  (Acoustic Echo Cancellation) 回声消除,ANS  (Automatic Noise Suppression) 降噪,和AGC  (Automatic Gain Control) 自动增益控制。itc视云4.0远程视频会议系统采用3A音频处理技术 ,从技术层面提高语音清晰度,最大程度还原现场原声的沟通效果。

  AEC

  回音消除(AEC)是为了消除机器自身发出的声音,不影响外界传递过去的声音。如在双工通话的场景中,将来自远端的经过扬声器放出来的声音消掉,否则经过麦克风采集和近端说话人信号混在一起被传递到远端,会导致回声甚至造成啸叫,这种回声对于一些通信设备来说体验是非常差的。

  使用不同的自适应滤波算法调整滤波器的权值向量,估计一个近似的回声路径来逼近真实回声路径,从而得到估计的回声信号,并在纯净语音和回声的混合信号中除去此信号来实现回声的消除。

  ANS

  噪声抑制(ANS)可探测出背景噪音并消除,呈现出与会者清晰的声音。

  背景噪声分为平衡噪声和瞬时噪声两类,平稳噪声的频谱稳定,瞬时噪声的频谱能量方差小,利用噪声的特点,对音频数据添加反向波形处理,即可消除噪声。

  AGC

  自动增益控制(AGC),是使放大电路的增益自动地随信号强度而调整的自动控制方法,主要用于调整音量幅值。

  正常人交谈的音量在40~60dB之间,低于25dB的声音听起来很吃力,超过100dB的声音会让人不适。AGC的调整分为模拟部分和数字部分,模拟部分是麦克风的采集增益,数字部分是音频数据的数字电平调整,最终将音量调整到人接受的范围。

  AEC的作用就是通过播放的参考信号跟踪出回声并从采集信号中把回声消除掉,随后再经过ANS降噪处理去除噪声,清澈音频效果。可为输入的音频数据带来明显的质量优化,如提高信噪比,避免输入信号溢出等。AGC可以根据对输入信号的跟踪,尽可能将信号调整至期望大小(幅值或能量),从而避免不同设备采集带来的音量差异过大。itc视云4.0远程视频会议系统 通过3A音频处理 ,集成唇音同步、回声消除、噪声消除、自动增益等音频编解码技术,还原会议现场原声效果,带来亲临其境的高效沟通。

  itc视云4.0远程视频会议系统的通过用高质、高效的视频编解码器实现远程会议的4K高清交流体验,降低延时,减少画质损耗,全球视频传输技术20%丢包的情况下,依旧呈现4K高清画质,1M网络即可接入1080P会议,2M网络可达4K视频效果,支持有线网络、WiFi、4G信号等各种网络接入,实现手机端、电脑端、平板端、硬终端等任意设备随时随地流畅与会。

  会议资料与主讲人画面同屏显示,进行资料共享、重点批注,语音转文字并存储、会议内容录制等智会应用,满足数字会议建设需求,高效决策。云架构设计支持服务器相互备份,保障会议无间断进行。

  itc视云4.0系统广泛应用于政府、公检法、集团企业、医疗、教育、金融、景区、园区等各个行业。

免责声明:本文来源于itc,本文仅代表作者个人观点,本站不作任何保证和承诺,若有任何疑问,请与本文作者联系或有侵权行为联系本站删除。
扫一扫关注数字音视工程网公众号

相关阅读related

赛普,

评论comment

 
验证码:
您还能输入500