展现音视频核心能力积累,揭秘“腾讯会议”背后黑科技

12月25日,腾讯云发布旗下云视频会议产品“腾讯会议”,致力于提升跨企业、跨区域沟通和协作效率,从根源帮助企业节省物力、人力、时间等成本,让企业只需花费一张机票钱,就可以省去全年跨地区开会的差旅费。作为一款云视频会议产品,“腾讯会议”集合了腾讯在AI、云计算、安全等方面的能力并进行突破创新,让用户足不出户就能实现高效沟通与专业协同。腾讯多媒体实验室,便是这些创新黑科技的提供者之一。

(腾讯携手合作伙伴,发布云视频会议产品“腾讯会议”)

得益于腾讯20余年业务音视频技术积累,此次发布的“腾讯会议”具备高清流畅、稳定可靠等产品特性,可以打破时间、空间限制,随时随地为用户打造专注的会议环境,提高沟通效率。腾讯多媒体实验室通过融合经典信号处理、心理听觉和深度学习理论,针对端到端音频通信链路上的复杂特性,打造出高品质、低时延、强抗性的新一代智能音频解决方案,提升用户的音视频体验。

为了提供安静的远程沟通环境,腾讯多媒体实验室对开会过程中可能碰到的多种嘈杂声音进行智能降噪,并针对性的对键盘声、咳嗽声、放水杯等常见会议噪声进行定点降噪,营造更加专注的会议环境。贴合用户个性化需求,在“腾讯会议”中加入美颜算法,女性用户无论通过手机端,还是PC端屏幕,都可以轻松参与任何重要会议,减轻用户心理负担。

    在互联互通方面,腾讯多媒体实验室打通了VoIP和PSTN传统话机等多种接入设备。支持从窄带、宽带到超宽带等多种采样率和带宽。通过音频超分等黑科技,确保用户接收到更加高清的语音品质,极大提升语音通信的可懂度和主观体验。考虑到语音通话系统的复杂性,腾讯多媒体实验室打造了面向真实网络场景的语音质量运维和保障方案。该方案可以实时检测通话的质量、对杂音和嘈杂声进行快速定位,持续保障高品质通话。

在质量评估方面,腾讯多媒体实验室拥有专业的音视频实验室和测试设备,任何技术都要经过层层考验,这其中有上百个符合ITU/3GPP/AVS等国内外标准的指标进行评判。同时,为了更好的衡量QoE(体验质量),腾讯多媒体实验室构建了大规模音视频主观质量数据库,并基于这些数据来研发客观质量评估算法,然后部署到业务线中,闭环监控全网的用户体验质量。

此外,腾讯多媒体实验室利用智能网络状态探测算法,以及基于数学推导的实时参数调整策略,全面覆盖用户的每一种网络连接类型,保证在复杂网络环境下,腾讯会议用户视频通话都能达到满意效果,再加上特有的基于用户体验的实时评估和调优系统,腾讯会议能达到各路流的动态平衡,保证用户视觉和听觉上的最优体验。

在安全性上,腾讯会议有腾讯七大安全实验室“保驾护航”,使用Web应用防火墙有效抵御OWASP 定义十大 Web 安全威胁攻击,同时在业务数据、管理机制、网络设备、接入策略方面进行多重安全防护。

凭借完善的音视频技术储备,腾讯多媒体实验室已经为腾讯内外产品的亿万用户提供音视频能力服务,包括在线教育、视频客服、互动游艺、企业办公、在线招聘、在线医疗等多个领域,腾讯旗下的QQ音乐、全民K歌、QQ空间直播、NOW直播,以及中国银行、中国平安、VIPKID、新东方、蘑菇街、斗鱼等相关场景的产品背后,均有腾讯多媒体实验室音视频能力的支撑。

目前腾讯多媒体实验室一方面在不断参与国际音视频标准的制定,近70个技术提案被 VVC 采纳,多人在标准组织中担任重要职务,并将王者荣耀推入标准测试序列。另一方面,腾讯多媒体实验室还一直在进行整个链路的传输,全球网络加速节点的优化。

作为国际行业标准不可忽视的影响者和领导者,腾讯多媒体实验室持续专注多媒体相关领域的前沿技术探索、研发和产品落地,包含音视频编解码、网络传输和实时通信,基于信号处理和深度学习的多媒体内容分析、理解、处理和质量评估,沉浸式媒体(VR、AR、点云等)系统设计和端到端解决方案;同时负责国际国内行业标准制定,包含多媒体数据压缩,网络传输协议,多媒体系统和开源平台等。