Techo Park开发者大会召开,腾讯天籁实验室发布《联合信源信道编码白皮书》
12月19日至20日,由腾讯主办的2020Techo Park开发者大会于北京顺利召开。本次大会汇聚了全球顶尖行业专家和技术爱好者,聚焦音视频、大数据、人工智能、5G边缘计算及物联网等众多热点技术话题展开深度探讨。
2020年突如其来的疫情,让数字通信成为人与人沟通的重要手段,同时也对实时音视频通信的稳定性和通讯效果带来了极大考验。在网络传输过程中,实时音视频通信需要面对用户体验、运营成本的双重约束。
会上,腾讯天籁实验室专家研究员肖玮发布了《联合信源信道编码技术白皮书》,结合信源、信道的联合优化策略,综合经典信号处理和深度学习新技术的腾讯天籁联合信源信道编码方案,目前该方案已在腾讯会议等亿级产品中进行验证,在保障用户体验的同时,显著降低带宽和延时。
腾讯天籁实验室专家研究员 肖玮
疫情常态化下,实时音视频通信面临用户体验和运营成本双重考验
2020年疫情突如其来,在线办公、在线教育等需求的增加,对实时音视频通信RTC的稳定性和通讯效果提出了极大考验。由于业务量激增,在保障用户体验方面,RTC业务面临着诸多困难,包括但不限于通话质量、最小化卡顿、端到端延时、带宽成本等。在网络传输过程中,RTC方案需要面对用户体验、运营成本的双重约束,挑战很大。
肖玮对RTC复杂的链式系统进行了介绍,以单侧的发送端到接收端通信为例,RTC要经过采集、前处理、编码、传输、解码、增强、回放等多个阶段,每个阶段都会影响最终体验。从端到端到角度,影响通话体验的因素,可以分成信源和信道链路两个部分。采集端只有完整地将信源传输到接收端,用户才能获得高质量体验;否则,如果中间数据包丢失了,就会发生声音卡顿等现像。
端到端视角下音频通话体验的影响因素
肖玮强调,RTC业务中,传输过程中出现丢包是一个重要的挑战。因此,网络抗性提升是RTC业务绕不开的话题。针对网络抗性问题,主流的RTC解决方案是围绕信道侧方法进行。如果完全依赖信道侧方法,实际应用中又面临着其它问题。一方面,如果网络抗性完全来自于带外,将会导致带宽成本激增;另一方面,重传等操作意味着要进行包的组合、解析等迭代操作,增加时延。因此,要打造一个好的RTC通话体验,需要联合信源和信道,自顶向下地设计系统。
腾讯天籁联合信源信道编码方案针对网络抗性提出三大策略
为了解决以上问题,腾讯天籁实验室提出了联合信源信道编码策略,并发布了《联合信源信道编码白皮书》。首先,提升信源侧方法的能力上界。相对于标准带内FEC,新的信源侧FEC需要更强的单独抗性。比如,支持40丢包率。其二,灵活调用带外和带内抗性,以期在抗性稳定性和带宽消耗上有一个更为灵活的折衷。相关的控制参数,借助于测试平台提供的经验数据进行迭代升级。第三,前向兼容性问题,要保证新旧两种协议无互通问题。
联合信源信道编码基本框架
据肖玮介绍,腾讯天籁联合信源信道编码方案,通过有效地组合信源和信道侧的抗性策略,保证用户体验的同时,有效降低带宽和延时成本。值得一提的是,在各种网络传输条件下的测试结果标表明,该方案可以降低带宽30;同时,进一步降低延时40-60ms,进一步提升用户体验。
目前,腾讯天籁新新技术联合信源信道编码方案已经在腾讯会议上线。肖玮表示,结合了信源、信道的联合优化策略、结合经典信号处理和深度学习的新技术,将成为未来RTC解决方案中的关注点。此次联合信源信道编码方案的发布,也标志着腾讯天籁实验室在实时音视频通信领域的又一个突破性进展。
一直以来,为了解决实时音视频应用场景下的各种挑战,腾讯天籁实验室围绕音频通信核心体验的技术和框架进行了深入的探索。在今年9月举办的腾讯全球数字生态大会上,正式发布了“面向实时音视频应用的新一代实时音频技术品牌”——腾讯天籁。
肖玮表示,腾讯天籁技术和联合信源信道编码方案仅仅是一个开始,未来,腾讯天籁实验室将继续钻研音视频新技术为满足更多行业场景下的实时音视频需求,推进更多更丰富的场景落地而努力。
相关阅读
最新文章
随机推荐
- 女神伊能静图什么?就涂神仙贵妇膏,轻松留驻青春容颜,为魅力加分!
- “指”的就是玩手机的你!解密屏下指纹解锁技术 | 钛科普
- 【森防前沿】沾河局 积极筹划做好春防工作
- 金螳螂家:加强战略布局纵深,2017再拓新城
- 捷报!蒂森电梯与旭和贸易达成战略合作伙伴关系
- 全民直播时代,蜜源·灿播打造线上线下直播新模式
- 荷裕口腔材料:始终以关爱全体国民的口腔健康为己任
- 2017国际美食美酒图书颁奖典礼将于烟台盛大开启
- 华为Mate20新渲染图:浴霸又亮了
- 格局企业互联网产品专家柳文龙荣获中国职业经理人交流大会“中国优秀职业经
- iOS12正式版将至!你想了解的全在这了
- 第二届丹桂文化旅游节新闻发布会在福建浦城召开
- “环保先锋智尚紧凑型SUV”得主DS7 环保科技实力领先
- 上海闵行科普日“科学阅未来”,大咖科普作家带你“悦”读科幻
- 河北建工省四建四分公司安全生产月活动启动仪式在施工一线举行
- 可移动的科沃斯沁宝 AIRBOT Ava靠谱吗?它真的能实现全屋净化吗?
- 分散式与集中式并重,自如战略并购贝客或将领跑行业长效发展
- 百家号打造“匠心计划”,百亿流量、5000万签约基金砸向专业创作者!
- 电热毛巾架销量之王 艾芬达双11再夺冠:连续4年蝉联品类销量第一
- 桦川县电子商务进农村综合示范项目致富带头人电商知识培训大会圆满结束
最新评论
更多评论