视频会议环境下面向语义通信的高鲁棒视频重建方法OA
在传统的视频会议场景中,如果用户网络带宽不足,就会出现严重的时延,卡顿现象,从而导致用户体验较差。与此同时,随着深度学习等技术的发展,目前已经出现了效果逼真的视频重建方法。现有的基于深度学习的视频重建方法可以很好地解决传统视频会议技术的带宽不足问题,其基于语义通信有广阔的应用前景,然而,当前视频重建方法在面部大幅扭动情况下重建效果差。针对这一挑战,提出了一种视频会议环境下面向语义通信的高鲁棒视频重建方法。首先,改进了现有的视频重建算法,引入来自于原始视频的压缩语义特征构建了新的面向语义的视频重建模型,其次,针对视频会议场景,提升了重建分辨率并设计了完整的视频重建方法。最后,实验和仿真结果表明,所提方法相比于传统视频会议方案降低了约三分之二的带宽,同时所提方法的重建效果,相比于当前基于深度学习的视频重建效果更具有鲁棒性,验证了所提视频重建方法的性能优势。
郭子睿;孙鲁楠;周英男;杨洋;杜忠田;郭彩丽;
北京邮电大学北京先进信息网络实验室,北京100876中电信数智科技有限公司,北京100035
电子信息工程
语义通信视频会议视频重建深度学习
《移动通信》 2024 (002)
P.83-89,110 / 8
北京市自然科学基金“基于语义率失真的语义通信理论与系统架构研究”(L222043);国家自然科学基金“基于知识增强信息瓶颈的语义编码理论与方法研究”(62371070)。
评论