EN
2022年03月25日研究成果

智能化全景视频传输技术:一种概率式视窗码率分配方法

边凯归团队

        北京大学副教授、智源青年科学家边凯归,与爱奇艺高级总监庹虎合作研究,提出一个全新的基于人工智能技术(基于模式识别和集束搜索beam search)的全景视频流媒体系统EPASS360,可以有效地应用于工业级全景视频业务场景。EPASS360系统使用长短期记忆网络结合平台日常积累的大数据进行精准的用户视窗位置预估及带宽模式识别。根据预测结果,EPASS360建立在未来若干个视频片段上的用户体验最优化模型,并根据求解结果进行码率分配。EPASS360采用现在主流的用户体验建模方式,即以播放进程中可实时统计的视窗内内容码率(越高越好)、视窗内相邻区块的码率差异(越小越好)、视窗内固定位置区块的码率变化(越小越好)、卡顿时长(尽可能避免)四方面测量信息作为优化目标。与传统策略式流媒体系统不同的是,EPASS360根据不同的用户体验目标进行有针对性地优化,结合对播放进程的精准识别及预测,使得码率分配更为合理。 实验结果证明,EPASS360探索了一种工业界全景视频流媒体系统的解决方案,能够有效地解决超高清全景视频传输中带宽利用率不高的问题,并以最小的代价实现对用户体验的优化。该成果得到美通社(PR Newswire,PRN)、Yahoo! Finance等多家国际媒体报道。


边凯归.jpg


Yuanxing Zhang, Yushuo Guan, Kaigui Bian, Yunxin Liu, Hu Tuo, Lingyang Song, Xiaoming Li: EPASS360: QoE-Aware 360-Degree Video Streaming Over Mobile Devices. IEEE Trans. Mob. Comput. 20(7): 2338-2353 (2021)


分享到: