面向在线教育应用的视频处理研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:wyt20070210
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
教育行业一直是民众关注的重点,随着我国经济发展和人民生活水平的提高,家庭消费中在教育投入大幅增加,教育相关的产业飞速发展。依托近年来互联网等信息技术的飞速发展,新兴的在线教育融合信息技术和互联网模式,涌现了多种在线教育形式,包括公开课、点播、直播等。这些在线教育产品都依托数字视频传输实现点播和直播,因此性能优良的数字视频传输系统对于在线教育产品的质量至关重要。数字视频传输系统主要包括视频编解码、视频传输等环节。视频编码主要完成数字视频信号的压缩编码,节省网络传输带宽。HEVC是新一代的视频编码标准,相对于前代编码标准,HEVC引入了很多新的压缩编码技术,具有优越的压缩编码性能,然而编码流程复杂,导致计算复杂度大幅提升,对低延时直播应用提出很大的挑战。在线教育的直播需要多方的实时视频通讯和互动,需要高效的音视频流媒体传输,以及复杂的信令逻辑控制。本文针对HEVC的高复杂度和在线教育场景下的直播视频传输进行了研究。运动搜索是编码器的关键模块,其在整个编码器复杂度中占比很高,而亚像素搜索又是运动搜索中占比很高的模块。本文针对HEVC亚像素搜素进行算法优化研究,相对于原始的全搜索算法,本文参考一元二次方程拟合和二次曲线拟合算法,预测最优亚像素点,编码率失真在一定范围内的前提下,有效减少亚像素插值次数,提高编码速度。此外本文研究HEVC率失真计算流程,针对亚像素运动搜索的率失真计算提出5种简化算法,有效减少计算复杂度。本设计参与在线教育直播系统实现,针对在线教育场景,实现直播系统的信令传输和视频流传输,通过websocket协议实现信令传输功能,通过RTP/RTCP实现视频流打包传输功能。为改善在线教育系统质量,提出了白板信令异步缓存优化、TURN SERVER主从集群优化、分区域录播缓存等多种系统优化方法,有效提高系统稳定性、负载能力和用户体验。该视频传输系统已经在某在线教育机构中上线使用,有效支持众多用户同时上线用。本文先介绍了HEVC关键技术,并分析HEVC亚像素搜索算法实现,随后具体介绍一次拟合、二次拟合和简化RDCost计算这三种优化算法的具体实现,通过标准序列和在线教育序列分析仿真实验结果和对比,在PSNR下降一定程度前提下,得到速率提升较快的优化算法。然后介绍在线教育直播系统框架,介绍了信令传输和视频流数据打包发送实现,具体分析白板信令异步缓存优化等系统优化方法,通过这些优化方法,解决了在线教育系统实际遇到的问题,在性能和用户体验方面有较明显的提升,能够投入实际线上教育场景使用取得较好的效果。
其他文献
无刷直流电机(Brushless DC Motor,BLDCM)既能保留直流电机机械特性好、起动转矩大、控制性能优良等特点,又兼具交流电机运行可靠、结构简单、维护方便、使用寿命长等优势,因而被广泛应用于旋翼无人机、无人水面艇、水下机器人、智慧医疗器械等智能制造领域。由于BLDCM具有非线性、强耦合、多变量的特点,故基于PID控制的传统BLDCM控制系统动态性能仍然存在诸多不足。而模糊控制则不需要依
突扩和突缩等局部阻力件的应用广泛存在于核能、石油、化工、冶金和航空等领域中。本文试图通过实验研究表面活性剂CTAB的添加对突扩和突缩管流水动力学特性的影响规律,揭示C
化工产品的生产和废水处理过程中,都会释放大量的含有机硫化合物的废气。这些废气具有强烈刺激性,即使浓度很低,也会产生恶臭气味并且对人身造成严重伤害。催化燃烧法是处理
说到如今的塔防游戏,人们会立即想到堵怪、堆积炮塔、搭配不同的防御炮等千篇一律的元素。如果你觉得传统类型的塔防游戏已经再也不能让你耳目一新的话,那么亚马逊在移动平台推出的首款游戏《空中爱国者(Air Patriots)》大概会改变你的这一看法。虽然这款游戏被归为防御类游戏,但游戏的玩法十分新颖,不再是枯燥的造塔防御,而是改为了控制一架飞机对敌人进行空袭,划动屏幕设置路径,对敌人进行轰炸。下面,就让我
本文结合珊溪水电站近坝区平面和高程监测网2001年1月~2008年12月的实测资料,就水电站近坝区平面和高程控制网在网型布置、外业监测及其精度等几方面内容进行分析探讨。