导语: 黑丝诱惑 黑丝诱惑
东说念主类视觉系统(HVS)的磋磨发现,东说念主们在不雅察视频图像时,俗例把大部分防范力纠合在视觉聚焦点周围的小范围区域内,并赋予这个区域很高的鉴识率,而聚焦点外的范围则以较低鉴识率呈现,这种估量视觉矜恤区域的历程就叫权臣性检测。北帆海酬酢叉科学磋磨院、电子信息工程学院徐迈副训诲的磋磨团队开展了视频和图像权臣性检测模子的磋磨,遵循现已发表至《IEEE Transactions on Image Processing》、《International Conference on Computer Vision (ICCV)》、《Computer Vision and Pattern Recognition (CVPR)》等海外进攻期刊与会议上,并在多媒体通讯范围内引起平常好评。
磋磨配景:通讯说念路的“拥挤”
科研是为创造更好的当年,其灵感也源于施行生存的不及。通过智能末端观赏视频资源,也曾成为东说念主们日常生存中必不行少的圭表。用户对获得更高清视频需求在日益增长,使得通讯行业的热门,聚焦在了如何达成海量高清音像视频数据更高效地传输。
奇米影视盒官方下载视频通讯范围的瓶颈在于跟着超高清视频与全景视频的发展,辘集需要传输的数据量在贬抑推广,然而传输数据的带宽却是有限的。正如空间有限的公路上行驶的车越来越多,容易激发说念路拥挤。当下,有限带宽下的视频高效传输,已成为通讯行业亟待惩处的问题。
灵感开头:前沿热门的和会黑丝诱惑
徐迈赤诚过甚课题组的磋磨兴味为视频通讯与图像处理,他们在磋磨压缩编码的历程中受东说念主工智能和机器学习的启发,通过磋磨东说念主类不雅看视频的用户体验,为视频压缩提供了新的惩处想路。东说念主类视网膜荒谬于以亿为单元像素级别的高清相机,东说念主在不雅察视频图像时有一种聚焦“Attention(矜恤点)” 的机能,大略发扬“删繁就简”的功能智商,关于呈现给视觉的场景,独一咱们矜恤的地方会很明晰,而周围则会出现相对缺乏的情况。
受到启发的徐迈赤诚过甚课题组斗胆建议假定:如若为野心境赋予东说念主的视觉机能,压缩视频数据时在东说念主们视觉矜恤度高的区域分派更多的编码资源,使得视频压缩后仍大略达成东说念主们视觉体验上高质料的效果,同期在周围简易编码资源。鉴戒“Perceptual Video Coding(感知视频编码)”的“感知”时期,徐赤诚激动这一新的磋磨所在:栽培东说念主在视频图像中的矜恤区域估量模子,以估量视频图片场景中的视觉矜恤纠合域。
磋磨拓展:年青团队的联接
为了探索出东说念主类视觉矜恤区域的模子,徐迈赤诚指导团队张开磋磨。团队中最小的成员为别称大三年级的本科生,徐赤诚说:“学生的兴味与个东说念主智商,才是开展科学磋磨的要道身分”。因此在徐迈赤诚的团队中,学生年级呈现年青化的特色。
磋磨团队通力联接,从数据开拔,利用机器学习时势挖掘东说念主体视觉领路法规。团队邀请多位被试者走进实验室,记载被试者不雅看视频时矜恤区域的适度数据,以骨子辘集到的数据为开动,掌握扶持向量机和深度学习时势栽培机器学习模子,达成视频矜恤区域的估量。
徐迈赤诚团队视频权臣性检测的磋磨遵循,不但能应用于视频图像压缩,还大略应用于多种范围,如对网页和展示排版想象范围提供指令,通过合理安放图标、笔墨,调度配图、配色,不错达到最猛进度引诱视觉防范力的指标。而徐迈赤诚团队的下一步磋磨重心,将尝试拓展至具有“交互性、千里浸式”特色的全景视频簇新范围。团队也将研究与其他科研团队的联接决策,达成多学科之间相互交叉磋磨。
筹划/案牍:秦煜瑶、张金星
外文剪辑:刘昕睿
想象:秦煜瑶 时期:曹嘉辉
鸣谢:海酬酢叉科学磋磨院、电子信息工程学院徐迈副训诲
编审:派系网站总编总管责任室
投稿:geoos@buaa.edu.cn