一种面向无人机视频的多尺度摘要的设计与实现
2020-05-21杨大慎陈科圻马翠霞
图学学报 2020年2期
杨大慎,陈科圻,马翠霞
一种面向无人机视频的多尺度摘要的设计与实现
杨大慎1,陈科圻2,3,马翠霞2,3
(1. 中国石化销售有限公司华南分公司,广东 广州 510000;2.中国科学院大学计算机科学与技术学院,北京 100190;3. 中国科学院软件研究所人机交互北京市重点实验室,北京 100190)
无人机视频是利用无人机航拍得到的一类重要的视频资源,被广泛运用于地面目标的监测。但是,无人机视频的视野辽阔、不具有目标针对性的拍摄特点,使其存在大量时空冗余,传统的视频交互手段显得十分低效。为此,提出了一种面向无人机视频的多尺度螺旋摘要。首先,基于YOLOv3算法,训练能检测无人机视角的行人、车辆等目标的模型。然后,提出了基于关键帧的视频目标检测算法,根据改进后的基于颜色特征的关键帧提取算法提取涵盖视频关键信息的关键帧,并将检测模型应用于关键帧,高效获取整个视频的目标检测结果。之后,从关键帧中提取相应的关键区域,作为摘要的呈现单元,并以螺旋的形式从内向外地将摘要单元逐一呈现,辅以基于关键帧的视频定位和尺度缩放功能。最后,开发了草图注释、目标分布螺旋、双螺旋播放等新颖的交互工具,满足用户的潜在需求,共同实现面向无人机视频的高效交互。
无人机;视频摘要;视频目标检测;小目标检测;螺旋摘要;视频交互
无人机视频是利用无人机航拍得到的一类重要的视频资源,被广泛运用于地面目标的监测。……
登录APP查看全文
