​微信公众号
手机版
​​新浪微博
会员登录
关于我们  |   商务合作  |  友情链接   |  意见反馈  |  人才招聘
北京云翼同创科技有限公司 深圳高博特文化发展有限公司   版权所有,并保留所有权利 © 2018 京ICP备16044150号-1                       

跨界 · 融合 · 服务 · 创新



双击此处添加文字
新闻聚焦
行业技术
首页  >  新闻聚焦   >  行业技术  >   详情
基于深度学习与光电探测的无人机防范技术
来源:AUVSC | 作者:杨名宇 王 浩 王含宇 | 发布时间: 2022-02-21 | 11392 次浏览 | 分享到:
无人机的无序“黑飞”带来一系列安全及社会问题,如何有效地对无人机进行探测、识别甚至打击是当今研究的热点与难点……

摘要:无人机的无序“黑飞”带来一系列安全及社会问题,如何有效地对无人机进行探测、识别甚至打击是当今研究的热点与难点。为此,本文首先搭建了基于转台与高清可见光相机的无人机目标实时光电探测系统,并构建了一个由40 000帧无人机图像组成的样本库;其次,为了更远、更早地发现目标,在YOLOv3模型基础上增加更小的特征尺度,使得模型对小目标检测效果提升;最后,为了实现无人值守、全自动式无人机目标的探测与跟踪,提出一种基于更小特征尺度的YOLOv3与KCF相结合的模型,并通过外场试验确定了无人机目标跟踪过程中,目标丢失时所对应的阈值参数的选取。结果表明,通过在包含大疆御Pro、精灵3等无人机在内的8 000帧无人机图像组成的静态测试集上进行实验,增加更小特征尺度后的模型对小目标的识别率较之原始YOLOv3模型提高约5%;对于1 280×720分辨率的动态视频,每帧检测时间为0.025~0.030 s(33 fps),且根据选定的阈值,当无人机目标丢失后可重新进行检测,每帧跟踪时间为0.010~0.012 s(85 fps),验证了所提方法的有效性,并可满足工程应用中对实时处理的需求。

关 键 词:无人机防范;光电探测;深度学习;YOLOv3模型;KCF模型

1 引 言

近年来,随着无人机产业的迅猛发展和广泛应用,对全球低空安全管理造成了前所未有的严峻压力,非法放飞无人机所带来的安全隐患给机场、边境、监狱、重要敏感区域的低空防范敲响了警钟,引发公众高度关注。无人机的无序飞行时有发生,不仅严重扰乱空域交通秩序,还会引发很多安全问题。如在2018年底,英国西斯罗机场由于无人机的“黑飞”,使得机场关闭数天,滞留旅客上万人,造成巨大经济损失。目前,绝大部分无人机为受控状态,即无人机的购买需要实名制,且每次飞行的航迹、时间、地点等信息通过GPS信号都可在监管部门的后台查询到。在这种情况下,可以较为容易地锁定每台飞机以及飞机拥有者。上述受控监管模式目前已能覆盖大约90%以上的消费级无人机,剩余10%的无人机包括自行研发的、私自拆掉GPS模块的等,则处于非受控状态,是低空防范的重点和难点。如何对非受控的无人机目标进行检测、识别与跟踪,是当前全世界各国普遍存在的难题[1-2]。

当前,无人机防范常用手段主要包括:光电探测、无线电探测、声学探测、雷达探测等[3]。光电探测主要利用光学设备通过成像的方式判断目标是否存在,具有直观、易读等优点,但通常作用距离较小,且探测效率较低,距离实际工程应用尚有差距[4-9]。无线电干扰主要通过特定频段的无线电波阻断无人机和飞行控制器之间的无线链路,使飞行控制器无法向无人机发送信号。但此方法并不是对于所有型号的无人机都适用(如大疆的云哨系统,该系统只对大疆旗下的无人机有效),同时,可视化程度差。声学探测通常用于大型无人机等的探测,在城市环境下使用时易受到背景噪声干扰。雷达探测可同时获得目标的位置、速度等信息,但是对于民用无人机而言,其雷达散射面积较小,同时无人机飞行高度较低、飞行速度较慢、体积较小,即“低慢小”,对于此类目标,雷达探测存在效能不足等问题。

针对现有光电探测手段存在的不足,本文搭建了一套由转台、高清可见光相机、图像采集与处理设备组成的地面式无人机探测与跟踪系统,在YOLOv3模型基础上增加了更小尺度特征,并提出一种基于更小尺度的YOLOv3与KCF相结合的模型。实验结果表明,所提方法可以对无人机目标实现全自动式检测与跟踪,且远距离小目标识别率比原始YOLOv3模型高5%。对于1 280×720分辨率的动态视频,每帧检测时间为0.025~0.030 s,且根据选定的阈值,当无人机目标丢失后可重新进行检测,每帧跟踪时间为0.010~0.012 s,验证了所提方法的有效性,并可满足工程应用中对实时处理的需求。

2 深度学习简介

深度学习的概念是Hinton等人于2006年首次提出的[10],其从一问世就备受学术界关注,原因在于相比于其他方法与结构,多隐层的人工神经网络能够更好地模拟人脑的思考过程,具有更加优异的学习及泛化能力,能够更有效、更本质地对目标的特征进行提取与描述,从而提升对各类目标的分类与识别能力。

卷积神经网络是深度学习中第一个真正多层结构学习算法,其在图像识别领域优势明显。它利用感受野局部连接等概念极大地减少了参数量,降低了网络模型的复杂度,提高了训练效率,且网络对于平移、缩放的各种变形都具备较高的不变性[11-12]。一个卷积神经网络通常包括卷积、降采样、激活、池化以及全连接等操作,卷积层和降采样层实现对目标低层特征的提取,通过多个卷积层来模拟人脑感知视觉信号的逐层处理机制;激活主要实现非线性变换,常用Sigmoid、ReLU等非线性函数实现;池化操作主要实现高层特征的提取,全连接实现对目标最终的分类[13]。

3 基于深度学习的无人机目标识别与跟踪

3.1 图像获取

目前,各类开源的深度学习数据集中客机、直升机等类图像较多,无人机类图像较少。此外,在进行地面式无人机防范时,地面探测系统对于空中无人机的观测视角应为仰视,现有数据集中包含的无人机类图像多为平视,直接使用开源数据集中的图像可能会导致漏检情况发生。因此,无人机类目标图像需要通过自行拍摄获得。