基于无人机的行驶车辆即时跟踪系统转让专利

申请号 : CN201810188883.1

文献号 : CN108573498B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 李绪臣

申请人 : 上海申雪供应链管理有限公司

摘要 :

本发明涉及一种行驶车辆即时跟踪系统,包括:标志获取设备,设置在无人机上,与标志检测设备连接,用于获取标志子图像和拟合处理图像,确定所述标志子图像的形状以及与所述标志子图像的形状对应的形心以作为第一形心输出,确定所述拟合处理图像的形状以及与所述拟合处理图像的形状对应的形心以作为第二形心输出;形心匹配设备,与所述标志获取设备连接,用于接收所述第一形心和所述第二形心,当所述第一形心和第二形心重合时,发出形心匹配信号,当所述第一形心和所述第二形心不重合时,确定所述第二形心到所述第一形心的运动矢量。通过本发明,能够在各种恶劣环境下实现对旅游车辆的有效随拍。

权利要求 :

1.一种行驶车辆即时跟踪系统,其特征在于,所述系统包括:

标志获取设备,设置在无人机上,与标志检测设备连接,用于获取标志子图像和拟合处理图像,确定所述标志子图像的形状以及与所述标志子图像的形状对应的形心以作为第一形心输出,确定所述拟合处理图像的形状以及与所述拟合处理图像的形状对应的形心以作为第二形心输出;

形心匹配设备,与所述标志获取设备连接,用于接收所述第一形心和所述第二形心,当所述第一形心和第二形心重合时,发出形心匹配信号,当所述第一形心和所述第二形心不重合时,确定所述第二形心到所述第一形心的运动矢量;

驱动控制设备,与所述形心匹配设备连接,用于接收所述运动矢量,并基于所述运动矢量和所述无人机的当前高度确定所述无人机的飞行控制信号,其中,所述飞行控制信号用于控制所述无人机的飞行以使得所述第一形心和第二形心重合;

飞行动力设备,与所述驱动控制设备连接,用于接收所述飞行控制信号,并基于所述飞行控制信号驱动所述无人机的飞行;

跟踪拍摄设备,设置在无人机上,用于对所述无人机的下方路况进行即时图像拍摄,以获得即时跟踪图像,并输出所述即时跟踪图像;

基点获取设备,与所述跟踪拍摄设备连接,用于接收即时跟踪图像,并基于对所述即时跟踪图像中最大目标轮廓的形状,选择在所述即时跟踪图像中绕过所述最大目标轮廓形状的曲线以作为目标曲线,并将所述即时跟踪图像中经过所述目标曲线的各个像素点作为基点像素;

明度测量设备,与所述基点获取设备连接,用于对所述即时跟踪图像中的各个基点像素执行以下数据统计操作:将基点像素的A通道值与B通道值相乘以获得分量乘积值,取基点像素的L通道值的平方值以获得分量平方值,将所述分量平方值除以所述分量乘积值以获得基点像素的统计数据;所述数据统计设备还用于将各个像素点的统计数据中出现频率最多的数值作为频率分析结果,以及将所述频率分析结果与参考限量比较,当所述频率分析结果小于所述参考限量时,确定所述即时跟踪图像的明度较低,否则,确定所述即时跟踪图像的明度较高;

定制滤波设备,分别与所述跟踪拍摄设备和所述明度测量设备连接,用于接收所述频率分析结果以及所述即时跟踪图像,基于所述频率分析结果确定对所述即时跟踪图像切割得到的区域数量,基于所述区域数量对所述即时跟踪图像进行区域切割处理,以获得多个图像区域,以及还基于每一个图像区域自身的噪声幅值确定对所述图像区域执行图像中值滤波的强度,以获得多个已处理图像区域,还用于将所述多个已处理图像区域进行图像组合处理以获得组合图像,以及将所述组合图像执行拟合处理以获得拟合处理图像;

标志检测设备,与所述定制滤波设备连接,用于接收所述拟合处理图像,并基于预设标志外形特征从所述拟合处理图像中检测出标志目标,并输出与检测出的标志目标对应的标志子图像;

其中,所述标志位于驾驶者所驾驶的车辆的车顶上。

2.如权利要求1所述的行驶车辆即时跟踪系统,其特征在于:

所述基点获取设备的运算被设置在大数据平台端实现。

3.如权利要求2所述的行驶车辆即时跟踪系统,其特征在于:

在定制滤波设备中,基于每一个图像区域自身的噪声幅值确定对所述图像区域执行图像中值滤波的强度包括:每一个图像区域自身的噪声幅值越大,确定对所述图像区域执行图像中值滤波的滤波像素窗口越大。

4.如权利要求3所述的行驶车辆即时跟踪系统,其特征在于:

在定制滤波设备中,基于每一个图像区域自身的噪声幅值确定对所述图像区域执行图像中值滤波的强度包括:每一个图像区域自身的噪声幅值越大,确定对所述图像区域执行图像中值滤波的滤波像素窗口越大,且确定对所述图像区域执行图像中值滤波的滤波像素窗口的面积不能超过所述图像区域的面积的十分之一。

说明书 :

基于无人机的行驶车辆即时跟踪系统

技术领域

[0001] 本发明涉及智慧交通领域,尤其涉及一种行驶车辆即时跟踪系统。

背景技术

[0002] 目前,开车自驾游已经成为旅游的一种风尚。自驾游能够带来各种方便,例如,可以自己安排旅游路线,而且旅游路线能够到达各种旅游团不关注的深度区域,避免了各种购物活动,同时,想停就停以及旅游时间灵活的特性,也使得自驾游为人们所青睐。
[0003] 一些对旅游体验更为重视的人们,围绕自驾游设计了很多旅游模式,例如,自行携带无人机,在驾驶车辆时,通过车内遥控无人机以保持无人机时刻跟踪车辆进行空中拍摄,例如,在草原上进行空中拍摄,从而能够真实地从空中录制出旅游的各种动态,为以后的回忆增添更多色彩和幅度。
[0004] 然而,采用车内遥控无人机以保持无人机追随车辆的方式,会因为车内的遥控人员的经验不足或操作情况而导致跟随效果不佳,同时,由于空中环境的恶劣程度,普通的图像拍摄设备和图像处理设备满足不了空中拍摄的需求。

发明内容

[0005] 为了解决上述问题,本发明提供了一种行驶车辆即时跟踪系统,在车辆上预设标志,采用图像识别方式从空中对标志进行跟踪以完成对车辆的跟踪,更重要的是,还采用了定制的图像拍摄设备和图像处理设备以满足空中拍摄的需求。
[0006] 本发明至少具有以下三个重要发明点:
[0007] (1)通过对车辆上方标志的图像定位,确定无人机的相应的跟踪模式,使得被跟踪车辆一直保持在所述无人机的下方视野内,从而简化了车辆空中跟踪的机制;
[0008] (2)在进行图像明度判断的过程中,从整体上剔除了目标的影响,同时还根据基点像素的各通道值的分布情况提供了测量图像明度的有效的解决方案;
[0009] (3)基于已采集图像的统计结果,确定对图像进行分区中值滤波的区域分割数量,以及实现中值滤波处理的分区域处理,从而不断提高图像中值滤波处理的自我学习能力。
[0010] 根据本发明的一方面,提供了一种行驶车辆即时跟踪系统,所述系统包括:
[0011] 标志获取设备,设置在无人机上,与标志检测设备连接,用于获取标志子图像和拟合处理图像,确定所述标志子图像的形状以及与所述标志子图像的形状对应的形心以作为第一形心输出,确定所述拟合处理图像的形状以及与所述拟合处理图像的形状对应的形心以作为第二形心输出;
[0012] 形心匹配设备,与所述标志获取设备连接,用于接收所述第一形心和所述第二形心,当所述第一形心和第二形心重合时,发出形心匹配信号,当所述第一形心和所述第二形心不重合时,确定所述第二形心到所述第一形心的运动矢量;
[0013] 驱动控制设备,与所述形心匹配设备连接,用于接收所述运动矢量,并基于所述运动矢量和所述无人机的当前高度确定所述无人机的飞行控制信号,其中,所述飞行控制信号用于控制所述无人机的飞行以使得所述第一形心和第二形心重合;
[0014] 飞行动力设备,与所述驱动控制设备连接,用于接收所述飞行控制信号,并基于所述飞行控制信号驱动所述无人机的飞行;
[0015] 跟踪拍摄设备,设置在无人机上,用于对所述无人机的下方路况进行即时图像拍摄,以获得即时跟踪图像,并输出所述即时跟踪图像;
[0016] 基点获取设备,与所述跟踪拍摄设备连接,用于接收即时跟踪图像,并基于对所述即时跟踪图像中最大目标轮廓的形状,选择在所述即时跟踪图像中绕过所述最大目标轮廓形状的曲线以作为目标曲线,并将所述即时跟踪图像中经过所述目标曲线的各个像素点作为基点像素。

附图说明

[0017] 以下将结合附图对本发明的实施方案进行描述,其中:
[0018] 图1为根据本发明实施方案示出的行驶车辆即时跟踪系统的操作示意图。

具体实施方式

[0019] 下面将参照附图对本发明的行驶车辆即时跟踪系统的实施方案进行详细说明。
[0020] 为了克服上述不足,本发明搭建了一种行驶车辆即时跟踪系统,能够在旅游中高效地对被跟踪车辆所在场景进行跟随式拍摄。
[0021] 图1为根据本发明实施方案示出的行驶车辆即时跟踪系统的操作示意图,所述系统包括:
[0022] 标志获取设备,设置在无人机上,与标志检测设备连接,用于获取标志子图像和拟合处理图像,确定所述标志子图像的形状以及与所述标志子图像的形状对应的形心以作为第一形心输出,确定所述拟合处理图像的形状以及与所述拟合处理图像的形状对应的形心以作为第二形心输出;
[0023] 其中,在图1中,标志被设置在最小的行驶车辆上,虚线部分表示无人机上的跟踪拍摄设备的拍摄范围;
[0024] 形心匹配设备,与所述标志获取设备连接,用于接收所述第一形心和所述第二形心,当所述第一形心和第二形心重合时,发出形心匹配信号,当所述第一形心和所述第二形心不重合时,确定所述第二形心到所述第一形心的运动矢量;
[0025] 驱动控制设备,与所述形心匹配设备连接,用于接收所述运动矢量,并基于所述运动矢量和所述无人机的当前高度确定所述无人机的飞行控制信号,其中,所述飞行控制信号用于控制所述无人机的飞行以使得所述第一形心和第二形心重合;
[0026] 飞行动力设备,与所述驱动控制设备连接,用于接收所述飞行控制信号,并基于所述飞行控制信号驱动所述无人机的飞行;
[0027] 跟踪拍摄设备,设置在无人机上,用于对所述无人机的下方路况进行即时图像拍摄,以获得即时跟踪图像,并输出所述即时跟踪图像;
[0028] 基点获取设备,与所述跟踪拍摄设备连接,用于接收即时跟踪图像,并基于对所述即时跟踪图像中最大目标轮廓的形状,选择在所述即时跟踪图像中绕过所述最大目标轮廓形状的曲线以作为目标曲线,并将所述即时跟踪图像中经过所述目标曲线的各个像素点作为基点像素;
[0029] 明度测量设备,与所述基点获取设备连接,用于对所述即时跟踪图像中的各个基点像素执行以下数据统计操作:将基点像素的A通道值与B通道值相乘以获得分量乘积值,取基点像素的L通道值的平方值以获得分量平方值,将所述分量平方值除以所述分量乘积值以获得基点像素的统计数据;所述数据统计设备还用于将各个像素点的统计数据中出现频率最多的数值作为频率分析结果,以及将所述频率分析结果与参考限量比较,当所述频率分析结果小于所述参考限量时,确定所述即时跟踪图像的明度较低,否则,确定所述即时跟踪图像的明度较高;
[0030] 定制滤波设备,分别与所述跟踪拍摄设备和所述明度测量设备连接,用于接收所述频率分析结果以及所述即时跟踪图像,基于所述频率分析结果确定对所述即时跟踪图像切割得到的区域数量,基于所述区域数量对所述即时跟踪图像进行区域切割处理,以获得多个图像区域,以及还基于每一个图像区域自身的噪声幅值确定对所述图像区域执行图像中值滤波的强度,以获得多个已处理图像区域,还用于将所述多个已处理图像区域进行图像组合处理以获得组合图像,以及将所述组合图像执行拟合处理以获得拟合处理图像;
[0031] 标志检测设备,与所述定制滤波设备连接,用于接收所述拟合处理图像,并基于预设标志外形特征从所述拟合处理图像中检测出标志目标,并输出与检测出的标志目标对应的标志子图像;
[0032] 其中,所述标志位于驾驶者所驾驶的车辆的车顶上。
[0033] 接着,继续对本发明的行驶车辆即时跟踪系统的具体结构进行进一步的说明。
[0034] 在所述行驶车辆即时跟踪系统中:
[0035] 所述基点获取设备的运算被设置在大数据平台端实现。
[0036] 在所述行驶车辆即时跟踪系统中:
[0037] 在定制滤波设备中,基于每一个图像区域自身的噪声幅值确定对所述图像区域执行图像中值滤波的强度包括:每一个图像区域自身的噪声幅值越大,确定对所述图像区域执行图像中值滤波的滤波像素窗口越大。
[0038] 在所述行驶车辆即时跟踪系统中:
[0039] 在定制滤波设备中,基于每一个图像区域自身的噪声幅值确定对所述图像区域执行图像中值滤波的强度包括:每一个图像区域自身的噪声幅值越大,确定对所述图像区域执行图像中值滤波的滤波像素窗口越大,且确定对所述图像区域执行图像中值滤波的滤波像素窗口的面积不能超过所述图像区域的面积的十分之一。
[0040] 在所述行驶车辆即时跟踪系统中:
[0041] 在定制滤波设备中,基于每一个图像区域自身的噪声幅值确定对所述图像区域执行图像中值滤波的强度包括:每一个图像区域自身的噪声幅值越大,确定对所述图像区域执行图像中值滤波的滤波像素窗口越大,且确定对所述图像区域执行图像中值滤波的滤波像素窗口的大小小于等于30像素乘以30像素。
[0042] 在所述行驶车辆即时跟踪系统中:
[0043] 所述第一形心和第二形心重合指的是,所述第一形心和第二形心的距离小于等于预设距离阈值。
[0044] 以及,在所述行驶车辆即时跟踪系统中:
[0045] 在所述定制滤波设备中,所述频率分析结果越小,对所述即时跟踪图像切割得到的区域数量越多。
[0046] 另外,图像滤波,即在尽量保留图像细节特征的条件下对目标图像的噪声进行抑制,是图像预处理中不可缺少的操作,其处理效果的好坏将直接影响到后续图像处理和分析的有效性和可靠性。
[0047] 由于成像系统、传输介质和记录设备等的不完善,数字图像在其形成、传输记录过程中往往会受到多种噪声的污染。另外,在图像处理的某些环节当输入的像对象并不如预想时也会在结果图像中引入噪声。这些噪声在图像上常表现为一引起较强视觉效果的孤立像素点或像素块。一般,噪声信号与要研究的对象不相关它以无用的信息形式出现,扰乱图像的可观测信息。对于数字图像信号,噪声表为或大或小的极值,这些极值通过加减作用于图像像素的真实灰度值上,对图像造成亮、暗点干扰,极大降低了图像质量,影响图像复原、分割、特征提取、图像识别等后继工作的进行。要构造一种有效抑制噪声的滤波器必须考虑两个基本问题:能有效地去除目标和背景中的噪声;同时,能很好地保护图像目标的形状、大小及特定的几何和拓扑结构特征。
[0048] 常用的图像滤波模式中的一种是,非线性滤波器,一般说来,当信号频谱与噪声频谱混叠时或者当信号中含有非叠加性噪声时如由系统非线性引起的噪声或存在非高斯噪声等),传统的线性滤波技术,如傅立变换,在滤除噪声的同时,总会以某种方式模糊图像细节(如边缘等)进而导致像线性特征的定位精度及特征的可抽取性降低。而非线性滤波器是基于对输入信号的一种非线性映射关系,常可以把某一特定的噪声近似地映射为零而保留信号的要特征,因而其在一定程度上能克服线性滤波器的不足之处。
[0049] 采用本发明的行驶车辆即时跟踪系统,针对现有技术中旅游空中随拍质量不佳的技术问题,通过对车辆上方标志的图像定位,确定无人机的相应的跟踪模式,使得被跟踪车辆一直保持在所述无人机的下方视野内,同时,在进行图像明度判断的过程中,从整体上剔除了目标的影响,并基于已采集图像的统计结果,确定对图像进行分区中值滤波的区域分割数量,以及实现中值滤波处理的分区域处理,提高了图像滤波效果,从而解决了上述技术问题。
[0050] 可以理解的是,虽然本发明已以较佳实施例披露如上,然而上述实施例并非用以限定本发明。对于任何熟悉本领域的技术人员而言,在不脱离本发明技术方案范围情况下,都可利用上述揭示的技术内容对本发明技术方案做出许多可能的变动和修饰,或修改为等同变化的等效实施例。因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰,均仍属于本发明技术方案保护的范围内。