一种轿车加装脚踏板的智能检测系统及方法转让专利

申请号 : CN201710949537.6

文献号 : CN107976319B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 周康明

申请人 : 上海眼控科技股份有限公司

摘要 :

本发明公开了一种轿车加装脚踏板的智能检测系统及方法,包括目标检测模块和判断模块,其中,所述目标检测模块包括车辆目标检测单元、脚踏板目标检测单元和脚踏板检测标志判断单元;所述车辆目标检测单元获取车辆区域图像,所述脚踏板目标检测单元对车辆区域图像进行检测并识别出脚踏板,脚踏板检测标志判断单元将档案图片与待检测图片脚踏板检测标志进行比对,所述判定模块对整个检测流程的结果进行综合判定。本发明主要应用于机动车车辆年检中轿车加装脚踏板检测,实现了检测过程中的全程自动校验,同时可以将未通过的检测图像及原因传回服务器保存留待取证,既节约了人力,又保证了校验工作的公正、公开。

权利要求 :

1.一种轿车加装脚踏板的智能检测方法,其特征在于,包括如下步骤:S1、从服务器下载待检测车辆图片及对应档案图片;

S2、采用基于深度学习网络的车辆目标检测模型检测车辆,判断待检测车辆图片中车辆目标是否存在,若存在则记录此条标志为0,提取车辆区域图像;若不存在则记录此条标志为1,并保存相关图片,进入统计分析流程;

S3、采用基于深度学习网络的车辆目标检测模型检测车辆,判断档案图片中车辆目标是否存在,若存在则记录此条标志为0,提取车辆区域图像;若不存在则记录此条标志为1,并保存相关图片,进入统计分析流程;

S4、采用基于深度学习网络的脚踏板目标检测模型检测从待检车辆图片中提取的车辆区域图像,判断脚踏板是否存在,若存在则记录此条标志为0,提取脚踏板区域图像;若不存在则记录此条标志为1;

S5、采用基于深度学习网络的脚踏板目标检测模型检测从档案图片中提取的车辆区域图像,判断脚踏板是否存在,若存在则记录此条标志为0,提取脚踏板区域图像;若不存在则记录此条标志为1;

S6、判断待检测车辆图片脚踏板检测标志与档案图片脚踏板检测标志是否一致,若一致,则记录此条标志为0;若不一致,则判断档案图片脚踏板检测标志是否为0,若为0则记录此条标志为0,若为1,则记录此条标志为1;

S7、对整个过程的动作结果进行统计分析,若输入此模块标志为0,则检测通过;若输入此模块的标志存在标志1,则检测不通过,同时根据标志为1出现的位置可获取检测未通过原因及问题图片。

2.如权利要求1所述的智能检测方法,其特征在于,所述车辆目标检测模型的获取步骤如下:S21、获取不同车型在不同光照条件,不同角度拍摄的车辆图像;

S22、采用矩形框标记车辆区域图像所在位置;

S23、使用所述车辆区域图像训练目标检测深度神经网络模型,获得车辆目标检测模型。

3.如权利要求1所述的智能检测方法,其特征在于,所述脚踏板目标检测模型的获取步骤如下:S31、获取装有脚踏板的不同车型的车辆图像,车身顶部脚踏板区域需完整;

S32、截取车辆区域图像;

S33、采用矩形框标记脚踏板区域图像所在位置;

S34、使用所述脚踏板区域图像训练目标检测深度神经网络模型,获得脚踏板目标检测模型。

说明书 :

一种轿车加装脚踏板的智能检测系统及方法

技术领域

[0001] 本发明涉及机动车车辆年检的人工智能判断技术领域,特别涉及一种轿车加装脚踏板的智能检测系统及方法。

背景技术

[0002] 随着社会经济的不断发展和人民生活水平的持续提高,城市机动车保有量迅猛增长。机动车作为重要的交通参与者,必须具备良好的安全性和可靠性。然而,部分机动车保有者安全意识单薄,对机动车进行非法改装。非法改装后的车辆未经过安全性测试,可能会增加交通事故发生的概率及严重性。因此,严格地检测车辆是否改装对于维护交通安全非常重要。
[0003] 传统的车辆加装脚踏板检测主要是通过人工完成,该方法人工成本较高,效率较低,且长时间重复性校验操作容易产生疲劳,易疏忽等不良状态,影响校验准确率。
[0004] 如何准确、快速地对车辆是否加装脚踏板进行校验,同时避免人工校验成本高,易疲劳,易疏忽等弊端,是继续解决的技术问题。

发明内容

[0005] 本发明的目的是:提出一种轿车加装脚踏板智能检测系统及方法,自动检测车辆是否加装脚踏板,以满足如今对车辆年检工作效率、准确率的需求。
[0006] 本发明解决其技术问题所采用的技术方案是:
[0007] 一种轿车加装脚踏板智能检测系统,包括目标检测模块和判定模块,其中,所述目标检测模块包括车辆目标检测单元、脚踏板目标检测单元和脚踏板检测标志判断单元;所述车辆目标检测单元通过车辆目标检测模型检测车辆图像,获取车辆区域图像,所述脚踏板目标检测单元利用脚踏板目标检测模型对车辆区域图像进行检测,并识别出脚踏板,所述脚踏板检测标志判断单元将档案图片与待检测图片脚踏板检测标志进行比对,所述判定模块对整个检测流程的结果进行综合判定,并反馈未通过的原因及图片。
[0008] 一种轿车加装脚踏板智能检测方法,包括如下步骤:
[0009] S1、从服务器下载待检测车辆图片及对应档案图片;
[0010] S2、采用基于深度学习网络的车辆目标检测模型检测车辆,判断待检测车辆图片中车辆目标是否存在,若存在则记录此条标志为0,提取车辆区域图像;若不存在则记录此条标志为1,并保存相关图片,进入统计分析流程;
[0011] S3、采用基于深度学习网络的车辆目标检测模型检测车辆,判断档案图片中车辆目标是否存在,若存在则记录此条标志为0,提取车辆区域图像;若不存在则记录此条标志为1,并保存相关图片,进入统计分析流程;
[0012] S4、采用基于深度学习网络的脚踏板目标检测模型检测从待检车辆图片中提取的车辆区域图像,判断脚踏板是否存在,若存在则记录此条标志为0,提取脚踏板区域图像;若不存在则记录此条标志为1;
[0013] S5、采用基于深度学习网络的脚踏板目标检测模型检测从档案图片中提取的车辆区域图像,判断脚踏板是否存在,若存在则记录此条标志为0,提取脚踏板区域图像;若不存在则记录此条标志为1;
[0014] S6、判断待检测车辆图片脚踏板检测标志与档案图片脚踏板检测标志是否一致,若一致,则记录此条标志为0;若不一致,则判断档案图片脚踏板检测标志是否为0,若为0则记录此条标志为0,若为1,则记录此条标志为1;
[0015] S7、对整个过程的动作结果进行统计分析,若输入此模块标志为0,则检测通过;若输入此模块的标志存在标志1,则检测不通过,同时根据标志为1出现的位置可获取检测未通过原因及问题图片;
[0016] 进一步,所述车辆目标检测模型的获取步骤如下:
[0017] S21、获取不同车型在不同光照条件,不同角度拍摄的车辆图像;
[0018] S22、采用矩形框标记车辆区域图像所在位置;
[0019] S23、使用所述车辆区域图像训练目标检测深度神经网络模型,获得车辆目标检测模型。
[0020] 进一步,所述脚踏板目标检测模型的获取步骤如下:
[0021] S31、获取装有脚踏板的不同车型的车辆图像,车身脚踏板区域需完整;
[0022] S32、截取车辆区域图像;
[0023] S33、采用矩形框标记脚踏板区域图像所在位置;
[0024] S34、使用所述脚踏板区域图像训练目标检测深度神经网络模型,获得脚踏板目标检测模型。
[0025] 本发明的有益效果是:本发明主要应用于机动车车辆年检中轿车加装脚踏板检测,实现了检测过程中的全程自动校验,同时可以将未通过的检测图像及原因传回服务器保存留待取证,既节约了人力,又保证了校验工作的公正、公开。

附图说明

[0026] 图1是本发明的智能检测系统的结构示意图。
[0027] 图2是本发明的加装脚踏板的检测判断流程图。
[0028] 图3是本发明车辆目标检测单元的结构示意图。
[0029] 图4是本发明脚踏板目标检测单元的结构示意图。

具体实施方式

[0030] 以下结合附图。对本发明做进一步说明。
[0031] 本发明的智能检测系统结构如图1所示,包括目标检测模块和判定模块。
[0032] 其中,目标检测模块包括:车辆目标检测单元、脚踏板目标检测单元和脚踏板检测标志判断单元;
[0033] 车辆目标检测单元在车辆图像上应用车辆目标检测模型,获取车辆区域图像。然后将车辆区域图像传入脚踏板目标检测单元,在车辆区域图像上应用脚踏板目标检测模型,识别脚踏板。目标检测模块首先检测车辆目标,然后在车辆目标图像内检测脚踏板目标,这种分布检测手段可以有效地避免因图像背景复杂、背景中包含其他车辆脚踏板等因素造成的误检,提高脚踏板检测的准确率。
[0034] 脚踏板检测标志判断单元将档案图片与待检测图片脚踏板检测标志进行比对,判定模块对整个检测流程的结果进行综合判定,并反馈未通过的原因及图片。
[0035] 车辆目标检测单元的具体检测方法包括:如图3所示,检测模块首先将待检测车辆图像输入车辆目标检测模型,首先得到N个一维数组[class,x,y,width,height],数组第一个元素代表对象类别,是车辆则为1,不是车辆则为0,数组后四个元素表征目标对象所在矩形区域,x,y代表矩形左上角点坐标,width代表矩形宽度,height代表矩形高度。每个数组均对应一个车辆目标,利用车辆区域矩形框面积大小构建车辆远近信息,以矩形框面积最大的数组作为检测模块输出,然后通过矩形框位置信息从图像中提取车辆区域图像。此方法可有效地剔出背景中其它非年检目标车辆。
[0036] 车辆目标检测模型获取方法如下:
[0037] S1、训练数据准备:获取不同车型(如轿车、跑车,越野车,面包车,商务车等车型)、不同品牌、指定拍摄角度范围(车身顶部装有脚踏板区域图像需完整)的车辆图像;
[0038] S2、数据标注:采用矩形框将车辆目标在图像中标出,每张图像对应一个矩形框,框内包含车辆目标;
[0039] S3、模型训练:采用标注好的训练数据,训练基于深度学习网络的车辆目标检测模型(公知常识,兹不赘述);
[0040] 脚踏板目标检测单元的具体检测方法包括:如图4所示,将得到的车辆区域图像输入脚踏板目标检测模型,得到一个一维数组[class,x,y,width,height],数组第一个元素代表对象类别,是脚踏板则为1,不是脚踏板则为0,数组后四个元素表征目标对象所在矩形区域,x,y代表矩形左上角点坐标,width代表矩形宽度,height代表矩形高度,通过矩形框位置信息从车辆区域图像中提取脚踏板区域图像。
[0041] 脚踏板目标检测模型获取方法如下:
[0042] S1、训练数据准备:获取不同车型、不同品牌、指定拍摄角度范围(车身顶部装有脚踏板区域图像需完整)的图像,采用车辆区域目标检测模型批量处理上述图像,得到车辆区域区域图像;
[0043] S2、数据标注:采用矩形框将脚踏板在车辆区域图像中标出,每张车辆区域图像对应一个矩形框,框内包含脚踏板目标;
[0044] S3、模型训练:采用标注好的训练数据,训练基于深度学习网络的脚踏板目标检测模型(公知常识,兹不赘述);
[0045] 本发明的加装脚踏板检测标准如下:待检测图片内车辆目标是否存在;档案图片内车辆目标是否存在;待检测图片车辆区域图像内脚踏板是否存在;档案图片车辆区域图像内脚踏板是否存在;档案图片与待检测图片脚踏板检测标志比较结果;本发明采用一个一维数组[x1,x2,x3,x4,x5]表示校验状态,初始值为[0,0,0,0,0]。标志位x1代表待检测图片内车辆目标是否存在,若存在则x1为0,若不存在则x1为1;标志位x2代表档案图片内脚踏板目标是否存在,若存在则x2为0,若不存在则x2为1;标志位x3代表待检测图片车辆区域图像内脚踏板是否存在,若存在则x3为0,若不存在则x3为1;标志位x4代表档案图片车辆区域图像内脚踏板是否存在,若存在则x4为0,若不存在则x4为1;标志位x5代表档案图片与待检测图片脚踏板检测标志比较结果,若x3与x4值相同,则x5为0,若x3与x4值不同,且x4为0,则x5为0,此情况对应档案图片中存在脚踏板,而待检测图片中没有脚踏板,不属于加装检测范围;若x3与x4值不同,且x4为1,则x5为1,此情况对应档案待检测图片中存在脚踏板目标,而档案图片中不存在脚踏板,属于加装脚踏板;最后,统计标志位[x1,x2,x5]状态,若标志为均为0,则校验通过,若存在1,则校验不通过。根据状态1出现的位置可以得到校验未通过的原因。若x1为1,则待检测图像中未检测到车辆目标,可能的原因有:待检测图像获取阶段出错、车辆拍摄角度不符合规定,未包含完整车身或图片质量不佳,出现过曝或过暗,因此导致审核未通过;若x2为1,则档案图像中未检测到车辆目标,可能原因为档案数据获取阶段出错,或服务器存储档案图片时分类阶段发生错误,误存其他类别图像,因此导致审核未通过。若x3为1,则表明该车辆非法加装脚踏板,审核不通过。
[0046] 判定模块根据校验标准判断脚踏板校验是否通过,若通过则直接返回校验成功标识,若不通过则根据标志位为1的位置返回校验失败原因及相应图片,留待后期审核查证。
[0047] 本发明的实施具体流程如图2所示,包括如下步骤:
[0048] S1、从服务器下载待检测车辆图片及对应档案图片;
[0049] S2、采用基于深度学习网络的车辆目标检测模型检测车辆,判断待检测车辆图片中车辆目标是否存在,若存在则记录此条标志为0,提取车辆区域图像;若不存在则记录此条标志为1,并保存相关图片,进入统计分析流程;
[0050] S3、采用基于深度学习网络的车辆目标检测模型检测车辆,判断档案图片中车辆目标是否存在,若存在则记录此条标志为0,提取车辆区域图像;若不存在则记录此条标志为1,并保存相关图片,进入统计分析流程;
[0051] S4、采用基于深度学习网络的脚踏板目标检测模型检测从待检车辆图片中提取的车辆区域图像,判断脚踏板是否存在,若存在则记录此条标志为0,提取脚踏板区域图像;若不存在则记录此条标志为1;
[0052] S5、采用基于深度学习网络的脚踏板目标检测模型检测从档案图片中提取的车辆区域图像,判断脚踏板是否存在,若存在则记录此条标志为0,提取脚踏板区域图像;若不存在则记录此条标志为1;
[0053] S6、判断待检测车辆图片脚踏板检测标志与档案图片脚踏板检测标志是否一致,若一致,则记录此条标志为0;若不一致,则判断档案图片脚踏板检测标志是否为0,若为0则记录此条标志为0,若为1,则记录此条标志为1;
[0054] S7、对整个过程的动作结果进行统计分析,若输入此模块标志为0,则检测通过;若输入此模块的标志存在标志1,则检测不通过,同时根据标志为1出现的位置可获取检测未通过原因及问题图片。
[0055] 以上显示和描述了本方案的基本原理和主要特征和本方案的优点。本行业的技术人员应该了解,本方案不受上述实施例的限制,上述实施例和说明书中描述的只是说明本方案的原理,在不脱离本方案精神和范围的前提下,本方案还会有各种变化和改进,这些变化和改进都落入要求保护的本方案范围内。本方案要求保护范围由所附的权利要求书及其等效物界定。