一种复杂室内环境移动机器人导航地图构建方法转让专利

申请号 : CN202110754790.2

文献号 : CN113203409B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 陶永温宇方高赫任帆兰江波江山

申请人 : 北京航空航天大学

摘要 :

本发明实施例涉及机器人领域,公开了一种复杂室内环境移动机器人导航地图构建方法,包括:获取机器人自身位姿信息和环境信息;初次SLAM并建立原地图;对激光雷达强度数据进行处理,筛选疑似玻璃存在区域;根据疑似玻璃存在区域选取RGB图像;基于选取的RGB图像实现复杂环境内玻璃检测;由玻璃检测结果确定对应区域栅格的状态;更新地图并提供包含室内玻璃的二维栅格地图。本发明解决了传统的移动机器人建图方法存在的无法识别环境中的玻璃物体(如玻璃幕墙等)的问题,在导航地图中准确、快速地标定了玻璃物体,提高了移动机器人在存在玻璃的环境中工作的安全性。

权利要求 :

1.一种复杂室内环境移动机器人导航地图构建方法,其特征在于,包括:步骤A1:利用激光雷达、里程计、深度相机同时工作获取机器人自身位姿信息和环境信息,深度相机设于不同角度且深度相机的个数为多个;

步骤A2:利用激光雷达信息和里程计信息进行初次SLAM并建立原地图;

步骤A3:处理所述激光雷达信息,获得强度数据,基于所述强度数据筛选疑似玻璃存在区域;

其中,所述步骤A3具体包括:

基于所述激光雷达信息获得强度数据,对激光雷达返回的强度信号进行分析,利用激光雷达扫描玻璃时的强度特点筛选疑似玻璃存在区域,所述强度特点包括强度、变化率和高峰持续时间;

所述疑似玻璃存在区域的筛选过程具体包括:步骤A31:设定筛选条件,筛选条件包括与强度相关的第一预设条件、与变化率相关的第二预设条件和与高峰持续时间相关的第三预设条件;

步骤A32:以时间戳为横坐标,逐步筛选出返回的强度信号的强度满足第一预设条件的信号段,用S1表示;

步骤A33,在步骤A32获得的S1中,逐步筛选出返回的强度信号的强度变化率满足第二条件的信号段,用S2表示;

步骤A34,在步骤A33获得的S2中,逐步筛选出返回的强度信号的高强度持续时间是否满足第三预设条件的信号段,用S3表示,获得疑似玻璃存在区域,高强度是指大于一预设值的强度;

步骤A4:根据筛选出的所述疑似玻璃存在区域的角度信息从多个深度相机中选取与所述疑似玻璃存在区域的角度信息对应角度处的深度相机,获取被选取的深度相机的RGB图像;

步骤A5:基于所述被选取的深度相机的RGB图像,利用深度学习算法实现复杂环境内玻璃检测,复杂环境为包括多个玻璃的环境;

步骤A6:由步骤A5的检测结果确定对应区域栅格的状态;

步骤A7:Gmapping算法更新地图并提供包含室内玻璃的可供后续导航直接使用的移动机器人导航地图,从而基于激光信息与视觉信息融合获得移动机器人导航地图。

2.根据权利要求1所述的一种复杂室内环境移动机器人导航地图构建方法,其特征在于,所述步骤A1具体包括:

在ROS环境利用激光雷达向外射出激光并接收返回激光获得周围除玻璃外的障碍物信息;利用里程计获取移动平台速度、位置和转角信息;利用深度相机获取环境的RGB图像信息,发布话题并将话题汇总成rosbag,从而完成对机器人自身位姿和环境信息的采集。

3.根据权利要求1所述的一种复杂室内环境移动机器人导航地图构建方法,其特征在于,所述步骤A2具体包括:

获取步骤A1中获得的激光雷达信息和里程计信息,以时间戳为横坐标,将信息离散化后采用粒子滤波算法进行实时定位建图。

4.根据权利要求3所述的一种复杂室内环境移动机器人导航地图构建方法,其特征在于,

所述粒子滤波算法的条件概率如下:其中, 表示任意地面标志物, 表示从初始时刻到 时刻的机器人位姿, 表示初始时刻至 时刻的激光雷达观测量, 表示初始时刻至 时刻的里程计控制量,表示机器人状态后验概率估计值, 表示机器人在 时刻位置的概率估计值,表示 时刻机器人姿态的概率估计值。

5.根据权利要求1所述的一种复杂室内环境移动机器人导航地图构建方法,其特征在于,所述步骤A4具体包括:

针对步骤A3获得的信号段的角度和信号段的时间戳来选取不同角度的深度相机拍摄的图像,平台按照圆形围绕设置了 台相机,根据相邻相机之间的间隔角度划分 个范围,计算信号段的角度与第一选取标称值比值的余数,基于余数所在的范围确定信号段对应的深度相机。

6.根据权利要求1所述的一种复杂室内环境移动机器人导航地图构建方法,其特征在于,所述步骤A5具体包括:

采用基于深度学习的玻璃检测网络对步骤A4选出来的每一张RGB图像进行检测,以确定对应的疑似玻璃存在区域玻璃是否存在玻璃;

玻璃检测网络核心为LCFI模块,用于在给定输入特征的情况下,提取和集成多尺度大范围上下文特征,以检测不同大小的玻璃。

7.根据权利要求6所述的一种复杂室内环境移动机器人导航地图构建方法,其特征在于,所述玻璃检测网络用于执行如下步骤:步骤A51,信息送入舵机特征提取器,以获取不同级别的特征;

步骤A52,将获取的特征分级送入 个LCFI模块中,用于学习大范围的上下文信息;

步骤A53,最后 个LCFI模块输出融合生成高层大场上下文特征,用于引导第一个LCFI提取的低层大场上下文信息;

步骤A54,高层底层信息融合,得到检测结果并输出。

8.根据权利要求1所述的一种复杂室内环境移动机器人导航地图构建方法,其特征在于,

步骤A6将栅格值为1的段的所有信息汇总,以S5表示;

步骤A7之前,将S5中各点的栅格坐标转换到全局坐标,计算每一时刻玻璃的栅格点与机器人在全局坐标系下的相对位置,相对位置包括以机器人为原点计算二者之间的距离值和角度,每一时刻对应的角度下,距离计算值和激光雷达返回距离信息的大小,若激光雷达返回距离值大于返回预设值,用相对位置中的距离值替换激光雷达返回距离值。

说明书 :

一种复杂室内环境移动机器人导航地图构建方法

技术领域

[0001] 本发明涉及机器人技术领域,尤其涉及一种复杂室内环境(即存在大范围玻璃的环境,如教学楼、写字楼等复杂室内环境)移动机器人导航地图构建方法。

背景技术

[0002] 近年来,随着“工业4.0”、“智能制造”及“中国制造2025”等概念的提出,机器人领域取得了长足的进步与蓬勃的发展。在服务机器人领域,室内移动机器人的研究成为了一
个热点问题。当前,对室内移动机器人的研究主要围绕地图构建、定位、导航等方面展开,即
解决移动机器人的“我是谁”、“我在哪儿”及“我要去哪儿”的问题。目前机器人在未知环境
中利用激光雷达和里程计信息进行同步定位建图技术已相对成熟,基于粒子滤波算法的
Gmapping就是当中表现较好的一种。但是这些方法在特殊环境中出现了一些难以克服的问
题,需要进行改进。
[0003] 现有的Gmapping算法在建图过程中由于激光雷达发出的激光经镜面反射出去,设备无法接收足够强度的激光导致无法对玻璃等物体进行检测,最终使机器人无法在含玻璃
环境下建立正确的环境地图在目前已有的玻璃检测建图方法中,2020年重大鲜晓东等提出
一种多传感器融合的玻璃识别系统,该系统使用激光雷达对一般障碍物进行检测,使用RGB
相机对玻璃进行检测,使用声纳设备获取玻璃的位置信息,从而实现对环境中的玻璃进行
检测的目的,该系统中选用了多个设备进行综合检测,系统结构复杂,不同设备获得的信息
之间需要匹配校准,玻璃位置识别过程运算复杂。
[0004] 针对存在大范围玻璃的复杂室内环境,如教学楼、写字楼等,亟需提供一种成本低、系统结构简单、匹配运算简单的导航地图构建方法。

发明内容

[0005] 本发明为解决传统的移动机器人建图方法存在的无法识别环境中的玻璃物体(如玻璃幕墙)的问题,提供一种复杂室内环境移动机器人导航地图构建方法,包括:
[0006] 步骤A1:利用激光雷达、里程计、深度相机同时工作获取机器人自身位姿信息和环境信息,深度相机设于不同角度且深度相机的个数为多个;
[0007] 步骤A2:利用激光雷达信息和里程计信息进行初次SLAM并建立原地图;
[0008] 步骤A3:处理所述激光雷达信息,获得强度数据,基于所述强度数据筛选疑似玻璃存在区域;
[0009] 步骤A4:根据筛选出的所述疑似玻璃存在区域的角度信息,从多个深度相机中选取与所述疑似玻璃存在区域的角度信息对应角度处的深度相机,获取被选取的深度相机的
RGB图像;
[0010] 步骤A5:基于所述被选取的深度相机的RGB图像,利用深度学习算法实现复杂环境内玻璃检测,复杂环境为包括多个玻璃的环境;
[0011] 步骤A6:由步骤A5的检测结果确定对应区域栅格的状态;
[0012] 步骤A7:Gmapping算法更新地图并提供包含室内玻璃的可供后续导航直接使用的移动机器人导航地图,从而基于激光信息与视觉信息融合获得移动机器人导航地图。
[0013] 优选的,所述步骤A1具体包括:
[0014] 在ROS环境利用激光雷达向外射出激光并接收返回激光获得周围除玻璃外的障碍物信息;利用里程计获取移动平台速度、位置和转角信息;利用深度相机获取环境的RGB图
像信息,发布话题并将话题汇总成rosbag,从而完成对机器人自身位姿和环境信息的采集。
[0015] 优选的,所述步骤A2具体包括:
[0016] 获取步骤A1中获得的激光雷达信息和里程计信息,以时间戳为横坐标,将信息离散化后采用粒子滤波算法进行实时定位建图。
[0017] 优选的,所述粒子滤波算法的条件概率如下:
[0018]
[0019] 其中,表示任意地面标志物,表示从初始时刻到 时刻时的机器人位姿, 表示初始时刻至 时刻的激光雷达观测量, 表示初始时刻至 时刻的里程计控制
量, 表示机器人状态后验概率估计值, 表示机器人在 时刻
位置的概率估计值, 表示 时刻机器人姿态的概率估计值
[0020] 优选的,所述步骤A3具体包括:
[0021] 基于所述激光雷达信息获得强度数据,对激光雷达返回的强度信号进行分析,利用激光雷达扫描玻璃时的强度特点筛选疑似玻璃存在区域,所述强度特点包括强度、变化
率和高峰持续时间。
[0022] 优选的,所述疑似玻璃存在区域的筛选过程具体包括:
[0023] 步骤A31:设定筛选条件,筛选条件包括与强度相关的第一预设条件、与变化率相关的第二预设条件和与高峰持续时间相关的第三预设条件;
[0024] 步骤A32:以时间戳为横坐标,逐步筛选出返回的强度信号的强度满足第一预设条件的信号段,用S1表示;
[0025] 步骤A33,在步骤A32获得的S1中,逐步筛选出返回的强度信号的强度变化率满足第二条件的信号段,用S2表示;
[0026] 步骤A34,在步骤A33获得的S2中,逐步筛选出返回的强度信号的高强度持续时间是否满足第三预设条件的信号段,用S3表示,获得疑似玻璃存在区域,高强度是指大于一预
设值的强度。
[0027] 优选的,所述步骤A4具体包括:
[0028] 针对步骤A3获得的信号段的角度和信号段的时间戳来选取不同角度的深度相机拍摄的图像,平台按照圆形围绕设置了 台相机,根据相邻相机之间的间隔角度划分 个范
围,计算信号段的角度与第一选取标称值比值的余数,基于余数所在的范围确定信号段对
应的深度相机。
[0029] 优选的,所述步骤A5具体包括:
[0030] 采用基于深度学习的玻璃检测网络对步骤A4选出来的每一张RGB图像进行检测,以确定对应的疑似玻璃存在区域玻璃是否存在;
[0031] 玻璃检测网络核心为LCFI模块,用于在给定输入特征的情况下,提取和集成多尺度大范围上下文特征,以检测不同大小的玻璃。
[0032] 优选的,所述玻璃检测网络用于执行如下步骤:
[0033] 步骤A51,信息送入舵机特征提取器,以获取不同级别的特征;
[0034] 步骤A52,将获取的特征分级送入 个LCFI模块中,用于学习大范围的上下文信息;
[0035] 步骤A53,最后 个LCFI模块输出融合生成高层大场上下文特征,用于引导第一个LCFI提取的低层大场上下文信息;
[0036] 步骤A54,高层底层信息融合,得到检测结果并输出。
[0037] 优选的,步骤A6将栅格值为1的段的所有信息汇总,以S5表示;
[0038] 步骤A7之前,将S5中各点的栅格坐标转换到全局坐标,计算每一时刻玻璃的栅格点与机器人在全局坐标系下的相对位置,相对位置包括以机器人为原点计算二者之间的距
离值和角度,每一时刻对应的角度下,距离计算值和激光雷达返回距离信息的大小,若激光
雷达返回距离值大于返回预设值,用相对位置中的距离值替换激光雷达返回距离值。
[0039] 本发明提供的一种复杂室内环境移动机器人导航地图构建方法针对已有的Gmapping方法进行了改进,对激光雷达返回强度数据进行处理获得疑似玻璃存在区域,然
后根据疑似玻璃存在区域角度信息,从多个相机中选取对应角度的相机RGB图像,利用基于
深度学习算法的玻璃检测网络对环境中的玻璃进行检测,再根据检测结果判断玻璃是否存
在并确定对应区域栅格的状态,最终更新地图,输出含有玻璃信息的地图,从而实现对环境
中玻璃的检测。本发明只使用激光雷达和RGB相机两种设备对玻璃的检测,根据激光雷达扫
描玻璃时返回的强度特征筛选疑似玻璃存在区域,再利用深度学习算法对RGB相机图像进
行处理以验证这些疑似区域玻璃是否真实存在,再根据激光雷达返回的距离信息中获得的
玻璃位置信息进行导航地图构建,该方法具有使用设备较少,系统结构较简单的优点。

附图说明

[0040] 图1为复杂室内环境移动机器人导航地图构建方法流程图;
[0041] 图2为实施例中提供的实施复杂室内环境移动机器人导航地图构建方法的平台组成示意图;
[0042] 图3为实施例中教学楼办公环境示意图;
[0043] 图4为实施例中筛选疑似玻璃存在区域的步骤图;
[0044] 图5为实施例中LCFI模块的工作流程图;
[0045] 图6为实施例中更新地图的步骤图;
[0046] 图7为采用复杂室内环境移动机器人导航地图构建方法获得的建图结果。

具体实施方式

[0047] 下面结合附图对本申请实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。本领域普通技术人员可知,随着
技术的发展和新场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适
用。
[0048] 本申请的说明书和权利要求书及上述附图中的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,以便包含一系列单元的过程、方法、系统、产品或设
备不必限于那些单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固
有的其它单元。
[0049] 实施例一
[0050] 本发明的第一实施方式涉及一种复杂室内环境移动机器人导航地图构建方法,其流程如图1所示,
[0051] 本实施例是利用移动平台在教学楼办公环境下实施,平台组成如图2所示,教学楼办公环境如图3所示,教学楼办公环境主要由走廊和玻璃构成,其中一圈走廊由于靠近教学
楼外墙,故一侧为墙壁,另一侧为玻璃围栏,移动平台在该走廊进行建图作业时,激光雷达
发出的激光由于受到玻璃围栏的镜面反射,仅在很小的角度范围内可以回到激光雷达,因
而无法获得玻璃的距离信息,所以仅利用激光雷达和里程计信息不能建立该走廊完整的地
图信息。
[0052] 一种复杂室内环境移动机器人导航地图构建方法具体如下:
[0053] 步骤A1:利用激光雷达、里程计、深度相机同时工作获取机器人自身位姿信息和环境信息,深度相机设于不同角度且深度相机的个数为多个;
[0054] 步骤A2:利用激光雷达信息和里程计信息进行初次SLAM并建立原地图;
[0055] 步骤A3:处理激光雷达信息,获得强度数据,基于强度数据筛选疑似玻璃存在区域;
[0056] 步骤A4:根据筛选出的疑似玻璃存在区域的角度信息从多个深度相机中选取与疑似玻璃存在区域的角度信息对应角度处的深度相机,获取被选取的深度相机的RGB图像;
[0057] 步骤A5:基于被选取的深度相机的RGB图像,利用深度学习算法实现复杂环境内玻璃检测,复杂环境为包括多个玻璃的环境;
[0058] 本发明只使用激光雷达和RGB相机两种设备实现对玻璃的检测,根据激光雷达扫描玻璃时返回的强度特征信息筛选疑似玻璃存在区域,再利用深度学习算法对深度相机的
RGB图像进行处理以验证这些疑似区域玻璃是否真实存在,系统结构简单,且基于疑似、确
定是否真实存在两个环节,降低运算量的同时提高了玻璃检测的准确度。
[0059] 步骤A6:由步骤A5的检测结果确定对应区域栅格的状态;
[0060] 步骤A7:Gmapping算法更新地图并提供包含室内玻璃的可供后续导航直接使用的移动机器人导航地图,从而基于激光信息与视觉信息融合获得移动机器人导航地图。
[0061] 本发明实施例提供的一种复杂室内环境移动机器人导航地图构建方法只使用激光雷达和RGB相机两种设备检测玻璃,根据激光雷达扫描玻璃时返回的强度特征筛选疑似
玻璃存在区域,再利用深度学习算法对RGB相机图像进行处理以验证这些疑似区域玻璃是
否真实存在,再根据激光雷达返回的距离信息获得玻璃的位置信息进行导航地图构建,该
方法具有使用设备较少,系统结构较简单的优点。
[0062] 实施例二
[0063] 进一步的,本发明的第二实施方式涉及一种复杂室内环境移动机器人导航地图构建方法,具体包括如下步骤:
[0064] 步骤A1:利用激光雷达、里程计、深度相机同时工作获取机器人自身位姿信息和环境信息,深度相机设于不同角度且深度相机的个数为多个;
[0065] 具体来说,在ROS环境利用激光雷达向外射出激光并接收返回激光获得周围除玻璃外的障碍物的障碍物信息;利用里程计获取移动平台速度、位置和转角信息;利用深度相
机获取环境的RGB图像信息,发布话题并将话题汇总成rosbag,从而完成对机器人自身位姿
和环境信息的采集。
[0066] 更进一步的,激光雷达数据类型包括:
[0067] std_msgs/Header header(信息头)
[0068] float32 angle_min(最小角度)
[0069] float32 angle_max(最大角度)
[0070] float32 angle_increment(角度增量)
[0071] float32 time_increment(时间增量)
[0072] float32 scan_time(扫描时间)
[0073] float32 range_min(最小距离)
[0074] float32 range_max(最大距离)
[0075] float32[ ] ranges
[0076] float32[ ] intensities
[0077] 其中float32[ ] ranges和float32[ ] intensities分别为返回的障碍物距离和激光强度信息。
[0078] 步骤A2:利用激光雷达信息和里程计信息进行初次SLAM并建立原地图;
[0079] 获取步骤A1中获得的激光雷达信息和里程计信息,以时间戳为横坐标,将信息离散化后采用粒子滤波算法进行实时定位建图。
[0080] 进一步的,粒子滤波算法的条件概率如下:
[0081]
[0082] 其中, 表示任意地面标志物,表示从初始时刻到时刻时的机器人位姿, 表示初始时刻至 时刻的激光雷达观测量, 表示初始时刻至 时刻的里程计控制量, 
表示机器人状态后验概率估计值,  表示机器人在 时刻位
置的概率估计值,  表示 时刻机器人姿态的概率估计值
[0083] 步骤A3:处理激光雷达信息,获得强度数据,基于强度数据筛选疑似玻璃存在区域;
[0084] 基于激光雷达信息获得强度数据,对激光雷达返回的强度信号进行分析,利用激光雷达扫描玻璃时的强度特点筛选疑似玻璃存在区域,强度特点包括强度、变化率和高峰
持续时间,从而以激光雷达返回数据强度大、变化剧烈并且持续时间短来筛选疑似玻璃存
在的区域。
[0085] 进一步的,疑似玻璃存在区域的筛选过程如图4所示,具体来说,包括如下步骤:
[0086] 步骤A31:设定筛选条件,筛选条件包括与强度相关的第一预设条件、与变化率相关的第二预设条件和与高峰持续时间相关的第三预设条件。
[0087] 具体来说,设定筛选阈值,筛选阈值包括强度阈值、变化率阈值和高峰持续时间阈值,设定第一预设条件为强度信号的强度大于强度阈值,设定第二预设条件为强度信号的
变化率大于变化率阈值;设定第三预设条件为强度信号的高峰持续时间大于高峰持续时间
阈值。例如,设定强度阈值为 ;变化率阈值 ;高峰持续时间阈值 个采样
周期。
[0088] 步骤A32:以时间戳为横坐标,逐步筛选出返回的强度信号的强度满足第一预设条件的信号段,即 的信号段,用S1表示,其中,为强度信号的强度, 为强度阈值。
[0089] 步骤A33,在步骤A32获得的S1中,逐步筛选出返回的强度信号的强度变化率满足第二条件的信号段,即 的信号段,用S2表示;
其中, 为变化率阈值, 为初始时刻返回的强度信号的强度, 为初始时刻的
前一时刻返回的强度信号的强度, 为时刻 的返回的强度信号的强度, 为时刻
的后一时刻返回的强度信号的强度。
[0090] 步骤A34,在步骤A33获得的S2中,逐步筛选出返回的强度信号的高强度持续时间是否满足第三预设条件的信号段,即 ,用S3表示,获得疑似玻璃存在区域,高
强度是指大于一预设值的强度,其中, 表示返回的强度信号的初始时刻时间, 表示
返回的强度信号从高强度信号开始下降的时刻。
[0091] 基于强度信号的强度特征获得的疑似玻璃存在区域仅适用了激光雷达的信息,无法排除由于平台振动,系统震荡以及噪声产生的干扰段,所以在下一步骤中进一步引入深
度相机的RGB图像检测步骤,以确认玻璃是否存在,提高了玻璃检测的准确性,另一方面,基
于疑似存在区域的初步筛选,减少了基于RGB图像检测识别的工作量,加快了玻璃检测的运
算速度。
[0092] 步骤A4:根据筛选出的疑似玻璃存在区域的角度信息从多个深度相机中选取与疑似玻璃存在区域的角度信息对应角度处的深度相机,获取被选取的深度相机的RGB图像;
[0093] 针对步骤A3获得的信号段的角度和信号段的时间戳来选取不同角度的深度相机拍摄的图像,平台按照圆形围绕设置了 台相机,相邻相机之间的间隔角度相同,从而获取
各个方向的RGB图像。深度相机的选取原则如下:根据相邻相机之间的间隔角度划分 个范
围,计算信号段的角度与第一选取标称值比值的余数,基于余数所在的范围确定信号段对
应的深度相机。
[0094] 例如,取 ,则平台设置了三台相机,每 分布一个,可以获取各个方向的RGB图像,选取原则如下:
[0095] ; 为信号段的角度;
[0096] 如果 且 ,则表明信号段的角度为0到 间,选取相机1;
[0097] 如果 且 ,则表明信号段的角度为 到 间,选取相机2;
[0098] 如果 且 ,则表明信号段的角度为 到 间,选取相机3;
[0099] 根据所选取的相机和信号段的时间戳获取已选取的相机拍摄的图像。
[0100] 步骤A5:基于被选取的深度相机的RGB图像,利用深度学习算法实现复杂环境内玻璃检测,复杂环境为包括多个玻璃的环境;
[0101] 对步骤A4选出来的每一张RGB图像进行检测,以确定对应的疑似玻璃存在区域玻璃是否存在玻璃;
[0102] 步骤A5中检测采用的是基于深度学习的玻璃检测网络,网络核心为LCFI模块,LCFI模块用于在给定输入特征的情况下,高效、有效地提取和集成多尺度大范围上下文特
征,以检测不同大小的玻璃;
[0103] 主要包括以下步骤:
[0104] 步骤A51,信息送入舵机特征提取器,以获取不同级别的特征;
[0105] 步骤A52,将获取的特征分级送入 个LCFI模块中,用于学习大范围的上下文信息;例如, ;
[0106] 步骤A53,最后 个LCFI模块输出融合生成高层大场上下文特征,用于引导第一个LCFI提取的低层大场上下文信息;例如, ;
[0107] 步骤A54,高层底层信息融合,得到检测结果并输出。
[0108] 步骤A5中,假定 为输入的图像信息; 为输出的检测结果; 表示指卷积核大小为 的垂直卷积; 表示卷积核大小为 的水平卷积,为正整数, 表示批
量归一化和线性整流网络处理;为了提取互补的大区域上下文特征,同时使用
和 两种卷积; 和 则表示使用卷积核大小为 的局部
卷积,LCFI卷积网络流程如图5所示,以下公式表示LCFI卷积网络: 。
[0109] 步骤A6:由步骤A5的检测结果确定对应区域栅格的状态;
[0110] 根据上述步骤A5输出的结果对栅格网点进行赋值,当检测网络检测到玻璃存在时,将角度和距离点的栅格值置为1;否则玻璃不存在,说明该位置强度异常变化是因为由
于平台振动,系统震荡以及噪声产生干扰段,将栅格网点置为0。将栅格值为1的段的所有信
息汇总,以S5表示。
[0111] 步骤A7:Gmapping算法更新地图并提供包含室内玻璃的可供后续导航直接使用的移动机器人导航地图,从而基于激光信息与视觉信息融合获得移动机器人导航地图。
[0112] 步骤A7之前,将S5中各点的栅格坐标转换到全局坐标并记录到数组中,然后计算每一时刻玻璃的栅格点与机器人在全局坐标系下的相对位置,即以机器人为原点计算二者
之间的距离值和角度,判断每一时刻对应的角度下距离计算值和激光雷达返回距离信息的
大小,若激光雷达返回距离值大于返回预设值,说明激光雷达发出的射线经玻璃被镜面反
射掉,未返回激光雷达,用相对位置中的距离值替换激光雷达返回距离值,最后再进行
Gmapping操作。
[0113] 利用自动清扫机器人平台进行了实验,移动平台带有一个里程计和一个单线激光雷达,将带有改进建图算法的移动平台置于上述实施例一提及的包含一侧为玻璃,另一侧
为墙壁的走廊的教学办公室环境中进行建图实验,实验过程中没有任何如照明、标记等限
制或控制。最终建图方法生成了带有正确玻璃板标记的栅格地图,建图效果如图7所示。
[0114] 由实验结果可知,本发明提供的导航地图构建方法具有较高的玻璃识别率和较快的运算速度。原有的建图方法在对含玻璃走廊建图时,在玻璃一侧只能显示出均匀的点,原
因是这些位置有金属边框和柱子以及一些花盆,当激光照射时能将激光反射回激光雷达,
所以可以在建图结果中显示出来。这种情况在激光雷达照射玻璃时并不适用,而使用本发
明提供的改进的方法建图则可以将玻璃区域大部分显示出来。
[0115] 通过对玻璃的检测,机器人能够在教学楼、办公楼等包含玻璃物体的环境中获得更有效的定位数据点,从而改善机器人的同步定位能力,进而提高了移动机器人在存在玻
璃的环境中工作的安全性,有效地解决传统的移动机器人建图方法存在的无法识别环境中
的玻璃物体(如玻璃幕墙)的问题。
[0116] 上面各种方法的步骤划分,只是为了描述清楚,实现时可以合并为一个步骤或者对某些步骤进行拆分,分解为多个步骤,只要包括相同的逻辑关系,都在本专利的保护范围
内;对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计,但不改变其算法
和流程的核心设计都在该专利的保护范围内。
[0117] 上述实例仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉此技术领域的技术人员均可在不违背本发明的精神及范畴下,对上述实施例进行修饰
或改变。因此,举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术
思想下所完成的一切等效修饰或改变,仍应由本发明的权利要求所涵盖。