基于虚拟现实机器人遥操作技术的鸟类控制系统及方法转让专利

申请号 : CN201510011289.1

文献号 : CN104635579B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 高华

申请人 : 江门市东方智慧物联网科技有限公司

摘要 :

本发明公开了一种基于虚拟现实机器人遥操作技术的鸟类控制系统及方法。在不伤害飞鸟身体,最大限度不影响飞鸟自身生活习性的情况下,控制飞鸟的飞行方向和路线,工作持久、稳定,并且可以反复多次使用,可用于自然科学研究、灾情救援、环保、军事等诸多领域,完成侦测地理数据,绘制3D立体图形等任务。

权利要求 :

1.一种基于虚拟现实机器人遥操作技术的鸟类控制系统,其特征在于,包括:

地面站,用于通过无线通讯技术接收传送回来的卫星定位数据及实时视频数据,同时将控制信号发送出去;

头戴式显示模块,固定在飞鸟的头部,包括电源模块、核心处理模块、无线收发模块、头部运动追踪器、扬声器、振动器、3D立体显示设备、卫星定位模块和摄像头,无线收发模块接收地面站发送出来的控制信号,经核心处理模块处理,构建合成相应的虚拟场景,再将虚拟场景显示在3D立体显示设备上,同时扬声器配合发出相应声音,振动器配合实现模拟效果,头部运动追踪器实时追踪飞鸟头部的转动,反馈给核心处理模块,核心处理模块相应的调整3D立体显示设备显示的虚拟场景的视角,卫星定位模块获取飞鸟的卫星定位数据,摄像头采集视频数据,经核心处理模块处理后,卫星定位数据和视频数据通过无线收发模块传送回地面站。

2.根据权利要求1所述的一种基于虚拟现实机器人遥操作技术的鸟类控制系统,其特征在于:所述摄像头包括左摄像头和右摄像头,收到相应的切换控制信号后,经核心处理模块处理,可以将左摄像头和右摄像头采集的视频数据实时显示在3D立体显示设备上。

3.根据权利要求1所述的一种基于虚拟现实机器人遥操作技术的鸟类控制系统,其特征在于:所述无线收发模块与地面站之间通过3G、4G或卫星通讯信号连接。

4.根据权利要求1所述的一种基于虚拟现实机器人遥操作技术的鸟类控制系统,其特征在于:所述头部运动追踪器包括陀螺仪和加速度计。

5.根据权利要求1所述的一种基于虚拟现实机器人遥操作技术的鸟类控制系统,其特征在于:所述卫星定位模块为北斗卫星定位模块或者GPS卫星定位模块。

6.根据权利要求1所述的一种基于虚拟现实机器人遥操作技术的鸟类控制系统,其特征在于:所述电源模块包括高密度锂电池。

7.一种基于权利要求1-6任一项所述系统的鸟类控制方法,其特征在于:地面站根据需要发送控制信号,该控制信号包含有用于构建场景的构建参数,被头戴式显示模块的无线收发模块所接收,经核心处理模块处理后,核心处理模块构建合成一个虚拟洞穴场景,该虚拟洞穴延伸往飞鸟飞行前进的目标方向,并且该目标方向设置有引诱飞鸟飞过去的亮光,将该虚拟场景通过3D立体显示设备显示,并且核心处理模块根据头部运动追踪器反馈的信号实时调整视角,当卫星定位模块检测到飞鸟偏离航道时,在核心处理模块的控制下,3D立体显示设备显示碰撞的场景,同时扬声器发出碰撞的声音,振动器模拟碰撞的效果,促使飞鸟回到设定好的航道上;当需要解除对飞鸟飞行的控制时,地面站发出切换的控制信号,被头戴式显示模块的无线收发模块所接收,在核心处理模块的控制下将摄像头采集的视频数据实时显示在3D立体显示设备上。

8.根据权利要求7所述的一种鸟类控制方法,其特征在于:所述虚拟场景根据需要设置成蜿蜒或者平直延伸的环境单一的洞穴场景,虚拟场景中的亮光设置在距离基本保持不变的前方。

9.根据权利要求7所述的一种鸟类控制方法,其特征在于:摄像头采集的视频数据,经核心处理模块处理后,通过无线收发模块实时传送回地面站,以让控制人员超视距实时的控制、调整飞鸟的飞行方向。

说明书 :

基于虚拟现实机器人遥操作技术的鸟类控制系统及方法

技术领域

[0001] 本发明涉及虚拟现实技术领域。

背景技术

[0002] 虚拟现实是利用计算机模拟产生一个三维空间的虚拟世界,提供使用者关于视觉、听觉、触觉等感官的模拟,让使用者如同身历其境一般,可以及时、没有限制地观察三维空间内的事物。虚拟现实技术完全可以应用于高等动物,一些鸟类的视觉、听觉类似于人类,完全可以接受数据显示技术和数字播放技术,并且其易于受指挥,可以在不伤害它们的前提下,控制其行为。而现有的控制鸟类等生物行为的实验、应用,均会不同程度的对其造成伤害,并且无法持久、稳定的进行控制。

发明内容

[0003] 为了克服现有技术的不足,本发明提供一种基于虚拟现实机器人遥操作技术的鸟类控制系统及方法。
[0004] 本发明解决其技术问题所采用的技术方案是:
[0005] 一种基于虚拟现实机器人遥操作技术的鸟类控制系统,包括地面站和头戴式显示模块。
[0006] 地面站,用于通过无线通讯技术接收传送回来的卫星定位数据及实时视频数据,同时将控制信号发送出去。
[0007] 头戴式显示模块,固定在飞鸟的头部,包括电源模块、核心处理模块、无线收发模块、头部运动追踪器、扬声器、振动器、3D立体显示设备、卫星定位模块和摄像头,无线收发模块接收地面站发送出来的控制信号,经核心处理模块处理,构建合成相应的虚拟场景,再将虚拟场景显示在3D立体显示设备上,同时扬声器配合发出相应声音,振动器配合实现模拟效果,头部运动追踪器实时追踪飞鸟头部的转动,反馈给核心处理模块,核心处理模块相应的调整3D立体显示设备显示的虚拟场景的视角,卫星定位模块获取飞鸟的卫星定位数据,摄像头采集视频数据,经核心处理模块处理后,卫星定位数据和视频数据通过无线收发模块传送回地面站。
[0008] 进一步,所述摄像头包括左摄像头和右摄像头,收到相应的切换控制信号后,经核心处理模块处理,可以将左摄像头和右摄像头采集的视频数据实时显示在3D立体显示设备上。
[0009] 进一步,所述无线收发模块与地面站之间通过3G、4G或卫星通讯信号连接。
[0010] 进一步,所述头部运动追踪器包括陀螺仪和加速度计。
[0011] 进一步,所述卫星定位模块为北斗卫星定位模块或者GPS卫星定位模块。
[0012] 进一步,所述电源模块包括高密度锂电池。
[0013] 一种基于上述系统的鸟类控制方法,地面站根据需要发送控制信号,该控制信号包含有用于构建场景的构建参数,被头戴式显示模块的无线收发模块所接收,经核心处理模块处理后,核心处理模块构建合成一个虚拟洞穴场景,该虚拟洞穴延伸往飞鸟飞行前进的目标方向,并且该目标方向设置有引诱飞鸟飞过去的亮光,将该虚拟场景通过3D立体显示设备显示,并且核心处理模块根据头部运动追踪器反馈的信号实时调整视角,当卫星定位模块检测到飞鸟偏离航道时,在核心处理模块的控制下,3D立体显示设备显示碰撞的场景,同时扬声器发出碰撞的声音,振动器模拟碰撞的效果,促使飞鸟回到设定好的航道上;当需要解除对飞鸟飞行的控制时,地面站发出切换的控制信号,被头戴式显示模块的无线收发模块所接收,在核心处理模块的控制下将摄像头采集的视频数据实时显示在3D立体显示设备上。
[0014] 进一步,所述虚拟场景根据需要设置成蜿蜒或者平直延伸的环境单一的洞穴场景,虚拟场景中的亮光设置在距离基本保持不变的前方。
[0015] 进一步,摄像头采集的视频数据,经核心处理模块处理后,通过无线收发模块实时传送回地面站,以让控制人员超视距实时的控制、调整飞鸟的飞行方向。
[0016] 本发明的有益效果是:在不伤害飞鸟身体,最大限度不影响飞鸟自身生活习性的情况下,控制飞鸟的飞行方向和路线,工作持久、稳定,并且可以反复多次使用,可用于自然科学研究、灾情救援、环保、军事等诸多领域,完成侦测地理数据,绘制3D立体图形等任务。

附图说明

[0017] 下面结合附图和实施例对本发明进一步说明。
[0018] 图1是本发明的头戴式显示模块的佩戴效果图;
[0019] 图2是本发明的结构原理图。

具体实施方式

[0020] 本技术方案的基本原理是:设想一只飞鸟在洞穴之中,朝着洞口飞出,洞穴直径比较小,飞鸟依靠视觉不会碰到洞壁,如果洞穴向左延伸,飞鸟会在洞中向左飞;如果洞穴向右延伸,飞鸟会在洞中向右飞。
[0021] 现在我们要给这只飞鸟穿戴一种设备,比如给飞鸟用的3D立体显示设备,让飞鸟看到的场景是计算机合成的非常逼真的虚拟场景。虚拟场景可以是向左转、向右转、向上转,或向下转的洞穴中的情景。
[0022] 这样,当这只戴上设备的飞鸟在天空中时,如果我们希望它向左飞,只需让计算机合成的虚拟洞穴向左转弯。向右、向上、向下几个方向道理一样。虽然真实情况是在空旷的天空中飞行,但是飞鸟感觉自己是在一个不断拐弯的洞穴中向着洞口飞行。
[0023] 除了视觉欺骗外,我们还可以给飞鸟以听觉和触觉配合。在飞鸟身上设置振动器和扬声器,如果飞鸟没有顺着虚拟视频中的洞穴转弯,碰着虚拟洞壁,我们可以让振动器模拟碰撞效果,并通过扬声器播放合成的碰撞声音。振动器和扬声器根据给飞鸟接受视觉欺骗后的反馈,修正飞鸟的行为。这种反馈在初始训练期有助于飞鸟形成我们想要的视觉条件反射。
[0024] 同时,飞鸟身上还配备双目摄像头,用于向地面站控制人员传回飞鸟第一人称视觉的实时立体视频,以让控制人员超视距控制飞鸟飞行方向。当地面站控制人员释放对飞鸟的控制权时,该双目摄像头还可以用于将前方真实的立体视频直接通过3D立体显示器显示给飞鸟,让飞鸟自由飞翔。
[0025] 根据上述原理,同时参照图1和图2,本发明的一种基于虚拟现实机器人遥操作技术的鸟类控制系统,包括地面站和头戴式显示模块。
[0026] 地面站,用于通过无线通讯技术接收传送回来的卫星定位数据及实时视频数据,同时将控制信号发送出去,该控制信号包含负责控制生成虚拟场景的构建参数,如延伸方向等。
[0027] 头戴式显示模块,固定在飞鸟的头部,包括电源模块、核心处理模块、无线收发模块、头部运动追踪器、扬声器、振动器、3D立体显示设备、卫星定位模块和摄像头。所述电源模块包括重量更轻的高密度锂电池,用于供给整个头戴式显示模块所需的电量。所述无线收发模块与地面站之间通过3G、4G或卫星通讯信号连接,无线收发模块接收地面站发送出来的控制信号,经核心处理模块处理,构建合成相应的虚拟场景,再将虚拟场景显示在3D立体显示设备上,同时扬声器配合发出相应声音,振动器配合实现模拟效果。头部运动追踪器包括陀螺仪和加速度计,实时追踪飞鸟头部的转动,反馈给核心处理模块,核心处理模块相应的调整3D立体显示设备显示的虚拟场景的视角。卫星定位模块为北斗卫星定位模块或者GPS卫星定位模块,获取飞鸟的卫星定位数据,摄像头采集视频数据,经核心处理模块处理后,卫星定位数据和视频数据通过无线收发模块传送回地面站。
[0028] 进一步,所述摄像头包括左摄像头和右摄像头,用于实时采集飞鸟双目位置的立体视觉数据。收到相应的切换控制信号后,经核心处理模块处理,可以将左摄像头和右摄像头采集的视频数据实时显示在3D立体显示设备上,同时,双摄像头的设置可以形成物像的深度信息,并减少视线盲区,或者方便实现绘制3D立体图纸等操作。
[0029] 一种基于上述系统的鸟类控制方法,地面站根据需要发送控制信号,该控制信号包含有用于构建场景的构建参数,被头戴式显示模块的无线收发模块所接收,经核心处理模块处理后,核心处理模块构建合成一个虚拟洞穴场景,该虚拟洞穴延伸往飞鸟飞行前进的目标方向,并且该目标方向设置有引诱飞鸟飞过去的亮光,为了防止分散飞鸟的注意力,同时降低虚拟场景的建模数据量,所述虚拟场景根据需要设置成蜿蜒或者平直延伸的环境单一的洞穴场景,虚拟场景中的亮光设置在距离基本保持不变的前方。将该虚拟场景通过3D立体显示设备显示,并且核心处理模块根据头部运动追踪器反馈的信号实时调整视角,当卫星定位模块检测到飞鸟偏离航道,没有顺着虚拟场景中的洞穴飞行时,在核心处理模块的控制下,3D立体显示设备显示碰撞的场景,同时扬声器发出碰撞的声音,振动器模拟碰撞的效果,促使飞鸟回到设定好的航道上;当需要解除对飞鸟飞行的控制时,地面站发出切换的控制信号,被头戴式显示模块的无线收发模块所接收,在核心处理模块的控制下将摄像头采集的视频数据实时显示在3D立体显示设备上,让飞鸟看到真实视界而解脱人工控制自由飞翔。
[0030] 进一步,摄像头采集的视频数据,经核心处理模块处理后,通过无线收发模块实时传送回地面站,以让控制人员超视距实时的控制、调整飞鸟的飞行方向。
[0031] 最后说明的是,以上实施例仅用以说明本发明的技术方案而非对其进行限制,尽管参照较佳实施例对本发明进行了详细说明,但本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围内。