会员体验
专利管家(专利管理)
工作空间(专利管理)
风险监控(情报监控)
数据分析(专利分析)
侵权分析(诉讼无效)
联系我们
交流群
官方交流:
QQ群: 891211   
微信请扫码    >>>
现在联系顾问~
首页 / 专利库 / 空中交通管制员 / 空中交通管制员岗位疲劳状态监测告警系统

空中交通管制员岗位疲劳状态监测告警系统

申请号 CN202110521786.1 申请日 2021-05-13 公开(公告)号 CN113327404A 公开(公告)日 2021-08-31
申请人 安徽中科昊音智能科技有限公司; 中国民用航空西南地区空中交通管理局; 发明人 何天剑; 刘敏; 胡翼; 苗迪; 王涛; 朱江; 廖翔;
摘要 本发明公开了空中交通管制员岗位疲劳状态监测告警系统,包括信息采集端、综合智能分析系统以及应用端,信息采集端用于通过对现场图像以及声音的采集监视管制员工作状态;综合智能分析系统接收信息采集端采集信息,并通过对管制人员进行人脸监测、用户分布热力图分析以及疲劳度曲线分析后,判断输出该管制人员的疲劳状态信息;应用端接收管制人员的疲劳信息,告警输出后台管理平台进行管控提醒。通过对管制员高强度工作环境下疲劳状态的深入分析,利用基于人工智能AI的面部识别算法、大数据分析、机器深度学习,获取管制员疲劳状态并传递至空管值班主任的主动告警,为空管值班主任提供科学、实时、客观、智能的决策支持。
权利要求

1.空中交通管制员岗位疲劳状态监测告警系统,其特征在于,包括:信息采集端、综合智能分析系统以及应用端,其中,所述信息采集端用于通过对现场图像以及声音的采集监视管制员工作状态;

所述综合智能分析系统接收信息采集端采集信息,并通过对管制人员进行人脸监测、人脸分析通话质检、采集、预警、用户分布热力图分析以及疲劳度曲线分析后,判断输出该管制人员的疲劳状态信息;

所述应用端接收管制人员的疲劳信息,告警输出后台管理平台进行管控提醒;

所述综合智能分析系统包括处理模块、分别与处理模块连接的用户信息管理单元、设备管理单元、疲劳程度分析单元、曲线绘制单元以及疲劳预警数据推送单元,所述用户信息管理单元执行用户信息的添加、删除以及管理;

所述设备管理单元执行设备信息的添加、删除指令;

所述疲劳程度分析单元,基于管制人员工作组整体疲劳程度分析出管制人员的疲劳程度分值;

所述曲线绘制单元绘制疲劳情形曲线图,以用于提醒管制人员关注状态;

所述疲劳预警数据推送单元用于将疲劳信息推送至应用端。

2.根据权利要求1所述的空中交通管制员岗位疲劳状态监测告警系统,其特征在于,所述信息采集端包括分别与处理模块连接的面部信息采集单元、声音采集单元以及疲劳特征数据库,

所述面部信息采集单元包括图像识别子单元、人脸关键点监测子单元、神经网络分析子单元、深度学习子单元以及疲劳特征分析子单元,基于算法引擎将采集的人脸数据进行人脸特征提取以及识别;

所述声音采集单元包括原始声音采集处理子单元、端点监测子单元、噪音检测子单元以及声纹格式无损转换子单元,用于将原始声音经采集处理、声纹格式无损转换后,对特定环境下采集的声音进行降噪处理,以建立音频样本指标判断声波的变化;

所述疲劳特征数据库包括人脸疲劳特征数据库、声纹疲劳特征数据库以及存储数据库,所述存储数据库分别连接人脸疲劳特征数据库以及声纹疲劳特征数据库,以用于将信息采集端采集的疲劳特征数据进行一人一档分类存储,独立建立个人疲劳特征库。

3.根据权利要求1所述的空中交通管制员岗位疲劳状态监测告警系统,其特征在于,所述综合智能分析系统还包括分别与处理模块连接的人脸分析模块以及声纹分析模块,其中,

所述人脸分析模块包括头部姿势分析子单元、眼部特征分析子单元以及眼部特征分析子单元,以用于基于主成分分析法、回归分析法、人工神经网络分析法、机器深度学习分析法以及大数据分析方法建立管制人员疲劳诊断综合测评模型,并通过样本试验计算确定综合测评模型中每项指标的临界值,形成一个疲劳临界指标集或疲劳曲线,以完成疲劳诊断指标体系构建;

所述声纹分析模块基于疲劳声学模型的算法引擎将信息采集端采集到的声纹数据进行声纹特征提取并识别,其具体实施方式为:(1)利用疲劳声学模型的感知掩蔽处理步骤将声纹数据语音中的疲劳高敏感性频率成分突显出来,以用于获得更为鲁棒的疲劳表征能力;

(2)将获取的语音信号进行逐帧对比分析来提取多种心理声学感知特征,并进行连续地量化描述被管制人员的疲劳异常音变化,最后针对语音波形不同步而导致的感知特征提取误差问题,给出了语音帧的快速对准方案;

(3)采用多参考样本对比分析的疲劳监测策略,搭建多分类器融合的疲劳监测模型,进行管制人员的声纹信息监测。

4.根据权利要求1所述的空中交通管制员岗位疲劳状态监测告警系统,其特征在于,所述应用端包括PC端后台管理平台以及移动手环应用端,其中,所述PC端后台管理平台连接处理模块,用于PC端后台管理平台的设备管理以及设备管理信息的推送;

所述移动手环应用端连接所述处理模块,用于进行疲劳管制人员的信息推送以及震动提醒疲劳管制人员,所述移动手环应用端包括信息输送子单元、预警子单元以及震动子单元。

5.根据权利要求1所述的空中交通管制员岗位疲劳状态监测告警系统,其特征在于,所述综合智能分析系统还包括信息录入查询单元、自动监控模块、监控地图单元以及声纹学习单元,其中,

所述信息录入查询单元连接处理模块用于录入查询管制人员的基础信息;

所述自动监控模块连接处理模块用于初始设置管制人员疲劳参数,以及对管制人员的疲劳阙值进行监控;

所述监控地图单元连接处理模块,用于统一控制管理并显示管制人员的实时疲劳程度;

所述声纹学习单元连接处理模块,用于管制人员进行声纹学习。

6.根据权利要求4所述的空中交通管制员岗位疲劳状态监测告警系统,其特征在于,所述移动手环应用端还包括:

与处理模块连接以用于配合智能摄像头自动跟踪人脸,定时采集人脸疲劳程度的图像采集单元;

与处理模块连接以用于利用手机音频输入获取耳麦音频信号、自动录音以及采集声音疲劳程度的声纹采集单元;

与处理模块连接以用于对采集信息进行监控并与综合智能分析系统建立数据交互的监控单元;

与处理模块连接以用于采集移动手环中人体其他信息并上传综合智能分析系统做辅助疲劳研判的手环接口子单元。

7.根据权利要求1所述的空中交通管制员岗位疲劳状态监测告警系统,其特征在于,所述综合智能分析系统还包括视频存储查询回放单元,所述视频存储查询回放单元连接所述处理模块,用于建立预留查询接口,并执行管制人员的查询追溯。

说明书全文

空中交通管制员岗位疲劳状态监测告警系统

技术领域

[0001] 本发明涉及空中交通管制员疲劳状态特性分析技术领域,具体为空中交通管制员岗位疲劳状态监测告警系统。

背景技术

[0002] 空中交通管制工作关乎现代空中交通的安全保障,关乎数以亿计人次的人生安全,而作为这一重要保障工作的核心执行者管制员显得格外重要。他们连续24小时昼夜不
断的管制指挥本身就决定了其职业的特殊性。其倒班、轮岗、休息不固定、责任大、控制感
差、对管理的依从、服从性高等特点就比一般职业带来的压力和疲劳感严重许多,再加上实
际岗位上的管制指挥,需要精力高度集中,任何的疏忽都会带来不正常事件的发生。然而在
管制员实际指挥过程中因疲劳导致其“错忘漏”,进而造成的不安全事件却屡屡发生。
[0003] 而现有事故中因塔台管制员疲劳而遗忘飞行动态发出错误指令,导致两架飞行在跑道上险些相撞,造成严重事故征候最为严重。因此,对管制员岗位疲劳状态的监测并告
警,及时进行管理干预,防止状态进一步恶化,消除疲劳隐患,杜绝其因疲劳导致“错忘漏”
发生并造成不安全事件尤其必要和重要。

发明内容

[0004] 本发明的目的在于提供空中交通管制员岗位疲劳状态监测告警系统,通过测量管制员疲劳特征数据获取采用嵌入式的方式,即直接通过实时运行的视频和音频识别系统获
取,而不是让管制员脱离工作岗位后,单独对其进行实验获取的数据,以及通过对管制员高
强度工作环境下疲劳状态的深入分析,利用基于人工智能AI的面部识别算法、大数据分析、
机器深度学习,获取管制员疲劳状态并传递至空管值班主任的主动告警的方式,从而使得
本发明具备为空管值班主任提供科学、实时、客观、智能的决策支持以及为安全管理人员提
供全天候的、持续的、实时的管制员疲劳状况监测汇报的优点,解决了现有技术中的问题。
为实现上述目的,本发明提供如下技术方案:
[0005] 空中交通管制员岗位疲劳状态监测告警系统,包括:信息采集端、综合智能分析系统以及应用端,其中,
[0006] 所述信息采集端用于通过对现场图像以及声音的采集监视管制员工作状态;
[0007] 所述综合智能分析系统接收信息采集端采集信息,并通过对管制人员进行人脸监测、人脸分析通话质检、采集、预警、用户分布热力图分析以及疲劳度曲线分析后,判断输出
该管制人员的疲劳状态信息;
[0008] 所述应用端接收管制人员的疲劳信息,告警输出后台管理平台进行管控提醒;
[0009] 所述综合智能分析系统包括处理模块、分别与处理模块连接的用户信息管理单元、设备管理单元、疲劳程度分析单元、曲线绘制单元以及疲劳预警数据推送单元,
[0010] 所述用户信息管理单元执行用户信息的添加、删除以及管理;
[0011] 所述设备管理单元执行设备信息的添加、删除指令;
[0012] 所述疲劳程度分析单元,基于管制人员工作组整体疲劳程度分析出管制人员的疲劳程度分值;
[0013] 所述曲线绘制单元绘制疲劳情形曲线图,以用于提醒管制人员关注状态;
[0014] 所述疲劳预警数据推送单元用于将疲劳信息推送至应用端。
[0015] 作为对本发明空中交通管制员岗位疲劳状态监测告警系统的改进,所述信息采集端包括分别与处理模块连接的面部信息采集单元、声音采集单元以及疲劳特征数据库,
[0016] 所述面部信息采集单元包括图像识别子单元、人脸关键点监测子单元、神经网络分析子单元、深度学习子单元以及疲劳特征分析子单元,基于算法引擎将采集的人脸数据
进行人脸特征提取以及识别;
[0017] 所述声音采集单元包括原始声音采集处理子单元、端点监测子单元、噪音检测子单元以及声纹格式无损转换子单元,用于将原始声音经采集处理、声纹格式无损转换后,对
特定环境下采集的声音进行降噪处理,以建立音频样本指标判断声波的变化;
[0018] 所述疲劳特征数据库包括人脸疲劳特征数据库、声纹疲劳特征数据库以及存储数据库,所述存储数据库分别连接人脸疲劳特征数据库以及声纹疲劳特征数据库,以用于将
信息采集端采集的疲劳特征数据进行一人一档分类存储,独立建立个人疲劳特征库。
[0019] 作为对本发明空中交通管制员岗位疲劳状态监测告警系统的改进,所述综合智能分析系统还包括分别与处理模块连接的人脸分析模块以及声纹分析模块,其中,
[0020] 所述人脸分析模块包括头部姿势分析子单元、眼部特征分析子单元以及眼部特征分析子单元,以用于基于主成分分析法、回归分析法、人工神经网络分析法、机器深度学习
分析法以及大数据分析方法建立管制人员疲劳诊断综合测评模型,并通过样本试验计算确
定综合测评模型中每项指标的临界值,形成一个疲劳临界指标集或疲劳曲线,以完成疲劳
诊断指标体系构建;
[0021] 所述声纹分析模块基于疲劳声学模型的算法引擎将信息采集端采集到的声纹数据进行声纹特征提取并识别,其具体实施方式为:
[0022] (1)利用疲劳声学模型的感知掩蔽处理步骤将声纹数据语音中的疲劳高敏感性频率成分突显出来,以用于获得更为鲁棒的疲劳表征能力;
[0023] (2)将获取的语音信号进行逐帧对比分析来提取多种心理声学感知特征,并进行连续地量化描述被管制人员的疲劳异常音变化,最后针对语音波形不同步而导致的感知特
征提取误差问题,给出了语音帧的快速对准方案;
[0024] (3)采用多参考样本对比分析的疲劳监测策略,搭建多分类器融合的疲劳监测模型,进行管制人员的声纹信息监测。
[0025] 作为对本发明空中交通管制员岗位疲劳状态监测告警系统的改进,所述应用端包括PC端后台管理平台以及移动手环应用端,其中,
[0026] 所述PC端后台管理平台连接处理模块,用于PC端后台管理平台的设备管理以及设备管理信息的推送;
[0027] 所述移动手环应用端连接所述处理模块,用于进行疲劳管制人员的信息推送以及震动提醒疲劳管制人员,所述移动手环应用端包括信息输送子单元、预警子单元以及震动
子单元。
[0028] 作为对本发明空中交通管制员岗位疲劳状态监测告警系统的改进,所述综合智能分析系统还包括信息录入查询单元、自动监控模块、监控地图单元以及声纹学习单元,其
中,
[0029] 所述信息录入查询单元连接处理模块用于录入查询管制人员的基础信息;
[0030] 所述自动监控模块连接处理模块用于初始设置管制人员疲劳参数,以及对管制人员的疲劳阙值进行监控;
[0031] 所述监控地图单元连接处理模块,用于统一控制管理并显示管制人员的实时疲劳程度;
[0032] 所述声纹学习单元连接处理模块,用于管制人员进行声纹学习。
[0033] 作为对本发明空中交通管制员岗位疲劳状态监测告警系统的改进,所述移动手环应用端还包括:
[0034] 与处理模块连接以用于配合智能摄像头自动跟踪人脸,定时采集人脸疲劳程度的图像采集单元;
[0035] 与处理模块连接以用于利用手机音频输入获取耳麦音频信号、自动录音以及采集声音疲劳程度的声纹采集单元;
[0036] 与处理模块连接以用于对采集信息进行监控并与综合智能分析系统建立数据交互的监控单元;
[0037] 与处理模块连接以用于采集移动手环中人体其他信息并上传综合智能分析系统做辅助疲劳研判的手环接口子单元。
[0038] 作为对本发明空中交通管制员岗位疲劳状态监测告警系统的改进,所述综合智能分析系统还包括视频存储查询回放单元,所述视频存储查询回放单元连接所述处理模块,
用于建立预留查询接口,并执行管制人员的查询追溯。
[0039] 与现有技术相比,本发明的有益效果如下:
[0040] 1、测量管制员疲劳特征数据获取采用嵌入式的方式,即直接通过实时运行的视频和音频识别系统获取,而不是让管制员脱离工作岗位后,单独对其进行实验获取的数据,这
就保证了数据来源的真实可靠性、实时性、客观性;
[0041] 2、本发明通过对管制员高强度工作环境下疲劳状态的深入分析,利用基于人工智能AI的面部识别算法、大数据分析、机器深度学习,获取管制员疲劳状态并传递至空管值班
主任的主动告警,为空管值班主任提供科学、实时、客观、智能的决策支持;
[0042] 3、通过信息采集端、综合智能分析系统以及应用端的配合方式,使得本发明具备为安全管理人员提供全天候的、持续的、实时的管制员疲劳状况监测优点,以此同时,将有
效摆脱通过人工手段难以准确、实时的评估管制员疲劳状态的困扰,为各类管制运行决策
提供客观且准确的依据。

附图说明

[0043] 图1为本发明一种实施例中管制员疲劳监测系统原理图;
[0044] 图2为本发明一种实施例中管制人员疲劳监测及告警服务平台实时场景示意图;
[0045] 图3为本发明一种实施例中对管制人员的疲劳特征分析示意图;
[0046] 图4为本发明一种实施例中管制人员个人疲劳特征数据库的形成示意图;
[0047] 图5为本发明一种实施例中所提出的管制人员疲劳检测方法;
[0048] 图6为本发明一种实施例中移动手环应用端的监控单元应用场景示意图;
[0049] 图7为本发明一种实施例中对于管制人员语音疲劳得分对比模拟数据图一;
[0050] 图8为本发明一种实施例中对于管制人员语音疲劳得分对比模拟数据图一。

具体实施方式

[0051] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例,基于
本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他
实施例,都属于本发明保护的范围。
[0052] 在本发明的描述中,需要理解的是,术语“上”、“下”、“前”、“后”、“左”、“右”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便
于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以
特定的方位构造和操作,因此不能理解为对本发明的限制。
[0053] 以下结合附图对本发明作近一步详细说明,但不作为对本发明的限定。
[0054] 如图1‑3所示,作为本发明的一实施例,空中交通管制员岗位疲劳状态监测告警系统,包括:信息采集端、综合智能分析系统以及应用端,其中,
[0055] 信息采集端用于通过对现场图像以及声音的采集监视管制员工作状态,信息采集端基于人脸识别算法采集席位上空管人员的实时人脸状态以及识别疲劳状态下的人脸特
征,包括打瞌睡,闭眼时间超过特定值,打哈欠等行为,并建立人脸疲劳特征数据库,与此同
时,信息采集端基于声纹识别算法,建立管制人员个体音频特征库,比较管制人员正常状态
和疲劳状态的差异,针对管制人员听力疲劳、口舌疲劳、声音疲劳的特征进行识别,并建立
音频样本特征库;
[0056] 综合智能分析系统接收信息采集端采集信息,并通过对管制人员进行人脸监测、人脸分析通话质检、采集、预警、用户分布热力图分析以及疲劳度曲线分析后,判断输出该
管制人员的疲劳状态信息;
[0057] 应用端接收管制人员的疲劳信息,告警输出后台管理平台进行管控提醒,在执行时,基于管制员席位视频人脸信息计算分析的席位上空管人员疲劳状态自动监测,告警功
能输出至值班主任PC机后台管理平台或手环;
[0058] 综合智能分析系统包括处理模块、分别与处理模块连接的用户信息管理单元、设备管理单元、疲劳程度分析单元、曲线绘制单元以及疲劳预警数据推送单元,
[0059] 用户信息管理单元执行用户信息的添加、删除以及管理;
[0060] 设备管理单元执行设备信息的添加、删除指令;
[0061] 疲劳程度分析单元,基于管制人员工作组整体疲劳程度分析出管制人员的疲劳程度分值;
[0062] 曲线绘制单元绘制疲劳情形曲线图,以用于提醒管制人员关注状态;
[0063] 疲劳预警数据推送单元用于将疲劳信息推送至应用端;
[0064] 视频存储查询回放单元,视频存储查询回放单元连接处理模块,用于建立预留查询接口,并执行管制人员的查询追溯,通过算法综合对值班员异常状态进行监测,可管理前
端疲劳监测设备,将报警记录导入,预留报警记录浏览检索或内容查看,报警统计分析,并
将报警信息推送到值班主任的穿戴设备进行提醒。
[0065] 在本发明的一实施例中,信息采集端包括分别与处理模块连接的面部信息采集单元、声音采集单元以及疲劳特征数据库,
[0066] 面部信息采集单元包括图像识别子单元、人脸关键点监测子单元、神经网络分析子单元、深度学习子单元以及疲劳特征分析子单元,基于算法引擎将采集的人脸数据进行
人脸特征提取以及识别,本发明在具体实施时通常以PERCLOS值(Percentage of Eyelid 
Closure Over the Pupil Over Time,指眼睛闭合时间占某一特定时间的百分率)、平均闭
眼时长、平均眨眼频率、持续闭眼时间、持续睁眼时间、打哈欠频率与持续时间等作为疲劳
诊断指标;
[0067] 声音采集单元包括原始声音采集处理子单元、端点监测子单元、噪音检测子单元以及声纹格式无损转换子单元,用于将原始声音经采集处理、声纹格式无损转换后,对特定
环境下采集的声音进行降噪处理,以建立音频样本指标判断声波的变化,其中,音频样本指
标判断声波的变化,对比梅尔频谱倒谱系统(MPCC)和线性预测倒谱分析(LPCC)方法以及声
学心理分析算法;
[0068] 疲劳特征数据库包括人脸疲劳特征数据库、声纹疲劳特征数据库以及存储数据库,存储数据库分别连接人脸疲劳特征数据库以及声纹疲劳特征数据库,以用于将信息采
集端采集的疲劳特征数据进行一人一档分类存储,独立建立个人疲劳特征库。
[0069] 在本发明的一实施例中,如图4所示,综合智能分析系统还包括分别与处理模块连接的人脸分析模块以及声纹分析模块,其中,
[0070] 人脸分析模块包括头部姿势分析子单元、眼部特征分析子单元以及眼部特征分析子单元,以用于基于主成分分析法、回归分析法、人工神经网络分析法、机器深度学习分析
法以及大数据分析方法建立管制人员疲劳诊断综合测评模型,并通过样本试验计算确定综
合测评模型中每项指标的临界值,形成一个疲劳临界指标集或疲劳曲线,以完成疲劳诊断
指标体系构建;
[0071] 声纹分析模块基于疲劳声学模型的算法引擎将信息采集端采集到的声纹数据进行声纹特征提取并识别,其具体实施方式为:
[0072] (1)利用疲劳声学模型的感知掩蔽处理步骤将声纹数据语音中的疲劳高敏感性频率成分突显出来,以用于获得更为鲁棒的疲劳表征能力,进而避免现有语音特征易受干扰
的问题;
[0073] (2)将获取的语音信号进行逐帧对比分析来提取多种心理声学感知特征,并进行连续地量化描述被管制人员的疲劳异常音变化,最后针对语音波形不同步而导致的感知特
征提取误差问题,给出了语音帧的快速对准方案,而无需事先对语音样本进行预分割,区别
于现有非线性分析方法在提取混沌、分形等非线性特征时往往需要进行浊音音素的预分割
问题;
[0074] (3)采用多参考样本对比分析的疲劳监测策略,搭建多分类器融合的疲劳监测模型,进行管制人员的声纹信息监测,
[0075] 通过上述步骤得出相应的疲劳诊断指标体系后,用户或工作人员通过摄像头和音频采集装24小时监测,实时获取相应的声音样本和图像信息,将获得的信息与疲劳临界指
标集或疲劳曲线匹配,识别并判断管制人员是否处于疲劳状态,并实现告警功能。
[0076] 作为本发明的一实施例,如图1‑3所示,应用端包括PC端后台管理平台以及移动手环应用端,其中,
[0077] PC端后台管理平台连接处理模块,用于PC端后台管理平台的设备管理以及设备管理信息的推送;
[0078] 移动手环应用端连接处理模块,用于进行疲劳管制人员的信息推送以及震动提醒疲劳管制人员,移动手环应用端包括信息输送子单元、预警子单元以及震动子单元,对于通
过人脸视觉、声纹识别疲劳监测我们需要大量的有效数据,即,视频或音频,通过机器学习
优化算法,提升准确性,建立训练库对深眸进行大量的深度学习训练。
[0079] 作为本发明的一实施例,如图1‑3所示,综合智能分析系统还包括信息录入查询单元、自动监控模块、监控地图单元以及声纹学习单元,其中,
[0080] 信息录入查询单元连接处理模块用于录入查询管制人员的基础信息,基础信息包括:表字段名:姓名、部门、空管员编号、手环蓝牙编号、声纹疲劳模型、建模时间、人脸疲劳
模型、建模时间、群组号以及备注等;
[0081] 自动监控模块连接处理模块用于初始设置管制人员疲劳参数,以及对管制人员的疲劳阙值进行监控,自动监控模块包括人脸设置单元、声纹设置单元、显示单元以及手动分
析单元,其中,人脸设置单元进行人脸疲劳、打呵欠,眨眼,瞌睡点头等参数的设置,声纹设
置单元进行声纹疲劳阀值等参数的设置;
[0082] 监控地图单元连接处理模块,用于统一控制管理并显示管制人员的实时疲劳程度,具体实施方式为:通过显示控制大屏实现每个管制员的实时疲劳程度,随时通过点击管
制员属性,显示其每天每周疲劳曲线,自定义:绿色表示正常,黄色表示轻度疲劳,红色表示
严重疲劳;
[0083] 声纹学习单元连接处理模块,用于管制人员进行声纹学习,在具体实施时,管制人员可以手动增加管制员编号,选择采集文件。
[0084] 作为本发明的一实施例,如图1‑3所示,移动手环应用端还包括:
[0085] 与处理模块连接以用于配合智能摄像头自动跟踪人脸,定时采集人脸疲劳程度的图像采集单元;
[0086] 与处理模块连接以用于利用手机音频输入获取耳麦音频信号、自动录音以及采集声音疲劳程度的声纹采集单元;
[0087] 与处理模块连接以用于对采集信息进行监控并与综合智能分析系统建立数据交互的监控单元;
[0088] 与处理模块连接以用于采集移动手环中人体其他信息并上传综合智能分析系统做辅助疲劳研判的手环接口子单元。
[0089] 作为本发明的一实施例,如图4所示,管制人员的个人疲劳的行为特征主要表现在:语音频谱变化明显、元音发音变化、动作迟缓、哈欠连天、频频点头、眼睑下垂、甚至闭
合,视线模糊,眼睛发红,脸部肌肉放松,嘴角下垂,眼眉下垂等,本发明通过个体疲劳的行
为特征来进行判定并告警,再通过带班主任的判定进行确认与驳回,从而不断提高告警的
准确性,同时区分个体化差异,建立每一个管制员的个体疲劳特征库。
[0090] 作为本发明的一实施例说明,如图5‑8所示,为本发明的一组优选实施方式:
[0091] 首先,提供30人的近2000条人脸和声纹数据进行分析并进行疲劳验证,并提供了近810条30人的三类语音数据,分别为体力疲劳,即,连续爬升10层楼体力不支前后的3组语
音数据;身体疲劳和心理疲劳,即晚上11点后连续观看3小时小说打哈欠的3组语音数据,心
理疲劳,即,对体育彩票购买点多次未中奖多次购买每次长叹者开奖前后的3组语音数据进
行了采集标注;
[0092] 然后基于本发明引擎进行小规模场景训练,得出以下数据节选其中2人数据对比结果如图7‑8所示。
[0093] 作为本发明的另一组实施例说明,本发明对对空管人员个人声纹疲劳特征采集时优选实施放方式为:
[0094] 首先对日常行为数据采集:遴选表现优秀,作息正常空管人员每天分四时段进行数据采集早上8:00~9:00,中午12:00~13:00,下午17:00~18:00,晚上22:00~23:00进行
语音采集和人脸采集,要求20人以上,每时段语音长度大于60秒,人脸数据每组视频3段;
[0095] 其次,以上数据为正常测试集进行正常数据标注然后注册验证并分析得分;
[0096] 最后,以上人员在早上6点起床时候采集声音和人脸数据每人3组,进行疲劳数据标注。
[0097] 在本发明的一实施例中,本发明的有益效果如下:
[0098] 1、测量管制员疲劳特征数据获取采用嵌入式的方式,即直接通过实时运行的视频和音频识别系统获取,而不是让管制员脱离工作岗位后,单独对其进行实验获取的数据,这
就保证了数据来源的真实可靠性、实时性、客观性;
[0099] 2、本发明通过对管制员高强度工作环境下疲劳状态的深入分析,利用基于人工智能AI的面部识别算法、大数据分析、机器深度学习,获取管制员疲劳状态并传递至空管值班
主任的主动告警,为空管值班主任提供科学、实时、客观、智能的决策支持;
[0100] 3、通过信息采集端、综合智能分析系统以及应用端的配合方式,使得本发明具备为安全管理人员提供全天候的、持续的、实时的管制员疲劳状况监测优点,以此同时,将有
效摆脱通过人工手段难以准确、实时的评估管制员疲劳状态的困扰,为各类管制运行决策
提供客观且准确的依据。
[0101] 以上显示和描述了本发明的基本原理和主要特征和本发明的优点,对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或
基本特征的情况下,能够以其他的具体形式实现本发明;因此,无论从哪一点来看,均应将
实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说
明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明
内,不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
[0102] 此外,应当理解,虽然本说明书按照实施方式加以描述,但并非每个实施方式仅包含一个独立的技术方案,说明书的这种叙述方式仅仅是为清楚起见,本领域技术人员应当
将说明书作为一个整体,各实施例中的技术方案也可以经适当组合,形成本领域技术人员
可以理解的其他实施方式。