设备控制方法、装置、电器、总控设备及存储介质转让专利

申请号 : CN201810257775.5

文献号 : CN108398906B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 杨锐崔磊

申请人 : 百度在线网络技术(北京)有限公司

摘要 :

本发明提出一种设备控制方法、装置、电器、总控设备及计算机可读存储介质。其中应用于被控设备的设备控制方法包括:获取用户的姿态图像;根据获取的所述用户的姿态图像,判断用户对所述被控设备是否有控制意图;若判断用户对所述被控设备有控制意图,则根据用户指令控制所述被控设备执行相关操作。本发明实施例通过用户的控制意图角度的识别更准确地确定用户是否对设备有控制意图,从而避免多个设备同时对用户的指令进行识别而造成的误操作。

权利要求 :

1.一种设备控制方法,应用于被控设备,其特征在于,包括:获取用户的姿态图像;

根据获取的所述用户的姿态图像确定身体朝向角度、脸的朝向角度和视线朝向角度;

获取环境图像;

识别获取的所述环境图像中除所述被控设备本身的其它被控设备;

测量所述其它被控设备与所述被控设备本身的距离;

根据所述其它被控设备与所述被控设备本身的距离预设角度阈值;

若所述其它被控设备与所述被控设备本身的距离小于等于预设的距离阈值,则在所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度均小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图;

若判断用户对所述被控设备有控制意图,则根据用户指令控制所述被控设备执行相关操作。

2.根据权利要求1所述的方法,其特征在于,判断用户对所述被控设备有控制意图,包括:根据获取的所述用户的姿态图像确定用户身体的角度、用户脸的角度和/或用户视线角度;

判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备;

若判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备,则判断用户对所述被控设备有控制意图。

3.根据权利要求2所述的方法,其特征在于,判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备,包括:计算用户的朝向角度,所述用户的朝向角度包括身体朝向角度、脸的朝向角度和/或视线朝向角度,所述身体朝向角度是用户身体所在平面的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度,所述脸的朝向角度是用户脸所在平面的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度,所述视线朝向角度是与视线角度垂直的平面所在的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度;

若所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中至少一个角度小于等于预设的角度阈值,则判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备。

4.根据权利要求3所述的方法,其特征在于,还包括:若所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中任意两个角度的差值大于等于预设的角度差值阈值,则在所述视线朝向角度小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。

5.根据权利要求3所述的方法,其特征在于,还包括:在不能根据获取的所述用户的姿态图像确定用户视线角度的情况下,在所述脸的朝向角度小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。

6.根据权利要求1-5中任一项所述的方法,其特征在于,所述用户指令包括语音指令;

在获取用户的姿态图像之前,还包括:

接收所述语音指令;

在接收到的所述语音指令中识别用户的控制意图所针对的设备;

若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。

7.一种设备控制方法,应用于总控设备,其特征在于,包括:获取用户的姿态图像;

根据获取的所述用户的姿态图像以及预先存储的多个被控设备的位置信息确定针对多个被控设备的用户朝向角度,判断用户的控制意图所针对的设备是所述多个被控设备中的用户朝向角度最小的设备,进而对所述用户的控制意图所针对的设备进行相关控制。

8.根据权利要求7所述的方法,其特征在于,根据获取的所述用户的姿态图像以及预先存储的多个被控设备的位置信息确定针对多个被控设备的用户朝向角度,判断用户的控制意图所针对的设备是所述多个被控设备中的用户朝向角度最小的设备,包括:根据获取的所述用户的姿态图像以及预先存储的多个被控设备的位置信息,确定用户身体的角度、用户脸的角度和/或用户视线角度;

判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述多个被控设备中的各个设备;

确定用户对目标设备有控制意图,所述目标设备是用户身体的角度、用户脸的角度和/或用户视线角度所面向的设备。

9.根据权利要求8所述的方法,其特征在于,

判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述多个被控设备中的各个设备,包括:计算各个设备的用户朝向角度,所述用户朝向角度包括身体朝向角度、脸的朝向角度和/或视线朝向角度,所述身体朝向角度是用户身体所在平面的方向与设备面板所在的平面的方向构成的角度,所述脸的朝向角度是用户脸所在平面的方向与设备面板所在的平面的方向构成的角度,所述视线朝向角度是与视线角度垂直的平面所在的方向与设备面板所在的平面的方向构成的角度;

确定用户对目标设备有控制意图,包括:将所述多个被控设备中的用户朝向角度最小的设备确定为所述目标设备。

10.根据权利要求9所述的方法,其特征在于,还包括:若存在至少一个设备的所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中任意两个角度的差值大于等于预设的角度差值阈值,则将所述多个被控设备中的视线朝向角度最小的设备确定为所述目标设备。

11.根据权利要求9所述的方法,其特征在于,还包括:在不能根据获取的所述用户的姿态图像确定用户视线角度的情况下,则将所述多个被控设备中的脸的朝向角度最小的设备确定为所述目标设备。

12.根据权利要求8-11中任一项所述的方法,其特征在于,在获取用户的姿态图像之前,还包括:接收用户的语音指令;

在接收到的所述语音指令中识别用户的控制意图所针对的设备;

若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。

13.一种设备控制装置,应用于被控设备,其特征在于,包括:拍摄镜头,用于获取用户的姿态图像;

判断单元,用于根据获取的所述用户的姿态图像,确定身体朝向角度、脸的朝向角度和视线朝向角度;获取环境图像;识别获取的所述环境图像中除所述被控设备本身的其它被控设备;测量所述其它被控设备与所述被控设备本身的距离;根据所述其它被控设备与所述被控设备本身的距离预设角度阈值;若所述其它被控设备与所述被控设备本身的距离小于等于预设的距离阈值,则在所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度均小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图;

控制单元,用于若判断用户对所述被控设备有控制意图,则根据用户指令控制所述被控设备执行相关操作。

14.根据权利要求13所述的装置,其特征在于,所述判断单元还用于:根据获取的所述用户的姿态图像确定用户身体的角度、用户脸的角度和/或用户视线角度;

判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备;

若判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备,则判断用户对所述被控设备有控制意图。

15.根据权利要求13或14所述的装置,其特征在于,所述用户指令包括语音指令;所述装置还包括语音识别单元,用于:在获取用户的姿态图像之前,接收所述语音指令;

在接收到的所述语音指令中识别用户的控制意图所针对的设备;

若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。

16.一种设备控制装置,应用于总控设备,其特征在于,包括:拍摄镜头,用于获取用户的姿态图像;

判断单元,用于根据获取的所述用户的姿态图像以及预先存储的多个被控设备的位置信息确定针对多个被控设备的用户朝向角度,判断用户的控制意图所针对的设备是所述多个被控设备中的用户朝向角度最小的设备,进而对所述用户的控制意图所针对的设备进行相关控制。

17.根据权利要求16所述的装置,其特征在于,所述判断单元还用于:根据获取的所述用户的姿态图像以及预先存储的多个被控设备的位置信息,确定用户身体的角度、用户脸的角度和/或用户视线角度;

判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述多个被控设备中的各个设备;

确定用户对目标设备有控制意图,所述目标设备是用户身体的角度、用户脸的角度和/或用户视线角度所面向的设备。

18.根据权利要求16或17所述的装置,其特征在于,还包括语音识别单元,用于:在获取用户的姿态图像之前,接收用户的语音指令;

在接收到的所述语音指令中识别用户的控制意图所针对的设备;

若识别到所述用户的控制意图所针对的设备,则控制所述拍摄镜头不执行所述获取用户的姿态图像的操作。

19.一种电器,其特征在于,包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序;

当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1-6中任一所述的方法。

20.一种总控设备,其特征在于,包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序;

当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求7-12中任一所述的方法。

21.一种计算机可读存储介质,其存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6或7-12中任一所述的方法。

说明书 :

设备控制方法、装置、电器、总控设备及存储介质

技术领域

[0001] 本发明涉及信息技术领域,尤其涉及一种设备控制方法、装置、电器、总控设备及计算机可读存储介质。

背景技术

[0002] 传统的对多个设备的控制方法,通常是分别使用设备各自的遥控器进行控制,而这些遥控器往往是互不通用的,为了对不同设备进行控制,人们往往要学习如何使用不同的操控工具,操作过于繁琐。人们更希望使用更简单、更自然的操作方式来控制设备,基于该需求,手势控制、语音控制和肢体动作感应控制应运而生。
[0003] 目前,为了实现上述控制方式,受控设备要安装有摄像头或者语音设备,用于实现视觉识别或语音识别。在实际应用环境中,就可能有多个支持上述控制方式的设备分别具有各自的摄像头或者语音设备、以及识别软件,这样就容易在识别过程中造成误操作,例如机顶盒将针对电视机的手势指示理解为对自身的操控。

发明内容

[0004] 本发明实施例提供一种设备控制方法、装置、电器、总控设备及计算机可读存储介质,以至少解决现有技术中的一个或多个技术问题。
[0005] 第一方面,本发明实施例提供了一种设备控制方法,应用于被控设备,包括:获取用户的姿态图像;根据获取的所述用户的姿态图像,判断用户对所述被控设备是否有控制意图;若判断用户对所述被控设备有控制意图,则根据用户指令控制所述被控设备执行相关操作。
[0006] 结合第一方面,本发明在第一方面的第一种实施方式中,根据获取的所述用户的姿态图像,判断用户对所述被控设备是否有控制意图,包括:根据获取的所述用户的姿态图像确定用户身体的角度、用户脸的角度和/或用户视线角度;判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备;若判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备,则判断用户对所述被控设备有控制意图。
[0007] 结合第一方面的第一种实施方式,本发明在第一方面的第二种实施方式中,判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备,包括:计算用户的朝向角度,所述用户的朝向角度包括身体朝向角度、脸的朝向角度和/或视线朝向角度,所述身体朝向角度是用户身体所在平面的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度,所述脸的朝向角度是用户脸所在平面的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度,所述视线朝向角度是与视线角度垂直的平面所在的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度;若所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中至少一个角度小于等于预设的角度阈值,则判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备。
[0008] 结合第一方面的第二种实施方式,本发明在第一方面的第三种实施方式中,还包括:若所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中任意两个角度的差值大于等于预设的角度差值阈值,则在所述视线朝向角度小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。
[0009] 结合第一方面的第二种实施方式,本发明在第一方面的第四种实施方式中,还包括:在不能根据获取的所述用户的姿态图像确定用户视线角度的情况下,在所述脸的朝向角度小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。
[0010] 结合第一方面的第二种实施方式,本发明在第一方面的第五种实施方式中,还包括:获取环境图像;识别获取的所述环境图像中除所述被控设备本身的其它被控设备;测量所述其它被控设备与所述被控设备本身的距离;根据所述其它被控设备与所述被控设备本身的距离设置所述角度阈值,和/或,若所述其它被控设备与所述被控设备本身的距离小于等于预设的距离阈值,则在所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度均小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。
[0011] 结合第一方面、第一方面的第一种实施方式、第一方面的第二种实施方式、第一方面的第三种实施方式、第一方面的第四种实施方式、第一方面的第五种实施方式,本发明在第一方面的第六种实施方式中,所述用户指令包括语音指令;在获取用户的姿态图像之前,还包括:接收所述语音指令;在接收到的所述语音指令中识别用户的控制意图所针对的设备;若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。
[0012] 第二方面,本发明实施例提供了一种设备控制方法,应用于总控设备,包括:获取用户的姿态图像;根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,判断用户的控制意图所针对的设备,进而对所述用户的控制意图所针对的设备进行相关控制。
[0013] 结合第二方面,本发明在第二方面的第一种实施方式中,根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,判断用户的控制意图所针对的设备,包括:根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,确定用户身体的角度、用户脸的角度和/或用户视线角度;判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述至少一个设备中的各个设备;确定用户对目标设备有控制意图,所述目标设备是用户身体的角度、用户脸的角度和/或用户视线角度所面向的设备。
[0014] 结合第二方面的第一种实施方式,本发明在第二方面的第二种实施方式中,判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述至少一个设备中的各个设备,包括:计算各个设备的用户朝向角度,所述用户朝向角度包括身体朝向角度、脸的朝向角度和/或视线朝向角度,所述身体朝向角度是用户身体所在平面的方向与设备面板所在的平面的方向构成的角度,所述脸的朝向角度是用户脸所在平面的方向与设备面板所在的平面的方向构成的角度,所述视线朝向角度是与视线角度垂直的平面所在的方向与设备面板所在的平面的方向构成的角度;确定用户对目标设备有控制意图,包括:将所述至少一个设备中的用户朝向角度最小的设备确定为所述目标设备。
[0015] 结合第二方面的第二种实施方式,本发明在第二方面的第三种实施方式中,还包括:若存在至少一个设备的所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中任意两个角度的差值大于等于预设的角度差值阈值,则将所述至少一个设备中的视线朝向角度最小的设备确定为所述目标设备。
[0016] 结合第二方面的第二种实施方式,本发明在第二方面的第四种实施方式中,还包括:在不能根据获取的所述用户的姿态图像确定用户视线角度的情况下,则将所述至少一个设备中的脸的朝向角度最小的设备确定为所述目标设备。
[0017] 结合第二方面、第二方面的第一种实施方式、第二方面的第二种实施方式、第二方面的第三种实施方式、第二方面的第四种实施方式,本发明在第二方面的第五种实施方式中,在获取用户的姿态图像之前,还包括:接收用户的语音指令;在接收到的所述语音指令中识别用户的控制意图所针对的设备;若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。
[0018] 第三方面,本发明实施例提供了一种设备控制装置,应用于被控设备,包括:拍摄镜头,用于获取用户的姿态图像;判断单元,用于根据获取的所述用户的姿态图像,判断用户对所述被控设备是否有控制意图;控制单元,用于若判断用户对所述被控设备有控制意图,则根据用户指令控制所述被控设备执行相关操作。
[0019] 结合第三方面,本发明在第三方面的第一种实施方式中,所述判断单元还用于:根据获取的所述用户的姿态图像确定用户身体的角度、用户脸的角度和/或用户视线角度;判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备;若判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备,则判断用户对所述被控设备有控制意图。
[0020] 结合第三方面、第三方面的第一种实施方式,本发明在第三方面的第二种实施方式中,所述用户指令包括语音指令;所述装置还包括语音识别单元,用于:在获取用户的姿态图像之前,接收所述语音指令;在接收到的所述语音指令中识别用户的控制意图所针对的设备;若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。
[0021] 第四方面,本发明实施例提供了一种设备控制装置,应用于总控设备,包括:拍摄镜头,用于获取用户的姿态图像;判断单元,用于根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,判断用户的控制意图所针对的设备,进而对所述用户的控制意图所针对的设备进行相关控制。
[0022] 结合第四方面,本发明在第四方面的第一种实施方式中,所述判断单元还用于:根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,确定用户身体的角度、用户脸的角度和/或用户视线角度;判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述至少一个设备中的各个设备;确定用户对目标设备有控制意图,所述目标设备是用户身体的角度、用户脸的角度和/或用户视线角度所面向的设备。
[0023] 结合第四方面、第四方面的第一种实施方式,本发明在第四方面的第二种实施方式中,还包括语音识别单元,用于:在获取用户的姿态图像之前,接收用户的语音指令;在接收到的所述语音指令中识别用户的控制意图所针对的设备;若识别到所述用户的控制意图所针对的设备,则控制所述拍摄镜头不执行所述获取用户的姿态图像的操作。
[0024] 在一个可能的设计中,设备控制装置的结构中包括处理器和存储器,所述存储器用于存储支持设备控制装置执行上述第一方面或第二方面中设备控制方法的程序,所述处理器被配置为用于执行所述存储器中存储的程序。
[0025] 第五方面,本发明实施例提供了一种电器,包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现第一方面中任一所述的方法。
[0026] 第六方面,本发明实施例提供了一种总控设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现上述第二方面中任一所述的方法。
[0027] 第七方面,本发明实施例提供了一种计算机可读存储介质,其存储有计算机程序,该程序被处理器执行时实现上述第一方面或第二方面中任一所述的方法。
[0028] 上述技术方案中的一个技术方案具有如下优点或有益效果:通过用户的控制意图角度的识别更准确地确定用户是否对于本设备有控制意图,从而避免多个设备同时对用户的指令进行识别而造成的误操作。
[0029] 上述技术方案中的另一个技术方案具有如下优点或有益效果:通过总控式控制系统,将用户的控制意图角度与多个设备的位置信息进行比对,从总体上掌握用户的控制意图,彻底避免两个以上设备同时响应用户指令的误操作现象,同时不必在每个设备上安装摄像头,节省了设备的制造成本。
[0030] 上述概述仅仅是为了说明书的目的,并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外,通过参考附图和以下的详细描述,本发明进一步的方面、实施方式和特征将会是容易明白的。

附图说明

[0031] 在附图中,除非另外规定,否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解,这些附图仅描绘了根据本发明公开的一些实施方式,而不应将其视为是对本发明范围的限制。
[0032] 图1为本发明实施例的应用于被控设备的设备控制方法的整体框架图;
[0033] 图2为本发明提供的应用于被控设备的设备控制方法的一种优选实施例的步骤流程图;
[0034] 图3为本发明提供的应用于被控设备的设备控制方法的另一优选实施例的步骤流程图;
[0035] 图4为本发明提供的应用于被控设备的设备控制方法的又一优选实施例的步骤流程图;
[0036] 图5为本发明提供的应用于被控设备的设备控制方法的再一优选实施例的步骤流程图;
[0037] 图6为本发明实施例的应用于总控设备的设备控制方法的整体框架图;
[0038] 图7为本发明提供的应用于总控设备的设备控制方法的一种优选实施例的步骤流程图;
[0039] 图8为本发明提供的应用于总控设备的设备控制方法的另一优选实施例的步骤流程图;
[0040] 图9为本发明提供的应用于总控设备的设备控制方法的又一优选实施例的步骤流程图;
[0041] 图10为本发明实施例的应用于被控设备的设备控制装置的整体框架图;
[0042] 图11为本发明实施例的应用于总控设备的设备控制装置的整体框架图。

具体实施方式

[0043] 在下文中,仅简单地描述了某些示例性实施例。正如本领域技术人员可认识到的那样,在不脱离本发明的精神或范围的情况下,可通过各种不同方式修改所描述的实施例。因此,附图和描述被认为本质上是示例性的而非限制性的。
[0044] 本发明实施例提供了一种应用于被控设备的设备控制方法。图1为本发明实施例的应用于被控设备的设备控制方法的整体框架图。如图1所示,本发明实施例的应用于被控设备的设备控制方法,包括:步骤S110,获取用户的姿态图像;步骤S120,根据获取的所述用户的姿态图像,判断用户对所述被控设备是否有控制意图;步骤S130,若判断用户对所述被控设备有控制意图,则根据用户指令控制所述被控设备执行相关操作。
[0045] 通常情况下在一个房间或使用空间内可能有多个电器设备,多个设备分别具有各自的摄像头或者语音设备、以及识别软件,分别对用户的手势指令、肢体动作指令或语音指令进行识别,根据识别结果进行设备控制。多个设备同时对用户的指令进行识别,容易在识别过程中造成误操作,例如机顶盒将针对电视机的手势指示理解为对自身的操控。因此每个设备首先需要识别用户的指令是不是针对被控设备本身的。本发明实施例通过设置于设备的摄像头获取用户的姿态图像,根据用户的姿态图像判断用户对所述被控设备是否有控制意图,可有效避免多个设备同时对用户的指令进行识别而造成的误操作。
[0046] 图2为本发明提供的应用于被控设备的设备控制方法的一种优选实施例的步骤流程图。如图2所示,根据本发明应用于被控设备的设备控制方法的一种实施方式,图1中的步骤S120,根据获取的所述用户的姿态图像,判断用户对所述被控设备是否有控制意图,包括:步骤S210,根据获取的所述用户的姿态图像确定用户身体的角度、用户脸的角度和/或用户视线角度;步骤S220,判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备;步骤S230,若判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备,则判断用户对所述被控设备有控制意图。
[0047] 在这种实施方式中,可使用图像分析算法分析用户的姿态图像,具体地,根据用户的姿态图像确定用户身体的角度、脸的角度和/或视线角度。例如人脸图像的面向角度有多种:正面朝向称为十分面,被摄对象在画面上两对称;九分面,脸部朝向与拍摄镜头构成18度侧角;八分面为36度侧角;七分面为54度侧角;六分面为72度侧角;五分面为90度侧角,这时,被摄对象在画面上只表现一只眼睛,也就是全侧面。可使用图像分析算法分析人脸图像中左右两侧的对称情况,进而判断脸的角度是否是基本正对本设备的。如果用户身体的角度、脸的角度和/或视线角度是基本正对本设备的,则认为用户是对本设备有控制意图的。
[0048] 图3为本发明提供的应用于被控设备的设备控制方法的另一优选实施例的步骤流程图。如图3所示,根据本发明应用于被控设备的设备控制方法的一种实施方式,图2中的步骤S220,判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备,包括:步骤S310,计算用户的朝向角度,所述用户的朝向角度包括身体朝向角度、脸的朝向角度和/或视线朝向角度,所述身体朝向角度是用户身体所在平面的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度,所述脸的朝向角度是用户脸所在平面的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度,所述视线朝向角度是与视线角度垂直的平面所在的方向与获取用户的姿态图像的拍摄镜头所在的平面的方向构成的角度;步骤S320,若所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中至少一个角度小于等于预设的角度阈值,则判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备。
[0049] 在这种实施方式中,可识别用户身体的角度、脸的角度和/或视线角度与拍摄镜头构成的角度,将用户身体所在平面的方向、脸所在平面的方向和/或与视线角度垂直的平面所在的方向与拍摄镜头所在的平面的方向构成的角度作为用户的朝向角度,当用户的朝向角度小于等于预设的角度阈值,则认为用户的角度是基本正对本设备的,角度阈值可设置为5°-10°。
[0050] 根据本发明应用于被控设备的设备控制方法的一种实施方式,还包括:若所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中任意两个角度的差值大于等于预设的角度差值阈值,则在所述视线朝向角度小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。
[0051] 在这种实施方式中,若身体的角度、脸的角度和视线角度这三者与拍摄镜头构成的角度不同,则优先以视线角度与拍摄镜头构成的角度作为用户的朝向角度,因为视线角度最能反应一个人的意识意图,在各个角度数据不一致时,优先考虑视线角度,能够最准确地识别用户的控制意图。
[0052] 根据本发明应用于被控设备的设备控制方法的一种实施方式,还包括:在不能根据获取的所述用户的姿态图像确定用户视线角度的情况下,在所述脸的朝向角度小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。
[0053] 在这种实施方式中,若由于光线等原因无法识别视线角度与拍摄镜头构成的角度;则以脸的角度与拍摄镜头构成的角度作为用户的朝向角度;若由于光线等原因无法识别脸的角度与拍摄镜头构成的角度;则以身体的角度与拍摄镜头构成的角度作为用户的朝向角度。也就是说,三种角度数据的优先级由高到低的顺序是视线角度、脸的角度、用户身体的角度,优先级越高的数据,越能准确地反应用户的控制意图。
[0054] 图4为本发明提供的应用于被控设备的设备控制方法的又一优选实施例的步骤流程图。如图4所示,根据本发明应用于被控设备的设备控制方法的一种实施方式,还包括:步骤S410,获取环境图像;步骤S420,识别获取的所述环境图像中除所述被控设备本身的其它被控设备;步骤S430,测量所述其它被控设备与所述被控设备本身的距离;步骤S440,根据所述其它被控设备与所述被控设备本身的距离设置所述角度阈值,和/或,若所述其它被控设备与所述被控设备本身的距离小于等于预设的距离阈值,则在所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度均小于等于预设的角度阈值的情况下,判断用户对所述被控设备有控制意图。
[0055] 在这种实施方式中,在所述其它被控设备与所述被控设备本身的距离小的情况下,设置所述角度阈值相应小。若实施控制的多个设备放置的位置集中,也就是距离比较近,可设置提高识别精度,将角度阈值设置得更小,或者在身体的角度、脸的角度和视线角度与拍摄镜头构成的角度三者均小于角度阈值的情况下,才认为是用户正对本设备。
[0056] 在判断用户对所述被控设备是否有控制意图之后,若确定用户正对本设备,则识别用户的手势指令、肢体动作指令或接收用户的语音指令,并根据用户指令控制设备执行相关操作;若确定用户不是正对本设备,则不执行任何操作。
[0057] 图5为本发明提供的应用于被控设备的设备控制方法的再一优选实施例的步骤流程图。如图5所示,根据本发明应用于被控设备的设备控制方法的一种实施方式,所述用户指令包括语音指令;在获取用户的姿态图像之前,还包括:步骤S510,接收所述语音指令;步骤S520,在接收到的所述语音指令中识别用户的控制意图所针对的设备;步骤S530,若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。
[0058] 在语音控制的情况下,优先识别用户的语音信息中的设备信息。若在用户的语音中识别出用户意图控制的对象是本设备,则不进行用户的控制意图角度的识别,根据语音指令控制设备执行相关操作;若在用户的语音中识别出用户意图控制的对象不是本设备,则不进行用户的控制意图角度的识别,且不执行任何操作。比如,用户明确地说出语音指令:“打开空调。”则空调识别出语音信息后执行开启操作,而加湿器识别出语音信息中包括空调,从而判断这条语音指令不是对本设备的控制,因而不进行用户的控制意图角度的识别,且不执行任何操作。
[0059] 另一方面,本发明实施例提供了一种应用于总控设备的设备控制方法。图6为本发明实施例的应用于总控设备的设备控制方法的整体框架图。如图6所示,本发明实施例的应用于总控设备的设备控制方法包括:步骤S610,获取用户的姿态图像;步骤S620,根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,判断用户的控制意图所针对的设备,进而对所述用户的控制意图所针对的设备进行相关控制。
[0060] 通常情况下在一个房间或使用空间内可能有多个电器设备。则可在房间内设置总控设备,总控设备包括至少一个摄像头和控制系统,通过设置于房间内的至少一个摄像头获取用户的姿态图像。将获取的用户的姿态图像传送给控制系统,控制系统通过分析用户的姿态图像,确定用户的控制意图角度。
[0061] 其中,控制系统与房间内的多个设备连接,可向多个设备发送指令从而实现对多个设备的控制。同时控制系统预存有多个设备的位置信息,包括设备在房间平面图中的位置坐标、设置的高度以及设备的正面朝向方向。根据用户的姿态图像和多个设备的位置信息判断用户的控制意图是哪一个设备,进而对所述用户的控制意图所针对的设备进行相关控制。
[0062] 图7为本发明提供的应用于总控设备的设备控制方法的一种优选实施例的步骤流程图。如图7所示,根据本发明应用于总控设备的设备控制方法的一种实施方式,图6中的步骤S620,根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,判断用户的控制意图所针对的设备,包括:步骤S710,根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,确定用户身体的角度、用户脸的角度和/或用户视线角度;步骤S720,判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述至少一个设备中的各个设备;步骤S730,确定用户对目标设备有控制意图,所述目标设备是用户身体的角度、用户脸的角度和/或用户视线角度所面向的设备。
[0063] 在这种实施方式中,分析用户的姿态图像,包括:根据用户的姿态图像确定用户身体的角度、脸的角度和/或视线角度。对比用户的控制意图角度和设备的位置信息,如果用户的角度、脸的角度和/或视线角度是基本正对某一设备的,则认为用户是对该设备有控制意图的。这里图像分析算法可采用与应用于被控设备中的算法类似的原理,二者的区别在于:应用于被控设备中的图像分析算法是判断身体的角度、脸的角度和/或视线角度是否面向其设备自身;应用于总控设备中的图像分析算法是判断身体的角度、脸的角度和/或视线角度是面向于使用空间中多个设备中的哪一个设备。
[0064] 图8为本发明提供的应用于总控设备的设备控制方法的另一优选实施例的步骤流程图。如图8所示,根据本发明应用于总控设备的设备控制方法的一种实施方式,图7中的步骤S720,判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述至少一个设备中的各个设备,包括:步骤S810,计算各个设备的用户朝向角度,所述用户朝向角度包括身体朝向角度、脸的朝向角度和/或视线朝向角度,所述身体朝向角度是用户身体所在平面的方向与设备面板所在的平面的方向构成的角度,所述脸的朝向角度是用户脸所在平面的方向与设备面板所在的平面的方向构成的角度,所述视线朝向角度是与视线角度垂直的平面所在的方向与设备面板所在的平面的方向构成的角度;图7中的步骤S730,确定用户对目标设备有控制意图,包括:步骤S820,将所述至少一个设备中的用户朝向角度最小的设备确定为所述目标设备。
[0065] 其中,各个设备的用户朝向角度计算出来之后可进行比较。在一种实施方式中,在每个设备的身体朝向角度、脸的朝向角度和/或视线朝向角度这三个角度中,可取其最小值作为该设备的用户朝向角度;然后再比较各个设备的用户朝向角度,再从中取最小值,将最小值对应的设备确定为用户想要控制的所述目标设备。
[0066] 根据本发明应用于总控设备的设备控制方法的一种实施方式,还包括:若存在至少一个设备的所述身体朝向角度、所述脸的朝向角度和所述视线朝向角度中任意两个角度的差值大于等于预设的角度差值阈值,则将所述至少一个设备中的视线朝向角度最小的设备确定为所述目标设备。与被控设备的设备控制方法类似,优先考虑视线角度,认为视线角能够最准确地识别用户的控制意图。
[0067] 根据本发明应用于总控设备的设备控制方法的一种实施方式,还包括:在不能根据获取的所述用户的姿态图像确定用户视线角度的情况下,则将所述至少一个设备中的脸的朝向角度最小的设备确定为所述目标设备。由于光线等原因无法识别某一个角度,与被控设备的设备控制方法类似,三种角度数据的优先级由高到低的顺序是视线角度、脸的角度、用户身体的角度,优先级越高的数据,越能准确地反应用户的控制意图。
[0068] 在识别出用户的控制意图所针对的设备之后,若确定用户正对某一设备,则识别用户的手势指令、肢体动作指令或接收用户的语音指令,并根据用户指令控制相应设备执行相关操作;若确定用户不是正对任一设备,则不执行任何操作。
[0069] 图9为本发明提供的应用于总控设备的设备控制方法的又一优选实施例的步骤流程图。如图9所示,根据本发明应用于总控设备的设备控制方法的一种实施方式,在获取用户的姿态图像之前,还包括:步骤S910,接收用户的语音指令;步骤S920,在接收到的所述语音指令中识别用户的控制意图所针对的设备;步骤S930,若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。
[0070] 在语音控制的情况下,优先识别用户的语音信息中的设备信息。若在用户的语音中识别出用户意图控制的对象是某一设备,则不进行用户的控制意图角度的识别,根据语音指令控制相应设备执行相关操作。比如,用户明确地说出语音指令:“打开空调。”则总控设备识别出语音信息后给空调发送指令,控制空调执行开启操作。
[0071] 又一方面,本发明实施例提供了一种应用于被控设备的设备控制装置。图10为本发明实施例的应用于被控设备的设备控制装置的整体框架图。如图10所示,本发明实施例的应用于被控设备的设备控制装置包括:被控设备拍摄镜头100,用于获取用户的姿态图像;被控设备判断单元200,用于根据获取的所述用户的姿态图像,判断用户对所述被控设备是否有控制意图;被控设备控制单元300,用于若判断用户对所述被控设备有控制意图,则根据用户指令控制所述被控设备执行相关操作。
[0072] 根据本发明应用于被控设备的设备控制装置的一种实施方式,所述被控设备判断单元200还用于:根据获取的所述用户的姿态图像确定用户身体的角度、用户脸的角度和/或用户视线角度;判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述被控设备;若判断用户身体的角度、用户脸的角度和/或用户视线角度面向所述被控设备,则判断用户对所述被控设备有控制意图。
[0073] 根据本发明应用于被控设备的设备控制装置的一种实施方式,所述用户指令包括语音指令;所述装置还包括语音识别单元,用于:在获取用户的姿态图像之前,接收所述语音指令;在接收到的所述语音指令中识别用户的控制意图所针对的设备;若识别到所述用户的控制意图所针对的设备,则不执行所述获取用户的姿态图像的操作。
[0074] 又一方面,本发明实施例提供了一种应用于总控设备的设备控制装置。图11为本发明实施例的应用于总控设备的设备控制装置的整体框架图。如图11所示,本发明实施例的应用于总控设备的设备控制装置包括:总控设备拍摄镜头400,用于获取用户的姿态图像;总控设备判断单元500,用于根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,判断用户的控制意图所针对的设备,进而对所述用户的控制意图所针对的设备进行相关控制。
[0075] 根据本发明应用于总控设备的设备控制装置的一种实施方式,所述总控设备判断单元500还用于:根据获取的所述用户的姿态图像以及预先存储的至少一个设备的位置信息,确定用户身体的角度、用户脸的角度和/或用户视线角度;判断用户身体的角度、用户脸的角度和/或用户视线角度是否面向所述至少一个设备中的各个设备;确定用户对目标设备有控制意图,所述目标设备是用户身体的角度、用户脸的角度和/或用户视线角度所面向的设备。
[0076] 根据本发明应用于总控设备的设备控制装置的一种实施方式,还包括语音识别单元,用于:在获取用户的姿态图像之前,接收用户的语音指令;在接收到的所述语音指令中识别用户的控制意图所针对的设备;若识别到所述用户的控制意图所针对的设备,则控制所述拍摄镜头不执行所述获取用户的姿态图像的操作。
[0077] 在一个可能的设计中,设备控制装置的结构中包括处理器和存储器,所述存储器用于存储支持设备控制装置执行上述应用于被控设备的设备控制方法或应用于总控设备的设备控制方法中设备控制方法的程序,所述处理器被配置为用于执行所述存储器中存储的程序。
[0078] 又一方面,本发明实施例提供了一种电器,包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现应用于被控设备的设备控制方法中任一所述的方法。
[0079] 又一方面,本发明实施例提供了一种总控设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现上述应用于总控设备的设备控制方法中任一所述的方法。
[0080] 又一方面,本发明实施例提供了一种计算机可读存储介质,其存储有计算机程序,该程序被处理器执行时实现上述应用于被控设备的设备控制方法或应用于总控设备的设备控制方法中任一所述的方法。
[0081] 上述技术方案中的一个技术方案具有如下优点或有益效果:通过用户的控制意图角度的识别更准确地确定用户是否对于本设备有控制意图,从而避免多个设备同时对用户的指令进行识别而造成的误操作。
[0082] 上述技术方案中的另一个技术方案具有如下优点或有益效果:通过总控式控制系统,将用户的控制意图角度与多个设备的位置信息进行比对,从总体上掌握用户的控制意图,彻底避免两个以上设备同时响应用户指令的误操作现象,同时不必在每个设备上安装摄像头,节省了设备的制造成本。
[0083] 在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
[0084] 此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
[0085] 流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
[0086] 在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
[0087] 应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
[0088] 本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。其中装置实施方式与方法的实施方式相对应,因此装置的实施方式描述比较简略,相关描述可参照方法的实施方式的描述即可。
[0089] 此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读存储介质中。所述存储介质可以是只读存储器,磁盘或光盘等。
[0090] 以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到其各种变化或替换,这些都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。