一种智能音箱应用控制方法及智能音箱转让专利
申请号 : CN202010219629.0
文献号 : CN111385683B
文献日 : 2022-01-28
发明人 : 叶炳珊 , 尚宇翔
申请人 : 广东小天才科技有限公司
摘要 :
权利要求 :
1.一种智能音箱应用控制方法,其特征在于,应用于智能音箱,所述智能音箱包括主体箱体、顶部摄像头和底部摄像头,所述顶部摄像头可拆卸设置于所述主体箱体的上顶面且可升降旋转,所述底部摄像头固定在所述主体箱体,所述主体箱体的正表面可拆卸设置有显示屏,所述方法包括:
通过智能音箱的第一拍摄装置对用户人脸进行拍摄,获得人脸图像;
识别所述人脸图像获得当前用户表情;
判断所述当前用户表情与预设表情是否相匹配;
若是,确定目标拍摄装置并控制所述目标拍摄装置拍摄用户的书写页面;其中,所述目标拍摄装置不同于所述第一拍摄装置;
执行与所述书写页面的书写内容相适配的操作。
2.根据权利要求1所述的方法,其特征在于,所述确定目标拍摄装置并控制所述目标拍摄装置拍摄用户的书写页面,包括:将所述智能音箱的第二拍摄装置确定为目标拍摄装置,以及,控制所述目标拍摄装置升降和/或旋转至目标位置,基于所述目标位置通过所述目标拍摄装置拍摄用户的书写页面,获得第一书写页面图像;
所述执行与所述书写页面的书写内容相适配的操作,包括:识别所述第一书写页面图像获得书写内容,搜索与所述书写内容相匹配的搜索结果,并在所述智能音箱的显示屏上输出所述搜索结果。
3.根据权利要求1所述的方法,其特征在于,所述确定目标拍摄装置并控制所述目标拍摄装置拍摄用户的书写页面,包括:将与所述智能音箱连接的可穿戴设备的第二拍摄装置确定为目标拍摄装置,向所述目标拍摄装置发送拍摄指令,以使所述目标拍摄装置拍摄用户的书写页面,获得第二书写页面图像;
所述执行与所述书写页面的书写内容相适配的操作,包括:接收所述可穿戴设备返回的第二书写页面图像;
判断所述第二书写页面图像的书写内容是否与当前听写内容相适配;
若否,播放用于询问是否需要重新报读所述当前听写内容的询问消息;
在接收到针对所述询问消息反馈的用于确定需要重新报读所述当前听写内容的回复消息时,播放所述当前听写内容。
4.根据权利要求2所述的方法,其特征在于,若所述书写内容包括计量值数据,所述方法还包括:
接收用户输入的语音消息,所述语音消息用于指示对所述书写内容中的计量值数据进行单位换算;
在所述智能音箱的显示屏上输出所述计量值数值的单位换算结果。
5.根据权利要求2所述的方法,其特征在于,所述识别所述第一书写页面图像获得书写内容,搜索与所述书写内容相匹配的搜索结果,并在所述智能音箱的显示屏上输出所述搜索结果之后,所述方法还包括:
搜索与所述书写内容相适配的若干电子书;
在所述智能音箱的显示屏上推送所述若干电子书的相关信息,所述相关信息包括电子书图标及电子书简介信息;
检测是否接收到用户针对目标电子书的查看指令;
在接收到所述查看指令时,输出针对所述目标电子书的购买界面,所述购买界面上显示有所述相关信息及购买按钮;
接收用户对所述购买按钮的点击操作以将付款信息发送给与所述智能音箱连接的用户终端;所述付款信息至少包括付款金额及所述目标电子书的电子书简介信息;
在接收到所述用户终端反馈的付款成功消息时,获取所述目标电子书并添加至用户书籍列表中。
6.一种智能音箱,其特征在于,所述智能音箱包括主体箱体、顶部摄像头和底部摄像头,所述顶部摄像头可拆卸设置于所述主体箱体的上顶面且可升降旋转,所述底部摄像头固定在所述主体箱体,所述主体箱体的正表面可拆卸设置有显示屏,所述智能音箱还包括:拍摄模块,用于通过智能音箱的第一拍摄装置对用户人脸进行拍摄,获得人脸图像;
图像处理模块,用于识别所述人脸图像获得当前用户表情;
表情处理模块,用于判断所述当前用户表情与预设表情是否相匹配;
所述拍摄模块,还用于在所述表情处理模块的判断结果为是时,确定目标拍摄装置并控制所述目标拍摄装置拍摄用户的书写页面;其中,所述目标拍摄装置不同于所述第一拍摄装置;
操作控制模块,用于执行与所述书写页面的书写内容相适配的操作。
7.根据权利要求6所述的智能音箱,其特征在于,所述拍摄模块用于确定目标拍摄装置并控制所述目标拍摄装置拍摄用户的书写页面的方式具体为:所述拍摄模块,用于将所述智能音箱的第二拍摄装置确定为目标拍摄装置,以及,控制所述目标拍摄装置升降和/或旋转至目标位置,基于所述目标位置通过所述目标拍摄装置拍摄用户的书写页面,获得第一书写页面图像;
所述操作控制模块用于执行与所述书写页面的书写内容相适配的操作的方式具体为:所述操作控制模块,用于识别所述第一书写页面图像获得书写内容,搜索与所述书写内容相匹配的搜索结果,并在所述智能音箱的显示屏上输出所述搜索结果。
8.根据权利要求6所述的智能音箱,其特征在于,所述拍摄模块用于确定目标拍摄装置并控制所述目标拍摄装置拍摄用户的书写页面的方式具体为:所述拍摄模块,用于将与所述智能音箱连接的可穿戴设备的第二拍摄装置确定为目标拍摄装置,向所述目标拍摄装置发送拍摄指令,以使所述目标拍摄装置拍摄用户的书写页面,获得第二书写页面图像;
所述操作控制模块用于执行与所述书写页面的书写内容相适配的操作的方式具体为:所述操作控制模块,用于接收所述可穿戴设备返回的第二书写页面图像;以及,判断所述第二书写页面图像的书写内容是否与当前听写内容相适配;若否,播放用于询问是否需要重新报读所述当前听写内容的询问消息;以及,在接收到针对所述询问消息反馈的用于确定需要重新报读所述当前听写内容的回复消息时,播放所述当前听写内容。
9.根据权利要求7所述的智能音箱,其特征在于,若所述书写内容包括计量值数据,所述智能音箱还包括:
语音处理模块,用于接收用户输入的语音消息,所述语音消息用于指示对所述书写内容中的计量值数据进行单位换算;
转换模块,用于在所述智能音箱的显示屏上输出所述计量值数值的单位换算结果。
10.根据权利要求7所述的智能音箱,其特征在于,所述智能音箱还包括:推送模块,用于在所述操作控制模块识别所述第一书写页面图像获得书写内容,搜索与所述书写内容相匹配的搜索结果,并在所述智能音箱的显示屏上输出所述搜索结果之后,搜索与所述书写内容相适配的若干电子书;以及,在所述智能音箱的显示屏上推送所述若干电子书的相关信息,所述相关信息包括电子书图标及电子书简介信息;
购置处理模块,用于检测是否接收到用户针对目标电子书的查看指令;以及,在接收到所述查看指令时,输出针对所述目标电子书的购买界面,所述购买界面上显示有所述相关信息及购买按钮;以及,接收用户对所述购买按钮的点击操作以将付款信息发送给与所述智能音箱连接的用户终端;所述付款信息至少包括付款金额及所述目标电子书的电子书简介信息;以及,在接收到所述用户终端反馈的付款成功消息时,获取所述目标电子书并添加至用户书籍列表中。
说明书 :
一种智能音箱应用控制方法及智能音箱
技术领域
背景技术
正意图,从而执行错误操作。可见,现有智能音箱的智能化还相对欠缺,影响用户使用体验
感,不利于智能音箱在低龄用户群的推广使用,从而不利于提高用户的使用粘稠度。
发明内容
写页面,获得第一书写页面图像;
写页面图像;
示屏上输出所述搜索结果之后,所述方法还包括:
一拍摄装置;
装置拍摄用户的书写页面,获得第一书写页面图像;
写页面,获得第二书写页面图像;
否需要重新报读所述当前听写内容的询问消息;以及,在接收到针对所述询问消息反馈的
用于确定需要重新报读所述当前听写内容的回复消息时,播放所述当前听写内容。
之后,搜索与所述书写内容相适配的若干电子书;以及,在所述智能音箱的显示屏上推送所
述若干电子书的相关信息,所述相关信息包括电子书图标及电子书简介信息;
相关信息及购买按钮;以及,接收用户对所述购买按钮的点击操作以将付款信息发送给与
所述智能音箱连接的用户终端;所述付款信息至少包括付款金额及所述目标电子书的电子
书简介信息;以及,在接收到所述用户终端反馈的付款成功消息时,获取所述目标电子书并
添加至用户书籍列表中。
法。
面的任意一种方法的部分或全部步骤。
与预设表情匹配时,确定目标拍摄装置并控制目标拍摄装置拍摄用户的书写页面,然后会
根据书写页面的书写内容进行相应操作。可以看出,实施本发明实施例,用户在利用智能音
箱进行学习时,尤其在用户书写有书写内容的学习过程中,通过拍摄装置检测用户表情,根
据用户表情来触发智能音箱执行相应的操作,有利于提高智能音箱的智能化,提高操作的
准确率,提升用户的使用体验感及使用粘稠度,有利于在低龄用户群中推广智能音箱。
附图说明
域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附
图。
具体实施方式
发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实
施例,都属于本发明保护的范围。
必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方
法、产品或设备固有的其它步骤或单元。
箱体,主机箱体上设置有显示屏。在一种可选的应用场景中,智能音箱还包括摄像头,显示
屏和摄像头可拆卸设置于主机箱体上,在使用时,将显示屏和/或摄像头安装到主机箱体上
预留的位置,在不使用时,可以将显示屏和/或摄像头拆下,便于移动智能音箱、保护显示屏
和摄像头。在另一种可选的应用场景中,智能音箱不设置摄像头,但配置额外的摄像头,在
用户使用时,可以将摄像头安装在用户佩戴的眼镜上。或者,智能音箱还包括摄像头,同时
配置额外的摄像头,在用户使用时,可以将配置的额外摄像头安装在用户佩戴的眼镜上。在
又一种可选的应用场景中,智能音箱还包括摄像头,该摄像头可通过拉绳与主机箱体连接,
该摄像头可以拉出并固定在主机箱体上的任意位置。在又一种可选的应用场景中,智能音
箱可采用双摄像头设计,包括顶部摄像头和底部摄像头,其中,顶部摄像头可升降旋转,用
于拍摄桌面,底部摄像头固定在主机箱体,可以用于识别手势。在又一种可选的应用场景
中,主机箱体的底部还设置有轮子,可以推动移动。进一步可选地,主机箱体内部还设置有
控制电路,该控制电路与轮子电连接,主机箱体给出行走路径,可以通过控制电路控制智能
音箱按照行走路径行走,实现智能音箱的自动移动。在又一种可选的应用场景中,智能音箱
的显示屏可以采用折叠屏幕,以解决横屏、竖屏切换的问题。在又一种可选的应用场景中,
智能音箱还设置有补光光源,可包括灯泡、灯带,或者灯带+外置部件 (如百叶窗)等等。
音箱基础上进行优化或者变形,并能够实现本发明技术方案的智能音箱均属于本发明技术
方案的保护范围,在此不再一一列举。
于学习所需要的环境光线强度值时,在第一拍摄装置空闲期间控制该第一拍摄装置进行当
前环境空间扫描,以对智能音箱进行空间定位,确定出智能音箱的当前空间位置;查找当前
空间位置的照明设备,向照明设备控制系统发送打开请求以使得照明设备控制系统打开该
照明设备,从而确保当前环境光线强度值满足学习所需要的环境光线强度值。可以理解,在
该实施方式中,智能音箱存储有空间实景模拟图,进行当前环境空间扫描时,可以进行空间
上所放置物体的比对进行空间定位(即将当前环境空间的物体与空间实景模拟图中的参照
物进行比对),从而确定出智能音箱所在的空间位置(只是智能音箱存储的空间位置三维图
中指示的部分空间),定位准确,例如,用户在自己房间中,智能音箱中存储有整个房子的空
间实景模拟图,通过将房间中的物体与空间实景模拟图中的参照物进行对比,从而确定出
是哪个房间,再根据房间确定出具体的照明设备。进一步能够确保足够的光线,保护用户的
眼睛。
应介绍。
情与预设表情匹配时,确定目标拍摄装置并控制目标拍摄装置拍摄用户的书写页面,然后
会根据书写页面的书写内容进行相应操作。可以看出,实施本发明实施例,用户在利用智能
音箱进行学习时,尤其在用户书写有书写内容的学习过程中,通过拍摄装置检测用户表情,
根据用户表情来触发智能音箱执行相应的操作,有利于提高智能音箱的智能化,提高操作
的准确率,提升用户的使用体验感及使用粘稠度,有利于在低龄用户群中推广智能音箱。
像。
的书写页面。其中,回收位置是指在不使用第二拍摄装置时,用于回收放置第二拍摄装置的
位置,在需要拍摄时,从回收位置滑动且伸出智能音箱外面,然后可以进一步通过升降和/
或旋转以到达目标位置,以获得拍摄用户的书写页面的最佳角度,以提高书写页面图像的
清晰度和辨识度。
量值数据进行单位换算(如果存在可以换算的情况),有利于帮助用户扩大知识面。
展学习。但是部分电子书是收费的,而对于低龄段用户而言,在电子书的识别能力和支付安
全性的识别能力上比较欠缺,因此,在上述实施方式中,如用户有购买推荐的电子书的需求
时,需要由用户终端的用户(如家长)来确认及支付,除了能够帮助低龄用户提升对电子书
质量的把控,还有利于提高支付安全,防止低龄用户上当受骗。
户所在学校的教学系统;以及,接收该教学平台返回的教学视频,其中,教学平台会在本地
搜索与书写内容相匹配的教学视频,然后返回给用户;将教学视频推送给用户。
求,提高学习效率。
的搜索结果。同时,由于智能音箱只有在检测到用户表情与预设表情相匹配时,才启动搜索
功能,而非一直开启搜索功能,能够降低智能音箱的功耗,延长智能音箱的使用时长。
面图像。
后,将其拍摄角度调整以对着书写位置。
烧水设备执行烧水操作;接收智能家居控制系统返回的完成烧水提示,并语音播放该完成
烧水提示以通知用户。在该实施方式中,智能音箱作为智能家居设备一种,用户在学习时,
如果需要喝水,可以通过语音触发智能音箱与智能家居控制系统进行交互完成烧水流程,
在开水烧好之后,再起身去接水,减少走动次数,提高学习效率。
在书写内容不正确时,在获得用户需要重新报读的指示后,重新报读当前听写内容,即可提
升智能音箱在听写上的智能化,通过拍摄装置检测用户表情,根据用户表情来触发智能音
箱执行相应的操作,有利于提高智能音箱的智能化,提高操作的准确率,提升用户的使用体
验感及使用粘稠度,有利于在低龄用户群中推广智能音箱。
置;
光线强度值不匹配,且当前环境光线强度值小于学习所需要的环境光线强度值时,在第一
拍摄装置空闲期间控制该第一拍摄装置进行当前环境空间扫描,以对智能音箱进行空间定
位,确定出智能音箱的当前空间位置;查找当前空间位置的照明设备,向照明设备控制系统
发送打开请求以使得照明设备控制系统打开该照明设备,从而确保当前环境光线强度值满
足学习所需要的环境光线强度值。可以理解,在该实施方式中,智能音箱存储有空间实景模
拟图,进行当前环境空间扫描时,可以进行空间上所放置物体的比对进行空间定位(即将当
前环境空间的物体与空间实景模拟图中的参照物进行比对),从而确定出智能音箱所在的
空间位置(只是智能音箱存储的空间位置三维图中指示的部分空间),定位准确,例如,用户
在自己房间中,智能音箱中存储有整个房子的空间实景模拟图,通过将房间中的物体与空
间实景模拟图中的参照物进行对比,从而确定出是哪个房间,再根据房间确定出具体的照
明设备。进一步能够确保足够的光线,保护用户的眼睛。
匹配时,确定目标拍摄装置并控制目标拍摄装置拍摄用户的书写页面,然后会根据书写页
面的书写内容进行相应操作。可以看出,实施本发明实施例,用户在利用智能音箱进行学习
时,尤其在用户书写有书写内容的学习过程中,通过拍摄装置检测用户表情,根据用户表情
来触发智能音箱执行相应的操作,有利于提高智能音箱的智能化,提高操作的准确率,提升
用户的使用体验感及使用粘稠度,有利于在低龄用户群中推广智能音箱。
置处理模块640。
的书写页面,获得第一书写页面图像;
面。其中,回收位置是指在不使用第二拍摄装置时,用于回收放置第二拍摄装置的位置,在
需要拍摄时,从回收位置滑动且伸出智能音箱外面,然后可以进一步通过升降和/或旋转以
到达目标位置,以获得拍摄用户的书写页面的最佳角度,以提高书写页面图像的清晰度和
辨识度。
量值数据进行单位换算(如果存在可以换算的情况),有利于帮助用户扩大知识面。
果之后,搜索与书写内容相适配的若干电子书;以及,在智能音箱的显示屏上推送若干电子
书的相关信息,该相关信息包括电子书图标及电子书简介信息;
及购买按钮;以及,接收用户对购买按钮的点击操作以将付款信息发送给与智能音箱连接
的用户终端;该付款信息至少包括付款金额及目标电子书的电子书简介信息;以及,在接收
到用户终端反馈的付款成功消息时,获取目标电子书并添加至用户书籍列表中。
展学习。但是部分电子书是收费的,而对于低龄段用户而言,在电子书的识别能力和支付安
全性的识别能力上比较欠缺,因此,在上述实施方式中,如用户有购买推荐的电子书的需求
时,需要由用户终端的用户(如家长)来确认及支付,除了能够帮助低龄用户提升对电子书
质量的把控,还有利于提高支付安全,防止低龄用户上当受骗。
户所在学校的教学系统;以及,接收该教学平台返回的教学视频,其中,教学平台会在本地
搜索与书写内容相匹配的教学视频,然后返回给用户;将教学视频推送给用户。
求,提高学习效率。
得第二书写页面图像;
要重新报读当前听写内容的询问消息;以及,在接收到针对询问消息反馈的用于确定需要
重新报读当前听写内容的回复消息时,播放当前听写内容。
容,在书写内容不正确时,在获得用户需要重新报读的指示后,重新报读当前听写内容,即
可提升智能音箱在听写上的智能化,通过拍摄装置检测用户表情,根据用户表情来触发智
能音箱执行相应的操作,有利于提高智能音箱的智能化,提高操作的准确率,提升用户的使
用体验感及使用粘稠度,有利于在低龄用户群中推广智能音箱。
制系统控制相应的烧水设备执行烧水操作;接收智能家居控制系统返回的完成烧水提示,
并语音播放该完成烧水提示以通知用户。在该实施方式中,智能音箱作为智能家居设备一
种,用户在学习时,如果需要喝水,可以通过语音触发智能音箱与智能家居控制系统进行交
互完成烧水流程,在开水烧好之后,再起身去接水,减少走动次数,提高学习效率。
信连接。存储器720可以是高速RAM存储器,也可以是非不稳定的存储器(non‑volatile
memory),例如至少一个磁盘存储器。存储器720可选的还可以是至少一个位于远离前述处
理器710的存储装置。其中,处理器710可以结合图5至图6所描述的智能音箱,存储器720中
存储一组程序代码,且处理器710调用存储器720中存储的程序代码,用于执行以下操作:
并控制目标拍摄装置拍摄用户的书写页面;其中,该目标拍摄装置不同于第一拍摄装置;执
行与书写页面的书写内容相适配的操作。
写页面图像;
询问消息;在接收到针对询问消息反馈的用于确定需要重新报读当前听写内容的回复消息
时,播放当前听写内容。
换算结果。
能音箱的显示屏上推送若干电子书的相关信息,该相关信息包括电子书图标及电子书简介
信息;检测是否接收到用户针对目标电子书的查看指令;在接收到该查看指令时,输出针对
目标电子书的购买界面,该购买界面上显示有相关信息及购买按钮;接收用户对购买按钮
的点击操作以将付款信息发送给与智能音箱连接的用户终端;该付款信息至少包括付款金
额及目标电子书的电子书简介信息;在接收到用户终端反馈的付款成功消息时,获取目标
电子书并添加至用户书籍列表中。
的任意一种方法的部分或全部步骤。
介质包括只读存储器(Read‑Only Memory,ROM)、随机存储器(Random Access Memory,
RAM)、可编程只读存储器(Programmable Read‑only Memory,PROM)、可擦除可编程只读存
储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器 (One‑
time Programmable Read‑Only Memory,OTPROM)、电子抹除式可复写只读存储器
(Electrically‑Erasable Programmable Read‑Only Memory, EEPROM)、只读光盘
(Compact Disc Read‑Only Memory,CD‑ROM)或其他光盘存储器、磁盘存储器、磁带存储器、
或者能够用于携带或存储数据的计算机可读的任何其他介质。
只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本
发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应
理解为对本发明的限制。