一种切换图片中人脸图像的方法及装置转让专利

申请号 : CN201410345269.3

文献号 : CN104156993A

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 陈志军张涛贺瑶

申请人 : 小米科技有限责任公司

摘要 :

本发明是关于一种切换图片中人脸图像的方法及装置,该方法包括:当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;将待切换人脸图像映射到处于待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型;确定当前人脸图像的拍照角度;按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照生成目标人脸图像;在图片中利用目标人脸图像覆盖当前人脸图像。本发明提供的方案可以保证图片中后加入的目标人脸图像的拍摄角度与当前人脸图像的拍摄角度相同,从而使目标人脸图像与图片中原有的背景图像相对应,进而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。

权利要求 :

1.一种切换图片中人脸图像的方法,其特征在于,包括:当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;

将所述待切换人脸图像映射到处于所述待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,所述平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的;

确定所述当前人脸图像的拍照角度;

按照所述当前人脸图像的拍照角度对所述目标立体人脸模型进行拍照生成目标人脸图像;

在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像。

2.根据权利要求1所述的切换图片中人脸图像的方法,其特征在于,所述确定所述当前人脸图像的拍照角度步骤包括:根据预先生成的姿态判定模型确定出所述当前人脸图像的拍照角度。

3.根据权利要求2所述的切换图片中人脸图像的方法,其特征在于,所述姿态判定模型为利用支持向量机SVM方法对多个姿态人脸图像进行训练生成的。

4.根据权利要求1所述的切换图片中人脸图像的方法,其特征在于,所述获取至少一幅待切换人脸图像步骤包括:启动拍照功能模块;

当接收到用户输入的拍照指令时,利用所述拍照功能模块进行拍照并生成目标图片组,所述目标图片组包括至少一张图片;

在所述目标图片组的图片中截取待切换人脸图像。

5.根据权利要求1所述的切换图片中人脸图像的方法,其特征在于,所述获取至少一幅待切换人脸图像步骤包括:获取用户在图片库中选择的目标图片组,所述目标图片组包括至少一张图片;

在所述目标图片组的图片中截取待切换人脸图像。

6.根据权利要求1所述的切换图片中人脸图像的方法,其特征在于,所述获取至少一幅待切换人脸图像步骤包括:获取用户在图片库中选择的具有第一人脸图像的第一目标图片;

确定所述图片库中具有与所述第一人脸图像的图像相似度大于预设阈值的第二人脸图像的第二目标图片;

分别截取所述第一目标图片和所述第二目标图片中的所述第一人脸图像和所述第二人脸图像;

将所述第一人脸图像和所述第二人脸图像均确定为待切换人脸图像。

7.根据权利要求1所述的切换图片中人脸图像的方法,其特征在于,所述方法还包括:分别计算所述当前人脸图像的第一人脸特征参数和所述目标人脸图像的第二人脸特征参数;

判断所述第一人脸特征参数与所述第二人脸特征参数的差值是否在预设范围内;

当所述第一人脸特征参数与所述第二人脸特征参数的差值在预设范围内时,执行在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像的步骤;

当所述第一人脸特征参数与所述第二人脸特征参数的差值不在预设范围内时,按照所述第一人脸特征参数调整所述目标人脸图像生成指定人脸图像,并在所述图片中利用所述指定人脸图像覆盖所述当前人脸图像。

8.根据权利要求1所述的切换图片中人脸图像的方法,其特征在于,所述在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像步骤包括:对所述目标人脸图像和所述当前人脸图像进行特征点定位;

根据所述目标人脸图像对所述当前人脸图像进行人脸变形,然后根据所述特征点定位,用所述目标人脸图像覆盖处理后的所述当前人脸图像;或者,根据所述当前人脸图像对所述目标人脸图像进行人脸变形,然后根据所述特征点定位,用处理后的所述目标人脸图像覆盖所述当前人脸图像。

9.一种切换图片中人脸图像的装置,其特征在于,包括:获取模块,用于在接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;

训练模块,用于将所述待切换人脸图像映射到处于所述待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,所述平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的;

确定模块,用于确定所述当前人脸图像的拍照角度;

拍照模块,用于按照所述当前人脸图像的拍照角度对所述目标立体人脸模型进行拍照生成目标人脸图像;

覆盖模块,用于在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像。

10.根据权利要求9所述的切换图片中人脸图像的装置,其特征在于,所述获取模块包括:启动子模块,用于启动拍照功能模块;

拍照子模块,用于在接收到用户输入的拍照指令时,利用所述拍照功能模块进行拍照并生成目标图片组,所述目标图片组包括至少一张图片;

第一截取子模块,用于在所述目标图片组的图片中截取待切换人脸图像。

11.根据权利要求9所述的切换图片中人脸图像的装置,其特征在于,所述获取模块包括:图片组获取子模块,用于获取用户在图片库中选择的目标图片组,所述目标图片组包括至少一张图片;

第二截取子模块,用于在所述目标图片组的图片中截取待切换人脸图像。

12.根据权利要求9所述的切换图片中人脸图像的装置,其特征在于,所述获取模块包括:图片获取子模块,获取用户在图片库中选择的具有第一人脸图像的第一目标图片;

第一确定子模块,用于确定所述图片库中具有与所述第一人脸图像的图像相似度大于预设阈值的第二人脸图像的第二目标图片;

第三截取子模块,用于在分别截取所述第一目标图片和所述第二目标图片中的所述第一人脸图像和所述第二人脸图像;

第二确定子模块,用于将所述第一人脸图像和所述第二人脸图像均确定为待切换人脸图像。

13.根据权利要求9所述的切换图片中人脸图像的装置,其特征在于,所述装置还包括:计算模块,用于分别计算所述当前人脸图像的第一人脸特征参数和所述目标人脸图像的第二人脸特征参数;

判断模块,用于判断所述第一人脸特征参数与所述第二人脸特征参数的差值是否在预设范围内;

执行模块,用于在所述第一人脸特征参数与所述第二人脸特征参数的差值在预设范围内时,调用所述覆盖模块;在所述第一人脸特征参数与所述第二人脸特征参数的差值不在预设范围内时,按照所述第一人脸特征参数调整所述目标人脸图像生成指定人脸图像,并在所述图片中利用所述指定人脸图像覆盖所述当前人脸图像。

14.根据权利要求9所述的切换图片中人脸图像的装置,其特征在于,所述覆盖模块包括:第一处理子模块,用于对所述目标人脸图像和所述当前人脸图像进行特征点定位;

第二处理子模块,用于根据所述目标人脸图像对所述当前人脸图像进行人脸变形,然后根据所述特征点定位,用所述目标人脸图像覆盖处理后的所述当前人脸图像;或者,根据所述当前人脸图像对所述目标人脸图像进行人脸变形,然后根据所述特征点定位,用处理后的所述目标人脸图像覆盖所述当前人脸图像。

15.一种切换图片中人脸图像的装置,其特征在于,包括:处理器;

用于存储处理器可执行指令的存储器;

其中,所述处理器被配置为:

当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;

将所述待切换人脸图像映射到处于所述待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,所述平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的;

确定所述当前人脸图像的拍照角度;

按照所述当前人脸图像的拍照角度对所述目标立体人脸模型进行拍照生成目标人脸图像;

在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像。

说明书 :

一种切换图片中人脸图像的方法及装置

技术领域

[0001] 本发明涉及图像技术领域,更具体的说,涉及切换图片中人脸图像的方法及装置。

背景技术

[0002] 目前,随着终端技术的不断普及,利用终端进行拍照已经变得非常普遍。用户可以随时利用终端进行拍照并生成图片,再将生成的图片存储起来。在用户查看这些被存储的图片时,经常会对其中的一些图片不满意,但是用户又无法回到这张图片的场景下重新拍照。
[0003] 在相关的图片处理技术中,可以解决上述问题。该图片处理技术为:在用户点击图片A中的人脸图像X时,会让用户重新选择出一幅图片,假设用户选择了一幅具有人脸图像Y的图片B,然后剪切图片B中的人脸图像Y,并将人脸图像Y拷贝到图片A中,以替换人脸图像X,从而使用户可以对图片中的人脸图像进行切换。
[0004] 由于人脸图像X的姿态和人脸图像Y的姿态很有可能是不同的,所以直接将图片B中的人脸图像Y拷贝到图片A中,可能会导致人脸图像Y的人脸角度与图片A中原有的肢体角度不对应。例如,人脸图像Y的姿态是人脸向左水平摆动30度,而人脸图像X的姿态是人脸正视前方,从而导致人脸图像Y与图片A中的原有图像不对应,所以降低了用户体验度。
[0005] 因此,如何保证后加入的人脸图像的姿态与原图片的人脸图像的姿态相同,成为目前最需要解决的问题。

发明内容

[0006] 为克服相关技术中存在的问题,本公开提供一种切换图片中人脸图像的方法及装置,以保证后加入的人脸图像的姿态与原图片的人脸图像的姿态相同,从而提高了用户体验度。
[0007] 根据本公开实施例的第一方面,提供一种切换图片中人脸图像的方法,包括:
[0008] 当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;
[0009] 将所述待切换人脸图像映射到处于所述待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,所述平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的;
[0010] 确定所述当前人脸图像的拍照角度;
[0011] 按照所述当前人脸图像的拍照角度对所述目标立体人脸模型进行拍照生成目标人脸图像;
[0012] 在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像。
[0013] 可选的,所述确定所述当前人脸图像的拍照角度步骤包括:
[0014] 根据预先生成的姿态判定模型确定出所述当前人脸图像的拍照角度。
[0015] 可选的,所述姿态判定模型为利用支持向量机SVM方法对多个姿态人脸图像进行训练生成的。
[0016] 可选的,所述获取至少一幅待切换人脸图像步骤包括:
[0017] 启动拍照功能模块;
[0018] 当接收到用户输入的拍照指令时,利用所述拍照功能模块进行拍照并生成目标图片组,所述目标图片组包括至少一张图片;
[0019] 在所述目标图片组的图片中截取待切换人脸图像。
[0020] 可选的,所述获取至少一幅待切换人脸图像步骤包括:
[0021] 获取用户在图片库中选择的目标图片组,所述目标图片组包括至少一张图片;
[0022] 在所述目标图片组的图片中截取待切换人脸图像。
[0023] 可选的,所述获取至少一幅待切换人脸图像步骤包括:
[0024] 获取用户在图片库中选择的具有第一人脸图像的第一目标图片;
[0025] 确定所述图片库中具有与所述第一人脸图像的图像相似度大于预设阈值的第二人脸图像的第二目标图片;
[0026] 分别截取所述第一目标图片和所述第二目标图片中的所述第一人脸图像和所述第二人脸图像;
[0027] 将所述第一人脸图像和所述第二人脸图像均确定为待切换人脸图像。
[0028] 可选的,所述方法还包括:
[0029] 分别计算所述当前人脸图像的第一人脸特征参数和所述目标人脸图像的第二人脸特征参数;
[0030] 判断所述第一人脸特征参数与所述第二人脸特征参数的差值是否在预设范围内;
[0031] 当所述第一人脸特征参数与所述第二人脸特征参数的差值在预设范围内时,执行在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像的步骤;
[0032] 当所述第一人脸特征参数与所述第二人脸特征参数的差值不在预设范围内时,按照所述第一人脸特征参数调整所述目标人脸图像生成指定人脸图像,并在所述图片中利用所述指定人脸图像覆盖所述当前人脸图像。
[0033] 可选的,所述在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像步骤包括:
[0034] 对所述目标人脸图像和所述当前人脸图像进行特征点定位;
[0035] 根据所述目标人脸图像对所述当前人脸图像进行人脸变形,然后根据所述特征点定位,用所述目标人脸图像覆盖处理后的所述当前人脸图像;或者,根据所述当前人脸图像对所述目标人脸图像进行人脸变形,然后根据所述特征点定位,用处理后的所述目标人脸图像覆盖所述当前人脸图像。
[0036] 根据本公开实施例的第二方面,提供一种切换图片中人脸图像的装置,包括:
[0037] 获取模块,用于在接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;
[0038] 训练模块,用于将所述待切换人脸图像映射到处于所述待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,所述平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的;
[0039] 确定模块,用于确定所述当前人脸图像的拍照角度;
[0040] 拍照模块,用于按照所述当前人脸图像的拍照角度对所述目标立体人脸模型进行拍照生成目标人脸图像;
[0041] 覆盖模块,用于在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像。
[0042] 可选的,所述获取模块包括:
[0043] 启动子模块,用于启动拍照功能模块;
[0044] 拍照子模块,用于在接收到用户输入的拍照指令时,利用所述拍照功能模块进行拍照并生成目标图片组,所述目标图片组包括至少一张图片;
[0045] 第一截取子模块,用于在所述目标图片组的图片中截取待切换人脸图像。
[0046] 可选的,所述获取模块包括:
[0047] 图片组获取子模块,用于获取用户在图片库中选择的目标图片组,所述目标图片组包括至少一张图片;
[0048] 第二截取子模块,用于在所述目标图片组的图片中截取待切换人脸图像。
[0049] 可选的,所述获取模块包括:
[0050] 图片获取子模块,获取用户在图片库中选择的具有第一人脸图像的第一目标图片;
[0051] 第一确定子模块,用于确定所述图片库中具有与所述第一人脸图像的图像相似度大于预设阈值的第二人脸图像的第二目标图片;
[0052] 第三截取子模块,用于在分别截取所述第一目标图片和所述第二目标图片中的所述第一人脸图像和所述第二人脸图像;
[0053] 第二确定子模块,用于将所述第一人脸图像和所述第二人脸图像均确定为待切换人脸图像。
[0054] 可选的,所述装置还包括:
[0055] 计算模块,用于分别计算所述当前人脸图像的第一人脸特征参数和所述目标人脸图像的第二人脸特征参数;
[0056] 判断模块,用于判断所述第一人脸特征参数与所述第二人脸特征参数的差值是否在预设范围内;
[0057] 执行模块,用于在所述第一人脸特征参数与所述第二人脸特征参数的差值在预设范围内时,调用所述覆盖模块;在所述第一人脸特征参数与所述第二人脸特征参数的差值不在预设范围内时,按照所述第一人脸特征参数调整所述目标人脸图像生成指定人脸图像,并在所述图片中利用所述指定人脸图像覆盖所述当前人脸图像。
[0058] 可选的,所述覆盖模块包括:
[0059] 第一处理子模块,用于对所述目标人脸图像和所述当前人脸图像进行特征点定位;
[0060] 第二处理子模块,用于根据所述目标人脸图像对所述当前人脸图像进行人脸变形,然后根据所述特征点定位,用所述目标人脸图像覆盖处理后的所述当前人脸图像;或者,根据所述当前人脸图像对所述目标人脸图像进行人脸变形,然后根据所述特征点定位,用处理后的所述目标人脸图像覆盖所述当前人脸图像。
[0061] 根据本公开实施例的第三方面,提供一种切换图片中人脸图像的装置,包括:
[0062] 处理器;
[0063] 用于存储处理器可执行指令的存储器;
[0064] 其中,所述处理器被配置为:
[0065] 当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;
[0066] 将所述待切换人脸图像映射到处于所述待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,所述平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的;
[0067] 确定所述当前人脸图像的拍照角度;
[0068] 按照所述当前人脸图像的拍照角度对所述目标立体人脸模型进行拍照生成目标人脸图像;
[0069] 在所述图片中利用所述目标人脸图像覆盖所述当前人脸图像。
[0070] 本公开的实施例提供的技术方案可以包括以下有益效果:将待切换人脸图像映射平均立体人脸模型上可以生成待切换人脸图像对应的目标立体人脸模型,再按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照,这样便可生成与当前人脸图像的拍照角度相同的目标人脸图像,因此,本公开可以保证图片中后加入的目标人脸图像的拍摄角度与当前人脸图像的拍摄角度相同,从而使目标人脸图像与图片中原有的背景图像相对应,进而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。
[0071] 应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。

附图说明

[0072] 此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
[0073] 图1是根据一示例性实施例示出的一种切换图片中人脸图像的方法方法的流程图。
[0074] 图2是根据一示例性实施例示出的另一种切换图片中人脸图像的方法方法的流程图。
[0075] 图3是根据一示例性实施例示出的一种切换图片中人脸图像的装置的示意图。
[0076] 图4是根据一示例性实施例示出的一种获取模块的示意图。
[0077] 图5是根据一示例性实施例示出的另一种获取模块的示意图。
[0078] 图6是根据一示例性实施例示出的又一种获取模块的示意图。
[0079] 图7是根据一示例性实施例示出的一种覆盖模块的示意图。
[0080] 图8是根据一示例性实施例示出的另一种切换图片中人脸图像的装置的示意图。
[0081] 图9是根据一示例性实施例示出的一种切换图片中人脸图像的装置的框图。

具体实施方式

[0082] 这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
[0083] 实施例一
[0084] 图1是根据一示例性实施例示出的一种切换图片中人脸图像的方法的流程图,如图1所示,图1所示的切换图片中人脸图像的方法可以用于终端中。本公开提供的切换图片中人脸图像的方法可以保证图片中后加入的目标人脸图像的拍摄角度与当前人脸图像的拍摄角度相同,从而使目标人脸图像与图片中原有的背景图像相对应,进而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。该方法包括以下步骤。
[0085] 在步骤S11中,当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像。
[0086] 其中,本公开提供的方法可以应用于终端中,该终端可以为智能手机、平板电脑、笔记本电脑或台式电脑等设备。终端可以接收切换图片中的当前人脸图像的指令,该指令可以是用户向终端输入的,例如,用户使用智能手机浏览具有人脸X的图片A时,用户利用手指点击智能手机上该图片A的人脸X,此时,智能手机会输出“是否需要切换图片A中的人脸X?”的信息,并显示出“是”和“否”的按钮,如果用户选择是,那么智能手机便接收到切换图片A中的当前人脸图像X的指令,并获取用户提供的至少一幅待切换人脸图像,以用于替换当前人脸图像X。
[0087] 另外,获取至少一幅待切换人脸图像的方式有很多种,下面简要介绍几种方式:
[0088] 第一种方式,获取用户在图片库中选择的目标图片组,目标图片组包括至少一张图片;在目标图片组的图片中截取待切换人脸图像。例如,用户在终端的图片库中选择均具有同一个人的人脸图像的图片组成目标图片组,并利用终端截取该目标图片组中每张图片的待切换人脸图像。这种获取方式的特点在于,用户可以在终端的图片库中灵活的选择图片中的待切换人脸图像。
[0089] 第二种方式,启动拍照功能模块;在接收到用户输入的拍照指令时,利用拍照功能模块进行拍照并生成目标图片组,目标图片组包括至少一张图片;在目标图片组的图片中截取待切换人脸图像。例如,在终端接收到切换图片中的当前人脸图像的指令时,终端会启动拍照功能模块;此时,用户便可以将终端的摄像头对准想要获取的人脸图像,并向终端输入拍照指令,那么终端便利用拍照功能模块进行拍照,以生成图片;如果用户向终端输入多次拍照指令,那么终端便可以进行多次拍照并生成由多张图片组成的目标图片组;最终,终端会在拍照生成的图片中截取待切换人脸图像。这种获取方式的特点在于,用户可以利用终端进行拍照,以便于在拍照生成的图片中截取待切换人脸图像,所以在图片库中没有适合的图片可供选择时,此种方式较为适用。
[0090] 第三种方式,获取用户在图片库中选择的具有第一人脸图像的第一目标图片;确定图片库中具有与第一人脸图像的图像相似度大于预设阈值的第二人脸图像的第二目标图片;分别截取第一目标图片和第二目标图片中的第一人脸图像和第二人脸图像;将第一人脸图像和第二人脸图像均确定为待切换人脸图像。例如,用户在终端的图片库中选择均具有人脸图像X的图片A;此时,终端便会在图片库中查找与人脸图像X的图像相似度大于阈值的人脸图像,假设终端在图片库中查找到与人脸图像X的图像相似度大于阈值的人脸图像Y和人脸图像Z,而且可以确定人脸图像Y在图片B中,人脸图像Z在图片C中;然后,终端会分别截取图片A、图片B和图片C中的人脸图像X、人脸图像Y和人脸图像Z;最后,终端将人脸图像X、人脸图像Y和人脸图像Z均确定为待切换人脸图像。这种获取方式的特点在于,用户只要在终端的图片库中选择一张具有人脸图像的图片,那么终端便会在图片库中查找出与人脸图像相似的图片,这样可以节省用户选择其他图片所浪费的时间,从而节省了用户的时间成本。
[0091] 在步骤S12中,将待切换人脸图像映射到处于待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的。
[0092] 其中,预设人脸模型构建方法存在有多种,预设人脸模型构建方法可以为PCA(Principal Component Analysis,主成分分析)方法,例如,可以利用PCA方法对多个立体人脸图像进行训练生成平均立体人脸模型。其中,步骤S12的映射过程可以包括以下步骤:首先,利用PCA方法对多个立体人脸图像进行训练生成平均立体人脸模型;然后,通过姿态判定模型来确定每幅待切换人脸图像的拍照角度,将其中一幅待切换人脸图像映射到处于该幅待切换人脸图像的拍照角度的平均立体人脸模型上,再依次将其他待切换人脸图像映射到处于对应待切换人脸图像的拍照角度的平均立体人脸模型上;最后,待每幅待切换人脸图像均映射到平均立体人脸模型上以后,便生成目标立体人脸模型。例如,假设利用PCA方法对1万幅立体人脸图像进行训练生成平均立体人脸模型A,假设上个步骤获取到待切换人脸图像A和待切换人脸图像B,通过姿态判定模型确定得到待切换人脸图像A的拍照角度为水平向左转30度,通过姿态判定模型来确定得到待切换人脸图像B的拍照角度为水平向右转30度,将待切换人脸图像A映射到处于水平向左转30度的平均立体人脸模型上,再将待切换人脸图像B映射到处于水平向右转30度的平均立体人脸模型上,此时,映射有待切换人脸图像A和待切换人脸图像B的平均立体人脸模型即为目标立体人脸模型。
[0093] 上述内容中提到可以通过姿态判定模型来确定每幅待切换人脸图像的拍照角度,其中,姿态判定模型可以利用SVM(Support Vector Machine,支持向量机)方法对多个姿态人脸图像进行训练生成。这些姿态人脸图像为不同拍照角度的人脸图像,由于预先对这些不同拍照角度的人脸图像通过SVM方法进行训练生成姿态判定模型,所以终端便可以利用这个姿态判定模型对不同角度的人脸图像进行识别,以确定出这些人脸图像中人脸的拍照角度。假设待切换人脸图像为带有一定角度的人脸图像,那么终端可以利用预先生成的姿态判定模型来对待切换人脸图像中的人脸进行识别,以确定出该待切换人脸图像中人脸的拍照角度。例如,待切换人脸图像中人脸的实际拍照角度为水平向左摆动30度,那么终端便可以利用姿态判定模型确定出待切换人脸图像的拍照角度为水平向左摆动30度。
[0094] 当然,预设人脸模型构建方法还可以为其他类型的人脸模型构建方法,本领域技术人员可以利用这些人脸模型构建方法来对至少一幅待切换人脸图像进行训练,并生成目标立体人脸模型,所以本公开的预设人脸模型构建方法并不局限于PCA方法,还可以为其他的方法。
[0095] 在步骤S13中,确定当前人脸图像的拍照角度。
[0096] 其中,确定当前人脸图像的拍照角度的方式有很多种,例如,可以通过姿态判定模型来确定当前人脸图像中的人脸的拍照角度,姿态判定模型可以利用SVM方法对多个姿态人脸图像进行训练生成。这些姿态人脸图像为不同拍照角度的人脸图像,由于预先对这些不同拍照角度的人脸图像通过SVM方法进行训练生成姿态判定模型,所以终端便可以利用这个姿态判定模型对不同角度的人脸图像进行识别,以确定出这些人脸图像中人脸的拍照角度。
[0097] 假设当前人脸图像为带有一定角度的人脸图像,那么终端可以利用预先生成的姿态判定模型来对当前人脸图像中的人脸进行识别,以确定出该当前人脸图像中人脸的拍照角度。例如,当前人脸图像中人脸的实际拍照角度为水平向左摆动30度,那么终端便可以利用姿态判定模型确定出当前人脸图像的拍照角度为水平向左摆动30度。
[0098] 在步骤S14中,按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照生成目标人脸图像。
[0099] 其中,在步骤S13中已经知道了图片中的当前人脸图像的拍照角度,那么为了使后加入的人脸图像与当前人脸图像的拍照角度相同,利用当前人脸图像的拍照角度对目标立体人脸模型进行拍照,以生成目标人脸图像。此时,目标人脸图像与当前人脸图像的拍照角度就一样了。
[0100] 在步骤S15中,在图片中利用目标人脸图像覆盖当前人脸图像。
[0101] 其中,覆盖的方式可以有多种,例如,可以是直接覆盖,也可以是对目标人脸图像或当前人脸图像进行处理后再覆盖。
[0102] 针对上述第一种情况,终端可以先确定出当前人脸图像在图片中的人脸区域,并在图片中清除该当前人脸图像,再将目标人脸图像粘贴至图片中的人脸区域内。又如,终端可以先确定出当前人脸图像在图片中的人脸区域,并将目标人脸图像粘贴至图片中的人脸区域内,以覆盖当前人脸图像。再如,终端可以先确定出当前人脸图像中人脸的双眼在图片中的位置,并在图片中清除该当前人脸图像,再识别出目标人脸图像中双眼的位置,最后,使目标人脸图像中双眼的位置对准当前人脸图像中双眼在图片中的位置,将目标人脸图像粘贴至图片上。
[0103] 针对上述第二种情况,使用活动表观模型(AAM)方法,有如下两种处理方式。
[0104] 方式一:对目标人脸图像和当前人脸图像分别进行特征点定位,并以目标人脸图像作为基准,对当前人脸图像进行人脸变形,然后根据前述特征点定位,用目标人脸图像覆盖处理后的当前人脸图像,使得目标人脸图像和当前人脸图像的外轮廓尽量一致,提升覆盖效果。
[0105] 方式二:对目标人脸图像和当前人脸图像分别进行特征点定位,并以当前人脸图像作为基准,对目标人脸图像进行人脸变形,然后根据前述特征点定位,用处理后的目标人脸图像覆盖当前人脸图像,使得目标人脸图像和当前人脸图像的外轮廓尽量一致,提升覆盖效果。
[0106] 在图1所示的实施例中,将待切换人脸图像映射到平均立体人脸模型上,可以生成待切换人脸图像对应的目标立体人脸模型,再按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照,这样便可生成与当前人脸图像的拍照角度相同的目标人脸图像,因此,本公开可以保证图片中后加入的目标人脸图像的拍摄角度与当前人脸图像的拍摄角度相同,从而使目标人脸图像与图片中原有的背景图像相对应,进而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。
[0107] 实施例二
[0108] 图2是根据一示例性实施例示出的另一种切换图片中人脸图像的方法的流程图,如图2所示,图2所示的切换图片中人脸图像的方法可以用于终端中。其中,本实施例是在实施例一的基础上进行的改进,所以本实施例中与实施例一的相同之处请参见实施例一即可。本公开提供的切换图片中人脸图像的方法可以在当前人脸图像与目标人脸图像的大小尺寸不同时,按照当前人脸图像的人脸特征参数来调整目标人脸图像,从而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。该方法包括以下步骤。
[0109] 在步骤S21中,当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像。
[0110] 在步骤S22中,将待切换人脸图像映射到处于待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的。
[0111] 在步骤S23中,确定当前人脸图像的拍照角度。
[0112] 在步骤S24中,按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照生成目标人脸图像。
[0113] 在步骤S25中,分别计算当前人脸图像的第一人脸特征参数和目标人脸图像的第二人脸特征参数。
[0114] 其中,当前人脸图像的第一人脸特征参数和目标人脸图像的第二人脸特征参数均可以为当前人脸图像中五官的参数,例如,当前人脸图像的第一人脸特征参数为当前人脸图像的两个眼睛之间的距离;又如,当前人脸图像的第一人脸特征参数为当前人脸图像的两个眼睛与嘴巴构成的三角形的各边边长;再如,当前人脸图像的第一人脸特征参数为当前人脸图像的一只眼睛的面积。
[0115] 当然,当前人脸图像的第一人脸特征参数和目标人脸图像的第二人脸特征参数指的为同一个人脸特征的参数,例如,在当前人脸图像的第一人脸特征参数为当前人脸图像的两个眼睛之间的距离时,那么目标人脸图像的第二人脸特征参数为目标人脸图像的两个眼睛之间的距离。
[0116] 在步骤S26中,判断第一人脸特征参数与第二人脸特征参数的差值是否在预设范围内,如果是,则调用步骤S27;否则,调用步骤S28。
[0117] 其中,通过对当前人脸图像的第一人脸特征参数和目标人脸图像的第二人脸特征参数的计算,可以确定出第一人脸特征参数与第二人脸特征参数的差值是否在预设范围内,如果第一人脸特征参数与第二人脸特征参数的差值在预设范围内,说明当前人脸图像和目标人脸图像的大小非常相近,所以可以在图片中直接将目标人脸图像覆盖到当前人脸图像上;如果第一人脸特征参数与第二人脸特征参数的差值不在预设范围内,说明当前人脸图像和目标人脸图像的大小差距较大,所以需要按照第一人脸特征参数调整目标人脸图像生成指定人脸图像,并在图片中利用指定人脸图像覆盖当前人脸图像。
[0118] 例如,当前人脸图像的第一人脸特征参数为当前人脸图像的两个眼睛之间的距离,且当前人脸图像的两个眼睛之间的距离为5厘米,目标人脸图像的第二人脸特征参数为目标人脸图像的两个眼睛之间的距离,且目标人脸图像的两个眼睛之间的距离为6厘米,用户将预设范围设定为2厘米,经过计算当前人脸图像的两个眼睛之间的距离与目标人脸图像的两个眼睛之间的距离的差值为1厘米,所以当前人脸图像的两个眼睛之间的距离与目标人脸图像的两个眼睛之间的距离的差值在预设范围2厘米内,所以在图片中直接将目标人脸图像覆盖到当前人脸图像上。
[0119] 又如,当前人脸图像的第一人脸特征参数为当前人脸图像的两个眼睛之间的距离,且当前人脸图像的两个眼睛之间的距离为5厘米,目标人脸图像的第二人脸特征参数为目标人脸图像的两个眼睛之间的距离,且目标人脸图像的两个眼睛之间的距离为10厘米,用户将预设范围设定为2厘米,经过计算当前人脸图像的两个眼睛之间的距离与目标人脸图像的两个眼睛之间的距离的差值为5厘米,所以当前人脸图像的两个眼睛之间的距离与目标人脸图像的两个眼睛之间的距离的差值不在预设范围2厘米内,所以需要按照当前人脸图像的两个眼睛之间的距离调整目标人脸图像,即将目标人脸图像整体缩小至两个眼睛之间的距离为5厘米的指定人脸图像,最后在图片中利用指定人脸图像覆盖当前人脸图像上。其中,指定人脸图像与目标人脸图像为同一张人脸,指定人脸图像的两个眼睛之间的距离为5厘米,目标人脸图像的两个眼睛之间的距离的10厘米。
[0120] 在步骤S27中,在图片中利用目标人脸图像覆盖当前人脸图像。
[0121] 在步骤S28中,按照第一人脸特征参数调整目标人脸图像生成指定人脸图像,并在图片中利用指定人脸图像覆盖当前人脸图像。
[0122] 在图2所示的实施例中,本公开提供的方案不仅可以保证图片中后加入的目标人脸图像的拍摄角度与当前人脸图像的拍摄角度相同,从而使目标人脸图像与图片中原有的背景图像相对应;而且,还可以在当前人脸图像与目标人脸图像的大小尺寸不同时,按照当前人脸图像的人脸特征参数来调整目标人脸图像,从而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。
[0123] 实施例三
[0124] 图3是根据一示例性实施例示出的一种切换图片中人脸图像的装置的示意图。本公开提供的切换图片中人脸图像的装置可以保证图片中后加入的目标人脸图像的拍摄角度与当前人脸图像的拍摄角度相同,从而使目标人脸图像与图片中原有的背景图像相对应,进而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。参照图3,该装置包括获取模块11、训练模块12、确定模块13、拍照模块14和覆盖模块15。其中:
[0125] 获取模块11,用于在接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像。
[0126] 训练模块12,用于将待切换人脸图像映射到处于待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的。
[0127] 确定模块13,用于确定当前人脸图像的拍照角度。
[0128] 拍照模块14,用于按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照生成目标人脸图像。
[0129] 覆盖模块15,用于在图片中利用目标人脸图像覆盖当前人脸图像。
[0130] 请参见图4所示,在本实施例的一个可选择的方案中,获取模块11还可以包括以下子模块:启动子模块1111,用于启动拍照功能模块;拍照子模块1112,用于在接收到用户输入的拍照指令时,利用拍照功能模块进行拍照并生成目标图片组,目标图片组包括至少一张图片;第一截取子模块1113,用于在目标图片组的图片中截取待切换人脸图像。
[0131] 请参见图5所示,在本实施例的一个可选择的方案中,获取模块11还可以包括以下子模块:图片组获取子模块1121,用于获取用户在图片库中选择的目标图片组,目标图片组包括至少一张图片;第二截取子模块1122,用于在目标图片组的图片中截取待切换人脸图像。
[0132] 请参见图6所示,在本实施例的一个可选择的方案中,获取模块11还可以包括以下子模块:图片获取子模块1131,获取用户在图片库中选择的具有第一人脸图像的第一目标图片;第一确定子模块1132,用于确定图片库中具有与第一人脸图像的图像相似度大于预设阈值的第二人脸图像的第二目标图片;第三截取子模块1133,用于在分别截取第一目标图片和第二目标图片中的第一人脸图像和第二人脸图像;第二确定子模块1134,用于将第一人脸图像和第二人脸图像均确定为待切换人脸图像。
[0133] 请参见图7所示,在本实施例的一个可选择的方案中,覆盖模块15可以包括以下子模块:第一处理子模块151,用于对所述目标人脸图像和所述当前人脸图像进行特征点定位;第二处理子模块152,用于根据所述目标人脸图像对所述当前人脸图像进行人脸变形,然后根据所述特征点定位,用所述目标人脸图像覆盖处理后的所述当前人脸图像;或者,根据所述当前人脸图像对所述目标人脸图像进行人脸变形,然后根据所述特征点定位,用处理后的所述目标人脸图像覆盖所述当前人脸图像。
[0134] 关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
[0135] 实施例四
[0136] 图8是根据一示例性实施例示出的另一种切换图片中人脸图像的装置的示意图。本公开提供的切换图片中人脸图像的装置可以在当前人脸图像与目标人脸图像的大小尺寸不同时,按照当前人脸图像的人脸特征参数来调整目标人脸图像,从而使目标人脸图像融入到图片中的效果更好,提高了用户的体验度。参照图8,该装置包括获取模块21、训练模块22、确定模块23、拍照模块24、计算模块25、判断模块26、执行模块27和覆盖模块28。
其中:
[0137] 获取模块21,用于在接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像。
[0138] 训练模块22,用于将待切换人脸图像映射到处于待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的。
[0139] 确定模块23,用于确定当前人脸图像的拍照角度。
[0140] 拍照模块24,用于按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照生成目标人脸图像。
[0141] 计算模块25,用于分别计算当前人脸图像的第一人脸特征参数和目标人脸图像的第二人脸特征参数。
[0142] 判断模块26,用于判断第一人脸特征参数与第二人脸特征参数的差值是否在预设范围内。
[0143] 执行模块27,用于在第一人脸特征参数与第二人脸特征参数的差值在预设范围内时,调用覆盖模块28;在第一人脸特征参数与第二人脸特征参数的差值不在预设范围内时,按照第一人脸特征参数调整目标人脸图像生成指定人脸图像,并在图片中利用指定人脸图像覆盖当前人脸图像。
[0144] 覆盖模块28,用于在图片中利用目标人脸图像覆盖当前人脸图像。
[0145] 关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
[0146] 实施例五
[0147] 图9是根据一示例性实施例示出的一种切换图片中人脸图像的装置800的框图。例如,装置800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
[0148] 参照图9,装置800可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
[0149] 处理组件802通常控制装置800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
[0150] 存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
[0151] 电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为装置800生成、管理和分配电力相关联的组件。
[0152] 多媒体组件808包括在装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
[0153] 音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当装置800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
[0154] I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
[0155] 传感器组件814包括一个或多个传感器,用于为装置800提供各个方面的状态评估。例如,传感器组件814可以检测到装置800的打开/关闭状态,组件的相对定位,例如组件为装置800的显示器和小键盘,传感器组件814还可以检测装置800或装置800一个组件的位置改变,用户与装置800接触的存在或不存在,装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
[0156] 通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
[0157] 在示例性实施例中,装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
[0158] 在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由装置800的处理器820执行以完成上述方法。例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
[0159] 一种非临时性计算机可读存储介质,当存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种切换图片中人脸图像的方法,方法包括:当接收到切换图片中的当前人脸图像的指令时,获取至少一幅待切换人脸图像;将待切换人脸图像映射到处于待切换人脸图像的拍照角度的平均立体人脸模型上以生成目标立体人脸模型,平均立体人脸模型为利用预设人脸模型构建方法对多个立体人脸图像进行训练生成的;确定当前人脸图像的拍照角度;按照当前人脸图像的拍照角度对目标立体人脸模型进行拍照生成目标人脸图像;在图片中利用目标人脸图像覆盖当前人脸图像。
[0160] 本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
[0161] 应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。