一种图像处理方法、装置及移动终端转让专利

申请号 : CN201711135534.5

文献号 : CN107682639B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 高景景寇飞郝婧

申请人 : 维沃移动通信有限公司

摘要 :

本发明提供一种图像处理方法、装置及移动终端,该方法包括:获取具有视差的第一帧图像和第二帧图像;计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。本发明能够处理得到具有虚化效果的图像,提升了图像处理质量,且无需装配双摄像头,降低了图像处理成本。

权利要求 :

1.一种图像处理方法,其特征在于,包括:

获取具有视差的第一帧图像和第二帧图像;

计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;

根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系;

所述根据所述位移对所述目标像素点进行虚化处理的步骤,包括:获取所述目标像素点中位移小于预设距离的像素点;

对所述目标像素点中位移小于所述预设距离的像素点进行所述虚化处理;

所述关联关系为负相关关系。

2.根据权利要求1所述的方法,其特征在于,所述获取具有视差的第一帧图像和第二帧图像的步骤,包括:获取第一帧图像,并获取所述第一帧图像之外的其他图像;

判断所述其他图像是否与所述第一帧图像满足预设的匹配条件;

若所述其他图像与所述第一帧图像满足所述匹配条件,则将所述其他图像确定为所述第二帧图像。

3.根据权利要求2所述的方法,其特征在于,所述判断所述其他图像是否与所述第一帧图像满足预设的匹配条件的步骤,包括:识别所述其他图像与所述第一帧图像中均存在的共同像素点;

根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量;

判断所述水平偏移量是否超过预设阈值,且所述垂直偏移量是否在预设范围内;

若所述水平偏移量超过所述预设阈值,且所述垂直偏移量在所述预设范围内,则确定所述其他图像与所述第一帧图像满足所述匹配条件。

4.根据权利要求3所述的方法,其特征在于,所述根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量的步骤,包括:在将所述其他图像与所述第一帧图像进行图像对齐的条件下,根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量。

5.一种图像处理装置,其特征在于,包括:

获取模块,用于获取具有视差的第一帧图像和第二帧图像;

计算模块,计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;

处理模块,用于根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系;

所述处理模块,包括:

第二获取子模块,用于获取所述目标像素点中位移小于预设距离的像素点;

处理子模块,用于对所述目标像素点中位移小于所述预设距离的像素点进行所述虚化处理;

所述关联关系为负相关关系。

6.根据权利要求5所述的图像处理装置,其特征在于,所述获取模块,包括:第一获取子模块,用于获取第一帧图像,并获取所述第一帧图像之外的其他图像;

判断子模块,用于判断所述其他图像是否与所述第一帧图像满足预设的匹配条件;

确定子模块,用于若所述判断子模块判断所述其他图像与所述第一帧图像满足所述匹配条件,则将所述其他图像确定为所述第二帧图像。

7.根据权利要求6所述的图像处理装置,其特征在于,所述判断子模块,包括:识别单元,用于识别所述其他图像与所述第一帧图像中均存在的共同像素点;

计算单元,用于根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量;

判断单元,用于判断所述水平偏移量是否超过预设阈值,且所述垂直偏移量是否在预设范围内;

确定单元,用于若所述判断单元判断所述水平偏移量超过所述预设阈值,且所述垂直偏移量在所述预设范围内,则确定所述其他图像与所述第一帧图像满足所述匹配条件。

8.根据权利要求7所述的图像处理装置,其特征在于,所述计算单元,具体用于:在将所述其他图像与所述第一帧图像进行图像对齐的条件下,根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量。

9.一种移动终端,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至4中任一项所述的图像处理方法的步骤。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至4中任一项所述的图像处理方法的步骤。

说明书 :

一种图像处理方法、装置及移动终端

技术领域

[0001] 本发明涉及通信技术领域,尤其涉及一种图像处理方法、装置及移动终端。

背景技术

[0002] 随着移动终端的迅速发展,移动终端已经成为人们生活中必不可少的一种工具,并且为用户生活的各个方面带来了极大的便捷。现有的移动终端基本上都有拍照的功能,用户可以使用移动终端拍摄各种各样的照片。例如用户可以使用移动终端拍摄人物的照片,或者也可以使用移动终端拍摄风景的照片等等。
[0003] 现有技术在拍摄具有虚化效果的图像时,需要移动终端配置双摄像头,导致拍摄成本较高。

发明内容

[0004] 本发明实施例提供一种图像处理方法、装置及移动终端,以解决拍摄成本较高的问题。
[0005] 为了解决上述技术问题,本发明是这样实现的:一种图像处理方法,包括:
[0006] 获取具有视差的第一帧图像和第二帧图像;
[0007] 计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;
[0008] 根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。
[0009] 第一方面,本发明实施例提供了一种图像处理方法,包括:
[0010] 获取具有视差的第一帧图像和第二帧图像;
[0011] 计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;
[0012] 根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。
[0013] 第二方面,本发明实施例还提供一种图像处理装置,包括:
[0014] 获取模块,用于获取具有视差的第一帧图像和第二帧图像;
[0015] 计算模块,计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;
[0016] 处理模块,用于根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。
[0017] 第三方面,本发明实施例还提供一种移动终端,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述图像处理方法的步骤。
[0018] 第四方面,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现上述图像处理方法的步骤。
[0019] 本发明实施例能够处理得到具有虚化效果的图像,提升了图像处理质量,且无需装配双摄像头,降低了图像处理成本。

附图说明

[0020] 为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
[0021] 图1是本发明一实施例提供的图像处理方法的流程图;
[0022] 图2是本发明又一实施例提供的图像处理方法的流程图;
[0023] 图3是本发明一实施例提供的图像处理装置的结构图;
[0024] 图4是本发明一实施例提供的图像处理装置的获取模块的结构图;
[0025] 图5是本发明一实施例提供的图像处理装置的判断子模块的结构图;
[0026] 图6是本发明一实施例提供的图像处理装置的处理模块的结构图;
[0027] 图7是本发明又一实施例提供的移动终端的结构图。

具体实施方式

[0028] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0029] 参见图1,图1是本发明实施例提供的图像处理方法的流程图,如图1所示,包括以下步骤:
[0030] 步骤101、获取具有视差的第一帧图像和第二帧图像。
[0031] 本发明实施例中,上述视差就是从有一定距离的两个点上观察同一个目标所产生的方向差异。相对于图像处理装置来说,图像处理装置可以在一个位置拍摄一个物体,得到第一帧图像;然后在另一个位置再拍摄这个物体,得到第二帧图像,这样第一帧图像和第二帧图像就是具有视差的图像。
[0032] 步骤102、计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点。
[0033] 本发明实施例中,例如第一帧图像中存在一辆共享单车,第二帧图像中也存在这辆共享单车,那么这个共享单车所包括的像素点就是目标像素点。当然,第一帧图像和第二帧图像中还可以存在一些其他共同的物体,对此本发明实施例不作限定。上述场景中物体的相对深度关系图,就可以用来表示目标像素点之间所产生的位移。
[0034] 本发明实施例中,上述第二帧图像相对于第一帧图像,目标像素点可以产生位移,实质是由于图像处理装置的移动所造成的。图像处理装置从不同角度拍摄同一个目标,形成的图像之间可以存在一些差异,这样从不同的图像上看,可以认为目标像素点产生了位移。
[0035] 步骤103、根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。
[0036] 本发明实施例中,上述虚化处理是图像处理中的一种常见的方式,经过虚化处理的图像一般来说会变得比较模糊。在拍摄一些人物的照片时,经常对人物之后的背景进行虚化处理,这样可以使人物的形象在图像中更加鲜明。上述深度图就可以理解为经过虚化处理得到的图像。
[0037] 本发明实施例中,离图像处理装置比较近的一些物体,在图像处理装置移动拍摄的多张图像中,图像之间对比起来,该物体可能产生比较大的位移;而离图像处理装置比较远的一些物体,在图像处理装置移动拍摄的多张图像中,图像之间对比起来,该物体可能产生比较小的位移。这样对一些位移比较大的像素点,进行小程度的虚化处理,或者不进行虚化处理;对一些位移比较小的像素点,进行大程度的虚化处理。当然,在进行虚化处理之前,还可以对这些像素点进行归一化处理等等,对此本发明实施例不作限定。
[0038] 这样,就可以使离图像处理装置比较近的物体(可以是人物),尽可能的保留原有的显示,而离图像处理装置比较远的物体(可以看做是背景),进行一些虚化处理。通过图像处理的方式,也可以模拟出双摄像头的拍摄效果,在图像处理装置未装配双摄像头的条件下,也可以拍摄出具有虚化效果的图像。而双摄像头的成本一般来说都比较昂贵,这样就为拍摄具有虚化效果的图像节省了成本。
[0039] 本发明实施例中,上述图像处理装置可以是手机、平板电脑(Tablet Personal Computer)、膝上型电脑(Laptop Computer)、个人数字助理(personal digital assistant,简称PDA)、移动上网装置(Mobile Internet Device,MID)或可穿戴式设备(Wearable Device)等等。
[0040] 本发明实施例的一种图像处理方法,能够处理得到具有虚化效果的图像,提升了图像处理质量,且无需装配双摄像头,降低了图像处理成本。
[0041] 参见图2,图2是本发明实施例提供的图像处理方法的流程图。本实施例与上个实施例的主要区别在于本方法中会获取所述目标像素点中位移小于预设距离的像素点;对所述目标像素点中位移小于所述预设距离的像素点进行所述虚化处理。如图2所示,包括以下步骤:
[0042] 步骤201、获取具有视差的第一帧图像和第二帧图像。
[0043] 本发明实施例中,上述视差就是从有一定距离的两个点上观察同一个目标所产生的方向差异。相对于图像处理装置来说,图像处理装置可以在一个位置拍摄一个物体,得到第一帧图像;然后在另一个位置再拍摄这个物体,得到第二帧图像,这样第一帧图像和第二帧图像就是具有视差的图像。
[0044] 步骤202、计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点。
[0045] 本发明实施例中,例如第一帧图像中存在一辆共享单车,第二帧图像中也存在这辆共享单车,那么这个共享单车所包括的像素点就是目标像素点。当然,第一帧图像和第二帧图像中还可以存在一些其他共同的物体,对此本发明实施例不作限定。上述场景中物体的相对深度关系图,就可以用来表示目标像素点之间所产生的位移。
[0046] 本发明实施例中,上述第二帧图像相对于第一帧图像,目标像素点可以产生位移,实质是由于图像处理装置的移动所造成的。图像处理装置从不同角度拍摄同一个目标,形成的图像之间可以存在一些差异,这样从不同的图像上看,可以认为目标像素点产生了位移。
[0047] 步骤203、获取所述目标像素点中位移小于预设距离的像素点。
[0048] 本发明实施例中,通过设置预设距离来筛选目标像素点中的小于预设距离的像素点,这样就可以对这些像素点进行一些处理。
[0049] 步骤204、对所述目标像素点中位移小于所述预设距离的像素点进行所述虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。
[0050] 本发明实施例中,上述虚化处理是图像处理中的一种常见的方式,经过虚化处理的图像一般来说会变得比较模糊。在拍摄一些人物的照片时,经常对人物之后的背景进行虚化处理,这样可以使人物的形象在图像中更加鲜明。上述深度图就可以理解为经过虚化处理得到的图像。
[0051] 本发明实施例中,离图像处理装置比较近的一些物体,在图像处理装置移动拍摄的多张图像中,图像之间对比起来,该物体可能产生比较大的位移;而离图像处理装置比较远的一些物体,在图像处理装置移动拍摄的多张图像中,图像之间对比起来,该物体可能产生比较小的位移。
[0052] 通过设置一个预设距离,对目标像素点中位移小于预设距离的像素点进行所述虚化处理,目标像素点中位移不小于预设距离的像素点不进行虚化处理。当然,在进行虚化处理之前,还可以对这些像素点进行归一化处理等等,对此本发明实施例不作限定。这样就等同于设置了一个焦平面,位移大于焦平面的为图像前景,位移小于焦平面的则为图像背景。离图像处理装置比较近的一些物体就不进行虚化处理,保持原有的显示方式,而对离图像处理装置比较远的背景进行一些虚化处理,这样可以使虚化效果的层次感更加鲜明。且保留了一些像素原有的显示方式(即不进行虚化处理),通过设置预设距离就可以保证离图像处理装置比较近的人物没有受到虚化处理的影响,人物形象就可以清晰的展示出来,使用户拍摄时有更好的体验。
[0053] 可选的,所述获取具有视差的第一帧图像和第二帧图像的步骤,包括:
[0054] 获取第一帧图像,并获取所述第一帧图像之外的其他图像;
[0055] 判断所述其他图像是否与所述第一帧图像满足预设的匹配条件;
[0056] 若所述其他图像与所述第一帧图像满足所述匹配条件,则将所述其他图像确定为所述第二帧图像。
[0057] 本实施方式中,上述预设的匹配条件,可以是其他图像与第一帧图像为对同一目标拍摄的图像,或者也可以是其他图像与第一帧图像为同一个时间段内拍摄的图像,或者也可以是其他图像与第一帧图像存在相同的部分等等。当然除此之外,还可以有一些其他的匹配条件,对此本发明实施例不作限定。
[0058] 这样,通过预设的匹配条件的限制,可以筛选出一些更加符合处理条件的图像作为第二帧图像,这样在后期的图像处理过程中,可以得到比较合理的结果。
[0059] 可选的,所述判断所述其他图像是否与所述第一帧图像满足预设的匹配条件的步骤,包括:
[0060] 识别所述其他图像与所述第一帧图像中均存在的共同像素点;
[0061] 根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量;
[0062] 判断所述水平偏移量是否超过预设阈值,且所述垂直偏移量是否在预设范围内;
[0063] 若所述水平偏移量超过所述预设阈值,且所述垂直偏移量在所述预设范围内,则确定所述其他图像与所述第一帧图像满足所述匹配条件。
[0064] 本实施方式中,上述其他图像与第一帧图像中均存在的共同像素点,可以通过图像识别的方式进行识别。上述根据共同像素点计算其他图像相对于第一帧图像的水平偏移量和垂直偏移量可以通过以下公式进行计算。
[0065] I和J表示两幅2D灰度图,I(x)=I(x;y)、J(x)=J(x;y)两幅图在x=[x y]T点相对应的两点。由于两幅图像的宽是相同的,两幅图像的高也是相同的,nx、ny为两幅图像的宽和T T T高。则左上的方向矢量为[0 0] ,右下的方向矢量为[nx-1 ny-1]。I上的特征点u=[ux uy] ,则在J图像上相对应点为v=[ux+dx uy+dy]T,I(u)和J(v)为两幅图像上相对应的两点。d=[dx,dy]T为u点的矢量。
[0066] 为两幅图像的转换矩阵。
[0067]
[0068] wx、wy决定了(2wx+1)×(2wy+1)特征点寻找范围的大小,我们这里选择一个像素点为寻找单位。
[0069] 对于每一层高斯金字塔上的图像L=0,...,Lm,定义 为IL上对应的u的坐标。
[0070]
[0071] 而导数矩阵由下式表示:
[0072]
[0073] 将表达式转换下,得出:
[0074]
[0075]
[0076]
[0077] 使公式(7)成立:
[0078] δI(x)=I(x)-J(x)  (7)
[0079]
[0080]
[0081]
[0082]
[0083]
[0084] 实施决定了水平方向上的像素点的位移量,如果整幅图像的水平位移超过预设阈值,则抓取第二帧图像。当然,在抓取第二帧图像的过程中,还可以限制垂直方向的位移 是否在预设范围之类,若 超出该预设范围,则抓取失效,提醒用户重新轻微回退。
[0085] 这样,当水平偏移量超过预设阈值,且垂直偏移量在预设范围内,则确定其他图像与所述第一帧图像满足所述匹配条件,这样使与第一帧图像匹配的图像更加精确,利于后续的进一步处理。
[0086] 可选的,所述根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量的步骤,包括:
[0087] 在将所述其他图像与所述第一帧图像进行图像对齐的条件下,根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量。
[0088] 本实施方式中,图像对齐是图像处理中一种常见的方法。可以使用光流算法进行图像对齐或者一些其他算法进行图像对齐等等,对此本实施方式不作限定。这样在图像对齐之后,便于根据共同像素点计算其他图像相对于第一帧图像的水平偏移量和垂直偏移量。
[0089] 本实施方式中,还可以对图像进行一些平滑,或者扩充处理等等。且对图像的边缘,可以使用双边滤波,或者使用融合算法,增强边缘的准确性等等。在对图像进行虚化处理之后,还可以将保存虚化的图像,这样用户后期还可以使用到这些图像,使用户使用起来更加方便。
[0090] 可选的,所述关联关系为负相关关系。
[0091] 本实施方式中,上述关联关系为负相关关系,这样对一些位移比较大的像素点,进行小程度的虚化处理;对一些位移比较小的像素点,进行大程度的虚化处理。这样,就可以使离图像处理装置比较近的物体(可以是人物),尽可能的保留原有的显示,而离图像处理装置比较远的物体(可以看作是背景),进行一些虚化处理。通过图像处理的方式,也可以模拟出双摄像头的拍摄效果,在图像处理装置未装配双摄像头的条件下,也可以拍摄出具有虚化效果的图像。而双摄像头的成本一般来说都比较昂贵,这样就为拍摄具有虚化效果的图像节省了成本。
[0092] 本发明实施例的一种图像处理方法,获取具有视差的第一帧图像和第二帧图像;计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;获取所述目标像素点中位移小于预设距离的像素点;对所述目标像素点中位移小于所述预设距离的像素点进行所述虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。这样,在未装配双摄像头的情形下,也可以拍摄出具有虚化效果的图像,降低了拍摄具有虚化效果的图像的成本。且通过设置预设距离就可以保证离图像处理装置比较近的人物没有受到虚化处理的影响,人物形象就可以清晰的展示出来,使用户拍摄时有更好的体验。
[0093] 参见图3,图3是本发明实施例提供的图像处理装置的结构图,能实现上述实施例中图像处理方法的细节,并达到相同的效果。如图3所示,图像处理装置300包括获取模块301、计算模块302和处理模块303,获取模块301和计算模块302连接,计算模块302和处理模块303连接,其中:
[0094] 获取模块301,用于获取具有视差的第一帧图像和第二帧图像;
[0095] 计算模块302,用于计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;
[0096] 处理模块303,用于根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。
[0097] 可选的,如图4所示,所述获取模块301,包括:
[0098] 第一获取子模块3011,用于获取第一帧图像,并获取所述第一帧图像之外的其他图像;
[0099] 判断子模块3012,用于判断所述其他图像是否与所述第一帧图像满足预设的匹配条件;
[0100] 确定子模块3013,用于若所述判断子模块3012判断所述其他图像与所述第一帧图像满足所述匹配条件,则将所述其他图像确定为所述第二帧图像。
[0101] 可选的,如图5所示,所述判断子模块3012,包括:
[0102] 识别单元30121,用于识别所述其他图像与所述第一帧图像中均存在的共同像素点;
[0103] 计算单元30122,用于根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量;
[0104] 判断单元30123,用于判断所述水平偏移量是否超过预设阈值,且所述垂直偏移量是否在预设范围内;
[0105] 确定单元30124,用于若所述判断单元30123判断所述水平偏移量超过所述预设阈值,且所述垂直偏移量在所述预设范围内,则确定所述其他图像与所述第一帧图像满足所述匹配条件。
[0106] 可选的,所述计算单元30122,具体用于:
[0107] 在将所述其他图像与所述第一帧图像进行图像对齐的条件下,根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量。
[0108] 可选的,如图6所示,所述处理模块303,包括:
[0109] 第二获取子模块3031,用于获取所述目标像素点中位移小于预设距离的像素点;
[0110] 处理子模块3032,用于对所述目标像素点中位移小于所述预设距离的像素点进行所述虚化处理。
[0111] 可选的,所述关联关系为负相关关系。
[0112] 图像处理装置300能实现图1至图2的方法实施例中图像处理装置实现的各个过程,为避免重复,这里不再赘述。
[0113] 本发明实施例的图像处理装置300,能够处理得到具有虚化效果的图像,提升了图像处理质量,且无需装配双摄像头,降低了图像处理成本。
[0114] 参见图7,图7为实现本发明各个实施例的一种移动终端的硬件结构示意图,该移动终端700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。本领域技术人员可以理解,图7中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
[0115] 其中,处理器710,用于获取具有视差的第一帧图像和第二帧图像;计算所述第二帧图像相对于所述第一帧图像,目标像素点所产生的位移,得到场景中物体的相对深度关系图,其中,所述目标像素点为所述第一帧图像和所述第二帧图像中均存在的像素点;根据所述位移对所述目标像素点进行虚化处理,所述虚化处理的程度与所述位移的大小之间存在关联关系。这样,在未装配双摄像头的情况下,也可以拍摄出具有虚化效果的图像,降低了拍摄具有虚化效果的图像的成本。
[0116] 可选的,处理器710,还用于获取第一帧图像,并获取所述第一帧图像之外的其他图像;判断所述其他图像是否与所述第一帧图像满足预设的匹配条件;若所述其他图像与所述第一帧图像满足所述匹配条件,则将所述其他图像确定为所述第二帧图像。
[0117] 可选的,处理器710,还用于识别所述其他图像与所述第一帧图像中均存在的共同像素点;根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量;判断所述水平偏移量是否超过预设阈值,且所述垂直偏移量是否在预设范围内;若所述水平偏移量超过所述预设阈值,且所述垂直偏移量在所述预设范围内,则确定所述其他图像与所述第一帧图像满足所述匹配条件。
[0118] 可选的,处理器710,还用于在将所述其他图像与所述第一帧图像进行图像对齐的条件下,根据所述共同像素点计算所述其他图像相对于所述第一帧图像的水平偏移量和垂直偏移量。
[0119] 可选的,处理器710,还用于获取所述目标像素点中位移小于预设距离的像素点;对所述目标像素点中位移小于所述预设距离的像素点进行所述虚化处理。
[0120] 可选的,所述关联关系为负相关关系。
[0121] 应理解的是,本发明实施例中,射频单元701可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器710处理;另外,将上行的数据发送给基站。通常,射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元701还可以通过无线通信系统与网络和其他设备通信。
[0122] 移动终端通过网络模块702为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
[0123] 音频输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元703还可以提供与移动终端700执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元703包括扬声器、蜂鸣器以及受话器等。
[0124] 输入单元704用于接收音频或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。
[0125] 移动终端700还包括至少一种传感器705,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度,接近传感器可在移动终端700移动到耳边时,关闭显示面板7061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器705还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
[0126] 显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。
[0127] 用户输入单元707可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器710,接收处理器710发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071,用户输入单元707还可以包括其他输入设备7072。具体地,其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
[0128] 进一步的,触控面板7071可覆盖在显示面板7061上,当触控面板7071检测到在其上或附近的触摸操作后,传送给处理器710以确定触摸事件的类型,随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然在图7中,触控面板7071与显示面板7061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板7071与显示面板7061集成而实现移动终端的输入和输出功能,具体此处不做限定。
[0129] 接口单元708为外部装置与移动终端700连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端700内的一个或多个元件或者可以用于在移动终端700和外部装置之间传输数据。
[0130] 存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器709可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
[0131] 处理器710是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器709内的软件程序和/或模块,以及调用存储在存储器709内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器710可包括一个或多个处理单元;优选的,处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
[0132] 移动终端700还可以包括给各个部件供电的电源711(比如电池),优选的,电源711可以通过电源管理系统与处理器710逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
[0133] 另外,移动终端700包括一些未示出的功能模块,在此不再赘述。
[0134] 优选的,本发明实施例还提供一种移动终端,包括处理器710,存储器709,存储在存储器709上并可在所述处理器710上运行的计算机程序,该计算机程序被处理器710执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
[0135] 本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
[0136] 需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
[0137] 通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
[0138] 上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。