一种图像处理方法及移动终端

摘要

本发明公开了一种图像处理方法及移动终端，其中所述方法包括：获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取摄像头按照第二焦距拍摄得到的包含目标对象的参考图像；根据参考图像中的目标对象，对第一初始图像和第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像；其中，第一方向与第二方向之间的角度在预定角度范围内；第一焦距大于第二焦距。本发明避免在全景拍摄模式下，由至少两帧初始图像最终合成得到的全景图像扭曲失真。

权利要求

1.一种图像处理方法，应用于移动终端，其特征在于，所述方法包括：获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；

当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像；

根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像；

其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；

所述第一焦距大于所述第二焦距；所述第一方向与所述第二方向垂直。

2.根据权利要求1所述的图像处理方法，其特征在于，所述当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限，则获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像的步骤之前，所述方法还包括：检测所述第一方向相对于所述摄像头在预定移动方向的偏转角是否超出预定角度门限，其中所述预定移动方向为拍照开始时设定的参考移动方向；

若超出预定角度门限，则确定目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限。

3.根据权利要求1所述的图像处理方法，其特征在于，所述当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限，则获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像的步骤之前，所述方法还包括：获取所述目标对象中目标参考点到第一初始图像中预定位置的第一距离，以及所述目标参考点到第二初始图像中预定位置的第二距离；

检测所述第一距离与所述第二距离之间的差值是否超出预定阈值；

若超出预设阈值，则确定目标对象在第一初始图像中的第一位置相对于第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限；

其中，所述预定位置为所述第一初始图像和所述第二初始图像中，沿所述第二方向延伸的图像边缘或沿所述第一方向的图像中心线。

4.根据权利要求3所述的图像处理方法，其特征在于，所述获取所述目标对象中目标参考点到第一初始图像中预定位置的第一距离，以及所述目标参考点到第二初始图像中预定位置的第二距离的步骤之前，所述方法还包括：获取所述第一初始图像和所述第二初始图像中同一目标对象的几何中心点作为目标参考点；或者，获取所述第一初始图像和所述第二初始图像中同一目标对象中的一关键像素点作为目标参考点；或者，获取所述第一初始图像和所述第二初始图像中同一目标对象的轮廓线中的一部分作为目标参考点。

5.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像的步骤，包括：将所述第一初始图像和所述第二初始图像进行合成处理，得到中间图像；

抠取所述参考图像中包含所述目标对象的第一图像区域，得到初始子图像；

根据所述第一焦距与所述第二焦距之间的比例，确定对所述初始子图像进行放大处理的放大比例；

根据所述放大比例对所述初始子图像进行放大处理，得到目标子图像；

将所述目标子图像覆盖于所述中间图像中对应所述目标对象的第二图像区域，得到目标图像。

6.一种移动终端，其特征在于，所述移动终端包括：

第一获取模块，用于获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；

第二获取模块，用于当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像；

处理模块，用于根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像；

其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；

所述第一焦距大于所述第二焦距；所述第一方向与所述第二方向垂直。

7.根据权利要求6所述的移动终端，其特征在于，所述移动终端还包括：第一检测模块，用于检测所述第一方向相对于所述摄像头在预定移动方向的偏转角是否超出预定角度门限，其中所述预定移动方向为拍照开始时设定的参考移动方向；

第一确定模块，用于若超出预定角度门限，则确定目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限。

8.根据权利要求7所述的移动终端，其特征在于，所述移动终端还包括：第三获取模块，用于获取所述目标对象中的目标参考点到第一初始图像中预定位置的第一距离，以及所述目标参考点到第二初始图像中预定位置的第二距离；

第二检测模块，用于检测所述第一距离与所述第二距离之间的差值是否超出预定阈值；

第二确定模块，用于若超出预设阈值，则确定目标对象在第一初始图像中的第一位置相对于第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限；

其中，所述预定位置为所述第一初始图像和所述第二初始图像中，沿所述第二方向延伸的图像边缘或沿所述第一方向的图像中心线。

9.根据权利要求8所述的移动终端，其特征在于，所述移动终端还包括：第四获取模块，用于获取所述第一初始图像和所述第二初始图像中同一目标对象的几何中心点作为目标参考点；或者，第五获取模块，用于获取所述第一初始图像和所述第二初始图像中同一目标对象中的一关键像素点作为目标参考点；或者，第六获取模块，用于获取所述第一初始图像和所述第二初始图像中同一目标对象的轮廓线中的一部分作为目标参考点。

10.根据权利要求6所述的移动终端，其特征在于，所述处理模块包括：第一合成单元，用于将所述第一初始图像和所述第二初始图像进行合成处理，得到中间图像；

抠取单元，用于抠取所述参考图像中包含所述目标对象的第一图像区域，得到初始子图像；

处理单元，用于根据所述第一焦距与所述第二焦距之间的比例，确定对所述初始子图像进行放大处理的放大比例；

放大单元，用于根据所述放大比例对所述初始子图像进行放大处理，得到目标子图像；

第二合成单元，用于将所述目标子图像覆盖于所述中间图像中对应所述目标对象的第二图像区域，得到目标图像。

11.一种移动终端，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。

说明书

一种图像处理方法及移动终端

技术领域

[0001] 本发明涉及通信技术领域，尤其涉及一种图像处理方法及移动终端。

背景技术

[0002] 随着移动终端技术的发展，摄像头已成为移动终端的基本配置之一。在摄像头的硬件基础之上，移动终端的相机具有美颜、录像、虚化、慢镜头以及全景拍照等多种功能。一般的全景拍照是以某一点为中心水平旋转摄像头或者平移摄像头拍摄多张局部图像之后，将拍摄得到的多张图像按照景物边缘相邻的方式依次合成一张全景照片。

[0003] 这种拍照方式需要移动终端在移动过程中都尽量处于同一水平高度。但是，在实际在拍摄过程中，很多情况下用户都是手动移动移动终端进行全景拍摄，如果用户在移动移动终端的过程中出现抖动，就很难保证移动终端始终保持在同一水平高度上，从而导致最终合成的全景照片不连续、出现断层，导致合成后的图像失真。

发明内容

[0004] 本发明提供了一种图像处理方法及移动终端，以解决现有技术中全景拍摄得到的全景照片不连续、出现断层甚至图像失真的问题。

[0005] 第一方面，本发明实施例提供了一种图像处理方法，应用于移动终端，其中所述方法包括：

[0006] 获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；

[0007] 当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像；

[0008] 根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像；

[0009] 其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；

[0010] 所述第一焦距大于所述第二焦距。

[0011] 第二方面，本发明实施例还提供了一种移动终端，其中所述移动终端包括：

[0012] 第一获取模块，用于获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；

[0013] 第二获取模块，用于当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像；

[0014] 处理模块，用于根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像；

[0015] 其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；

[0016] 所述第一焦距大于所述第二焦距。

[0017] 第三方面，本发明实施例还提供了一种移动终端，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的图像处理方法的步骤。

[0018] 第四方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的图像处理方法的步骤。

[0019] 在本发明实施例中，通过获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像。并根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，以消除中间图像的扭曲失真现象，进而提高全景拍照时的拍照效果。

附图说明

[0020] 为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

[0021] 图1表示本发明实施例的图像处理方法的流程图之一；

[0022] 图2表示本发明实施例的第N个初始图像的示意图；

[0023] 图3表示本发明实施例的第N+1个初始图像的示意图；

[0024] 图4表示本发明实施例的中间图像的示意图；

[0025] 图5表示本发明实施例的参考图像的示意图；

[0026] 图6表示本发明实施例的目标图像的示意图；

[0027] 图7表示本发明实施例的图像处理方法的流程图之二；

[0028] 图8表示本发明实施例的图像处理方法的流程图之三；

[0029] 图9表示本发明实施例的根据参考图像和中间图像合成得到目标图像的步骤；

[0030] 图10表示本发明实施例的移动终端的框图；

[0031] 图11表示本发明实施例的移动终端的硬件结构示意图。

具体实施方式

[0032] 下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

[0033] 参见图1，本发明实施例提供了一种图像处理方法，应用于移动终端，其中所述方法包括：

[0034] 步骤11，获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像。

[0035] 该实施例中的图像处理方法适用于全景拍摄场景。具体的，在获取到用户输入的全景拍摄的拍照指令时，移动终端启动全景拍摄模式，并按照第一焦距拍摄第N个初始图像(第一初始图像)，其中N为正整数。在检测到摄像头以预定中心沿第一方向旋转预设角度，或者摄像头沿第一方向平移(如：水平平移)预设距离时，按照第一焦距拍摄第N+1个初始图像(第二初始图像)。

[0036] 需要说明的是，预设角度或者预设距离的设定应满足第N+1个初始图像与第N个初始图像中具有相同的图像信息，以避免根据第N个初始图像和第N+1个初始图像合成得到的全景图像中出现断差。

[0037] 步骤12，当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像。

[0038] 其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；所述第一焦距大于所述第二焦距。

[0039] 作为一种优选地实现方式，在连续拍摄的两帧初始图像(第一初始图像和第二初始图像)是摄像头以预定中心沿第一方向旋转预设角度时所拍摄的初始图像的情况下，第一方向是指旋转半径均在同一平面的弧线方向，第二方向是与所述弧线方向相垂直的径向方向。

[0040] 作为另一种优选地实现方式，在连续拍摄的两帧初始图像是摄像头沿第一方向平移预设距离时所拍摄的初始图像的情况下，第一方向可以是水平方向，第二方向可以是与水平方向相垂直的竖直方向。

[0041] 该实施例中，如图2，给出了摄像头按照第一焦距拍摄的第N个初始图像210(第一初始图像)的示例，其中第N个初始图像210中包含目标对象201；如图3，给出了摄像头按照第一焦距拍摄的第N+1个初始图像310(第二初始图像)，其中第N+1个初始图像310中也包含同一目标对象201；当目标对象201在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时(如图4所示)，即确定该连续拍摄的两帧初始图像在进行拼接得到图4所示的中间图像时，会出现扭曲失真的现象。在这种情况下，控制摄像头调整焦距，并以小于第一焦距的第二焦距进行拍摄，以便于拍摄得到图5所示的参考图像510，其中参考图像510中包括目标对象201以及距离所述目标对象201预定范围内的图像信息。

[0042] 步骤13，根据所述参考图像中的目标对象，对所述第一初始图像和第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像。

[0043] 该实施例中，将连续拍摄的两帧初始图像按照所拍摄的图像边缘相邻的方式进行合成处理，得到中间图像。由于目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限，则中间图像在对应目标对象的图像区域内存在扭曲失真的现象。因此将参考图像中对应目标对象的图像区域替换至所述中间图像中对应所述目标对象的图像区域，以消除中间图像的扭曲失真现象，得到图6所示的目标图像610，从而避免由至少两帧初始图像最终合成得到的全景图像的扭曲失真，进而提高全景拍摄的拍摄效果。

[0044] 参见图7，本发明实施例还提供了一种图像处理方法，应用于移动终端，其中所述方法包括：

[0045] 步骤71，获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像。

[0046] 该实施例中的图像处理方法适用于全景拍摄场景。具体的，在获取到用户输入的全景拍摄的拍照指令时，移动终端启动全景拍摄模式，并按照第一焦距拍摄第N个初始图像(第一初始图像)，其中N为正整数。在检测到摄像头以预定中心沿第一方向旋转预设角度，或者摄像头沿第一方向平移(如：水平平移)预设距离时，按照第一焦距拍摄第N+1个初始图像(第二初始图像)。

[0047] 需要说明的是，预设角度或者预设距离的设定应满足第N+1个初始图像与第N个初始图像中具有相同的图像信息，以避免根据第N个初始图像和第N+1个初始图像合成得到的全景图像中出现断差。

[0048] 步骤72，检测所述第一方向相对于所述摄像头在预定移动方向的偏转角是否超出预定角度门限。

[0049] 其中，所述预定移动方向为拍照开始时设定的参考移动方向。

[0050] 该实施例中，预定移动方向可以是沿预定中心的圆弧形进行旋转的旋转方向，还可以是水平或者竖直的平行移动方向，或者是其他平行移动方向。具体的，可以通过角度传感器采集移动终端的摄像头在沿第一方向移动时，相对于预定移动方向的偏转角。

[0051] 步骤73，若超出预定角度门限，则确定目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限。

[0052] 该实施例中，通过检测到移动终端的摄像头在沿第一方向移动时，相对于预定移动方向的偏转角超出预定角度门限，则确定目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限，可以避免大量的数据运算，进而有利于提高移动终端的处理效率。

[0053] 步骤74，当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像。

[0054] 其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；所述第一焦距大于所述第二焦距。

[0055] 作为一种优选地实现方式，在连续拍摄的两帧初始图像(第一初始图像和第二初始图像)是摄像头以预定中心沿第一方向旋转预设角度时所拍摄的初始图像的情况下，第一方向是指旋转半径均在同一平面的弧线方向，第二方向是与所述弧线方向相垂直的径向方向。

[0056] 作为另一种优选地实现方式，在连续拍摄的两帧初始图像是摄像头沿第一方向平移预设距离时所拍摄的初始图像的情况下，第一方向可以是水平方向，第二方向可以是与水平方向相垂直的竖直方向。

[0057] 该实施例中，如图2，给出了摄像头按照第一焦距拍摄的第N个初始图像210(第一初始图像)的示例，其中第N个初始图像210中包含目标对象201；如图3，给出了摄像头按照第一焦距拍摄的第N+1个初始图像310(第二初始图像)，其中第N+1个初始图像310中也包含同一目标对象201；当目标对象201在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时(如图4所示)，即确定该连续拍摄的两帧初始图像在进行拼接得到图4所示的中间图像时，会出现扭曲失真的现象。在这种情况下，控制摄像头调整焦距，并以小于第一焦距的第二焦距进行拍摄，以便于拍摄得到图5所示的参考图像510，其中参考图像510中包括目标对象201以及距离所述目标对象201预定范围内的图像信息。

[0058] 步骤75，根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像。

[0059] 该实施例中，将连续拍摄的两帧初始图像按照所拍摄的图像边缘相邻的方式进行合成处理，得到中间图像。由于目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限，则中间图像在对应目标对象的图像区域内存在扭曲失真的现象。因此将参考图像中对应目标对象的图像区域替换至所述中间图像中对应所述目标对象的图像区域，以消除中间图像的扭曲失真现象，得到图6所示的目标图像610，从而避免由至少两帧初始图像最终合成得到的全景图像的扭曲失真，进而提高全景拍摄的拍摄效果。

[0060] 参见图8，本发明实施例还提供了一种图像处理方法，应用于移动终端，其中所述方法包括：

[0061] 步骤81，获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像。

[0062] 该实施例中的图像处理方法适用于全景拍摄场景。具体的，在获取到用户输入的全景拍摄的拍照指令时，移动终端启动全景拍摄模式，并按照第一焦距拍摄第N个初始图像(第一初始图像)，其中N为正整数。在检测到摄像头以预定中心沿第一方向旋转预设角度，或者摄像头沿第一方向平移(如：水平平移)预设距离时，按照第一焦距拍摄第N+1个初始图像(第二初始图像)。

[0063] 需要说明的是，预设角度或者预设距离的设定应满足第N+1个初始图像与第N个初始图像中具有相同的图像信息，以避免根据第N个初始图像和第N+1个初始图像合成得到的全景图像中出现断差。

[0064] 步骤82，获取所述目标对象中目标参考点到第一初始图像中预定位置的第一距离，以及所述目标参考点到第二初始图像中预定位置的第二距离。

[0065] 其中，所述预定位置为所述第一初始图像和所述第二初始图像中，沿所述第二方向延伸的图像边缘或沿所述第一方向的图像中心线。

[0066] 上述步骤82之前，所述方法还包括：确定所述目标对象中的目标参考点。

[0067] 具体的，获取所述第一初始图像和所述第二初始图像中同一目标对象的几何中心点作为目标参考点；或者，获取所述第一初始图像和所述第二初始图像中同一目标对象中的一关键像素点作为目标参考点；或者，获取所述第一初始图像和所述第二初始图像中同一目标对象的轮廓线中的一部分作为目标参考点。

[0068] 具体的，沿所述第二方向延伸的图像边缘可以包括第一图像边缘(如图2中初始图像区域的上边缘)和第二图像边缘(如图2中初始图像区域的下边缘)；图像中心线(如图2中虚线所示)位于第一图像边缘和第二图像边缘之间，并分别与第一图像边缘和第二图像边缘相平行。

[0069] 这里需要说明的是，在选取沿第二方向延伸的图像边缘或沿第一方向的图像中心线作为预定位置时，在第二初始图像中所选取的预定位置与在第一初始图像中所选取的预定位置应相同，例如：若选取第一初始图像中的第一图像边缘作为预定位置时，第二初始图像也应选取第一图像边缘作为预定位置；若选取第一初始图像中的第二图像边缘作为预定位置时，第二初始图像也应选取第二图像边缘作为预定位置；若选取第一初始图像中的图像中心线作为预定位置时，第二初始图像也应选取图像中心线作为预定位置。

[0070] 步骤83，检测所述第一距离与所述第二距离之间的差值是否超出预定阈值。

[0071] 该实施例中，预设阈值设定为正数，可以根据人眼所能观察到合成处理得到中间图像中出现断差的临界值确定，该临界值可以根据实验得到。

[0072] 步骤84，若超出预定阈值，则确定目标对象在第一初始图像中的第一位置相对于第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限。

[0073] 该实施例中，通过计算第一距离与第一距离之间差值的绝对值，若该差值的绝对值大于预设阈值，则确定目标对象在第一初始图像中的第一位置相对于第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限，以便于直接确定根据第一初始图像和第二初始图像合成得到的全景图像中是否出现断差，有利于提高检测结果的准确性。

[0074] 步骤85，当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像。

[0075] 其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；所述第一焦距大于所述第二焦距。

[0076] 作为一种优选地实现方式，在连续拍摄的两帧初始图像(第一初始图像和第二初始图像)是摄像头以预定中心沿第一方向旋转预设角度时所拍摄的初始图像的情况下，第一方向是指旋转半径均在同一平面的弧线方向，第二方向是与所述弧线方向相垂直的径向方向。

[0077] 作为另一种优选地实现方式，在连续拍摄的两帧初始图像是摄像头沿第一方向平移预设距离时所拍摄的初始图像的情况下，第一方向可以是水平方向，第二方向可以是与水平方向相垂直的竖直方向。

[0078] 该实施例中，如图2，给出了摄像头按照第一焦距拍摄的第N个初始图像210(第一初始图像)的示例，其中第N个初始图像210中包含目标对象201；如图3，给出了摄像头按照第一焦距拍摄的第N+1个初始图像310(第二初始图像)，其中第N+1个初始图像310中也包含同一目标对象201；当目标对象201在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时(如图4所示)，即确定该连续拍摄的两帧初始图像在进行拼接得到图4所示的中间图像时，会出现扭曲失真的现象。在这种情况下，控制摄像头调整焦距，并以小于第一焦距的第二焦距进行拍摄，以便于拍摄得到图5所示的参考图像510，其中参考图像510中包括目标对象201以及距离所述目标对象201预定范围内的图像信息。

[0079] 步骤86，根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像。

[0080] 该实施例中，将连续拍摄的两帧初始图像按照所拍摄的图像边缘相邻的方式进行合成处理，得到中间图像。由于目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限，则中间图像在对应目标对象的图像区域内存在扭曲失真的现象。因此将参考图像中对应目标对象的图像区域替换至所述中间图像中对应所述目标对象的图像区域，以消除中间图像的扭曲失真现象，得到图6所示的目标图像610，从而避免由至少两帧初始图像最终合成得到的全景图像的扭曲失真，进而提高全景拍摄的拍摄效果。

[0081] 具体的，参见图9，上述各个实施例中：根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像的步骤具体包括：

[0082] 步骤91，将所述第一初始图像和所述第二初始图像进行合成处理，得到中间图像。

[0083] 作为一种实现方式，将第一初始图像与第二初始图像中的相同图像区域进行重合，得到所述第一初始图像与所述第二初始图像拼接后的中间图像。

[0084] 具体的，中间图像是按照第一初始图像和第二初始图像中相同图像区域的边缘相邻的方式进行重合拼接得到的；其中，第一初始图像为连续拍摄的两个初始图像中的一个，第二初始图像为连续拍摄的两个初始图像中的另一个。

[0085] 作为另一种实现方式，通过裁剪去掉所述第一初始图像中与第二初始图像中相同的图像区域，并将裁剪后的第一初始图像与所述第二初始图像进行拼接，得到中间图像。

[0086] 具体的，通过裁剪去掉第一初始图像中与第二初始图像中相同的图像区域，得到中间待处理图像。将中间待处理图像的裁剪边缘，与第二初始图像中与所述裁剪边缘属于图像信息相邻的边缘进行拼接，得到中间图像。

[0087] 步骤92，抠取所述参考图像中包含所述目标对象的第一图像区域，得到初始子图像。

[0088] 该实施例中，在抠取参考图像中对应目标对象的第一图像区域时，可以按照所述目标对象的边缘轮廓所包围的图像区域作为第一图像区域，并抠取所述第一图像区域得到子图像。

[0089] 步骤93，根据所述第一焦距与所述第二焦距之间的比例，确定对所述初始子图像进行放大处理的放大比例。

[0090] 该实施例中，由于第二焦距小于第一焦距，相当于按照第二焦距拍摄得到包含目标对象的参考图像(广角图像)。因此，将参考图像中的目标对象覆盖于，第一初始图像和第二初始图像进行合成处理后得到的中间图像中的目标对象上之前，需要对初始子图像进行放大处理。

[0091] 步骤94，根据所述放大比例对所述初始子图像进行放大处理，得到目标子图像。

[0092] 当然，作为另一种实现方式，还可以是根据所述第一焦距与所述第二焦距之间的比例，确定对所述参考图像进行放大处理的放大比例；根据所述放大比例对所述参考图像进行放大处理，得到目标参考图像；抠取所述目标参考图像中包含所述目标对象的第一图像区域，得到目标子图像。

[0093] 步骤95，将所述目标子图像覆盖于所述中间图像中对应所述目标对象的第二图像区域，得到目标图像。

[0094] 该实施例中，第二图像区域可以按照中间图像中目标对象的边缘轮廓所包围的图像范围确定。

[0095] 其中，参考图像是摄像头以第二焦距拍摄得到的，中间图像是摄像头以第一焦距连续拍摄得到的两帧初始图像合成得到的，由于第二焦距小于第一焦距，这样参考图像中目标对象的尺寸应小于中间图像中目标对象的尺寸。因此，在抠取得到初始子图像后，按照第一焦距与第二焦距之间的比例对初始子图像进行放大处理，得到与第二图像区域的尺寸相同或者比第二图像区域的尺寸大于预设数值的目标子图像，以保证将目标子图像覆盖于第二图像区域时，能完全覆盖所述第二图像区域。

[0096] 参见图10，本发明实施例还提供了一种移动终端，所述移动终端1000包括：

[0097] 第一获取模块1010，用于获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像。

[0098] 第二获取模块1020，用于当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像。

[0099] 处理模块1030，用于根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像。

[0100] 其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；所述第一焦距大于所述第二焦距。

[0101] 其中，所述移动终端1000还包括：

[0102] 第一检测模块，用于检测所述第一方向相对于所述摄像头在预定移动方向的偏转角是否超出预定角度门限，其中所述预定移动方向为拍照开始时设定的参考移动方向。

[0103] 第一确定模块，用于若超出预定角度门限，则确定目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限。

[0104] 其中，所述移动终端1000还包括：

[0105] 第三获取模块，用于获取所述目标对象中的目标参考点到第一初始图像中预定位置的第一距离，以及所述目标参考点到第二初始图像中预定位置的第二距离。

[0106] 第二检测模块，用于检测所述第一距离与所述第二距离之间的差值是否超出预定阈值。

[0107] 第二确定模块，用于若超出预设阈值，则确定目标对象在第一初始图像中的第一位置相对于第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限。

[0108] 其中，所述预定位置为所述第一初始图像和所述第二初始图像中，沿所述第二方向延伸的图像边缘或沿所述第一方向的图像中心线。

[0109] 其中，所述移动终端1000还包括：

[0110] 第四获取模块，用于获取所述第一初始图像和所述第二初始图像中同一目标对象的几何中心点作为目标参考点。

[0111] 或者，第五获取模块，用于获取所述第一初始图像和所述第二初始图像中同一目标对象中的一关键像素点作为目标参考点。

[0112] 或者，第六获取模块，用于获取所述第一初始图像和所述第二初始图像中同一目标对象的轮廓线中的一部分作为目标参考点。

[0113] 其中，所述处理模块1030包括：

[0114] 第一合成单元，用于将所述第一初始图像和所述第二初始图像进行合成处理，得到中间图像。

[0115] 抠取单元，用于抠取所述参考图像中包含所述目标对象的第一图像区域，得到初始子图像。

[0116] 处理单元，用于根据所述第一焦距与所述第二焦距之间的比例，确定对所述初始子图像进行放大处理的放大比例。

[0117] 放大单元，用于根据所述放大比例对所述初始子图像进行放大处理，得到目标子图像。

[0118] 第二合成单元，用于将所述目标子图像覆盖于所述中间图像中对应所述目标对象的第二图像区域，得到目标图像。

[0119] 本发明实施例提供的移动终端能够实现图1至图9方法实施例中移动终端实现的各个过程，为避免重复，这里不再赘述。

[0120] 上述方案中的移动终端900，通过获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像。并根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，以消除中间图像的扭曲失真现象，进而提高全景拍照时的拍照效果。

[0121] 图11为实现本发明各个实施例的一种移动终端的硬件结构示意图。

[0122] 该移动终端1100包括但不限于：射频单元1101、网络模块1102、音频输出单元1103、输入单元1104、传感器1105、显示单元1106、用户输入单元1107、接口单元1108、存储器1109、处理器1110、以及电源1111等部件。本领域技术人员可以理解，图11中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

[0123] 其中，处理器1110，用于获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像；根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，得到目标图像；其中，所述第一方向与所述第二方向之间的角度在预定角度范围内；所述第一焦距大于所述第二焦距。

[0124] 上述方案中的移动终端1100，通过获取移动终端的摄像头沿第一方向移动，并按照第一焦距连续拍摄得到的第一初始图像和第二初始图像；当目标对象在第一初始图像中的第一位置相对于在第二初始图像中的第二位置，在第二方向上的偏移量超出预定门限时，获取所述摄像头按照第二焦距拍摄得到的包含所述目标对象的参考图像。并根据所述参考图像中的目标对象，对所述第一初始图像和所述第二初始图像进行合成处理后得到的中间图像中的目标对象进行替换，以消除中间图像的扭曲失真现象，进而提高全景拍照时的拍照效果。

[0125] 应理解的是，本发明实施例中，射频单元1101可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器1110处理；另外，将上行的数据发送给基站。通常，射频单元1101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元1101还可以通过无线通信系统与网络和其他设备通信。

[0126] 移动终端通过网络模块1102为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

[0127] 音频输出单元1103可以将射频单元1101或网络模块1102接收的或者在存储器1109中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元1103还可以提供与移动终端1100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元1103包括扬声器、蜂鸣器以及受话器等。

[0128] 输入单元1104用于接收音频或视频信号。输入单元1104可以包括图形处理器(Graphics Processing Unit，GPU)11041和麦克风11042，图形处理器11041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元1106上。经图形处理器11041处理后的图像帧可以存储在存储器1109(或其它存储介质)中或者经由射频单元1101或网络模块1102进行发送。麦克风11042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元1101发送到移动通信基站的格式输出。

[0129] 移动终端1100还包括至少一种传感器1105，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板11061的亮度，接近传感器可在移动终端1100移动到耳边时，关闭显示面板11061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器1105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

[0130] 显示单元1106用于显示由用户输入的信息或提供给用户的信息。显示单元1106可包括显示面板11061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板11061。

[0131] 用户输入单元1107可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元1107包括触控面板11071以及其他输入设备11072。触控面板11071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板11071上或在触控面板11071附近的操作)。触控面板11071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；
触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器1110，接收处理器1110发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板11071。除了触控面板11071，用户输入单元1107还可以包括其他输入设备11072。具体地，其他输入设备11072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

[0132] 进一步的，触控面板11071可覆盖在显示面板11061上，当触控面板11071检测到在其上或附近的触摸操作后，传送给处理器1110以确定触摸事件的类型，随后处理器1110根据触摸事件的类型在显示面板11061上提供相应的视觉输出。虽然在图11中，触控面板11071与显示面板11061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板11071与显示面板11061集成而实现移动终端的输入和输出功能，具体此处不做限定。

[0133] 接口单元1108为外部装置与移动终端1100连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元1108可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端1100内的一个或多个元件或者可以用于在移动终端1100和外部装置之间传输数据。

[0134] 存储器1109可用于存储软件程序以及各种数据。存储器1109可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器1109可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

[0135] 处理器1110是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器1109内的软件程序和/或模块，以及调用存储在存储器1109内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器1110可包括一个或多个处理单元；优选的，处理器1110可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1110中。

[0136] 移动终端1100还可以包括给各个部件供电的电源1111(比如电池)，优选的，电源1111可以通过电源管理系统与处理器1110逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

[0137] 另外，移动终端1100包括一些未示出的功能模块，在此不再赘述。

[0138] 优选的，本发明实施例还提供一种移动终端，包括处理器1110，存储器1109，存储在存储器1109上并可在所述处理器1110上运行的计算机程序，该计算机程序被处理器1110执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

[0139] 本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。

[0140] 需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

[0141] 通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

[0142] 上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。