视频合成方法、装置、存储介质与电子设备

摘要

本公开提供一种视频合成方法、装置、存储介质与电子设备，涉及计算机技术领域。其中，所述视频合成方法包括：获取实时视频，并从所述实时视频中抠取目标对象的目标实时视频；将所述目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频；获取由多台实体相机参考所述实时合成视频所拍摄的定格图像序列，并从所述定格图像序列中抠取目标对象的图像序列，所述定格图像序列是由多台实体相机所拍摄的图像组成；将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定格合成视频。本公开实现了目标对象在虚拟场景中的实时定格效果，避免了场景受限问题，给用户带来更新奇的视觉感受。

权利要求

1.一种视频合成方法，其特征在于，包括：获取实时视频，并从所述实时视频中抠取目标对象的目标实时视频；

将所述目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频；

获取由多台实体相机参考所述实时合成视频所拍摄的定格图像序列，并从所述定格图像序列中抠取目标对象的图像序列，其中所述定格图像序列中所包含的图像来自于所述多台实体相机；

将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定格合成视频。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：将所述实时合成视频以及所述定格合成视频实时发送给显示设备，以将所述实时合成视频以及所述定格合成视频进行显示。

3.根据权利要求2所述的方法，其特征在于，所述显示设备包括第一显示设备和第二显示设备，所述将所述实时合成视频以及所述定格合成视频实时发送给显示设备，包括：将所述实时合成视频发送给第一显示设备；

将所述定格合成视频发送给第二显示设备。

4.根据权利要求1所述的方法，其特征在于，所述目标虚拟场景从多个虚拟场景中选取，所述方法还包括：

在选取所述目标虚拟场景后，获取所述目标虚拟场景所配置的灯光信号，将所述灯光信号发送给灯光控制器，使所述灯光控制器采用所述灯光信号控制现场的灯光。

5.根据权利要求4所述的方法，其特征在于，所述灯光信号包括灯光的地址信息，用于使所述灯光控制器根据所述地址信息开启对应的灯光。

6.根据权利要求1所述的方法，其特征在于，所述定格图像序列中图像排列的顺序通过以下方式进行确定：

根据所述多台实体相机的位置关系确定所述定格图像序列中图像排列的顺序。

7.根据权利要求1所述的方法，其特征在于，在得到定格合成视频后，所述方法还包括：将所述定格合成视频输出为视频文件。

8.根据权利要求1所述的方法，其特征在于，所述将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定格合成视频，包括：获取所述目标虚拟场景的图像序列；所述目标虚拟场景的图像序列由虚拟相机按照与每台实体相机相对应的位姿对所述目标虚拟场景进行多次拍摄得到；

将所述目标对象的图像序列与所述目标虚拟场景的图像序列中的图像对应合成，得到所述定格合成视频。

9.一种视频合成装置，其特征在于，包括：第一获取模块，用于获取实时视频，并从所述实时视频中抠取目标对象的目标实时视频；

第一合成模块，用于将所述目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频；

第二获取模块，用于获取由多台实体相机参考所述实时合成视频所拍摄的定格图像序列，并从所述定格图像序列中抠取目标对象的图像序列，其中所述定格图像序列中所包含的图像来自于所述多台实体相机；

第二合成模块，用于将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定格合成视频。

10.根据权利要求9所述的装置，其特征在于，所述第一合成模块还用于将所述目标虚拟场景的场景标识发送至第二合成模块，使所述第二合成模块根据所述场景标识确定所述目标虚拟场景。

11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至8任一项所述的方法。

12.一种电子设备，其特征在于，包括：处理器；以及

存储器，用于存储所述处理器的可执行指令；

其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1至8任一项所述的方法。

说明书

视频合成方法、装置、存储介质与电子设备

技术领域

[0001] 本公开涉及计算机技术领域，尤其涉及一种视频合成方法、视频合成装置、计算机可读存储介质与电子设备。

背景技术

[0002] 随着计算机技术的不断发展，对于视频所呈现的效果，要求也越来越高。为了满足新奇的视觉体验，各种视频特效手段相继出现，例如：子弹时间，这是一种使用在电影、广告
或游戏中的模拟变速特效，可以实现时间定格的效果。

[0003] 相关技术中，通常采用的是实景拍摄画面，并通过后期软件合成来达到时间定格的效果，实景拍摄对场景要求较高，无法克服场景的限制，难以满足用户的各种需求。

[0004] 需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

[0005] 本公开提供了一种视频合成方法、视频合成装置、计算机可读存储介质与电子设备，旨在解决目标对象在虚拟场景中的实时定格问题，进而至少在一定程度上避免场景受
限问题，给用户带来更新奇的视觉感受。

[0006] 本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

[0007] 根据本公开的第一方面，提供一种视频合成方法，包括：获取实时视频，并从所述实时视频中抠取目标对象的目标实时视频；将所述目标对象的目标实时视频与目标虚拟场
景进行合成，得到实时合成视频；获取由多台实体相机参考所述实时合成视频所拍摄的定
格图像序列，并从所述定格图像序列中抠取目标对象的图像序列，所述定格图像序列是由
多台实体相机所拍摄的图像组成；将所述目标对象的图像序列与所述目标虚拟场景进行合
成，得到定格合成视频。

[0008] 在本公开的一种示例性实施例中，所述方法还包括：将所述实时合成视频以及所述定格合成视频发送给显示设备，以将所述实时合成视频以及所述定格合成视频进行显
示。

[0009] 在本公开的一种示例性实施例中，所述显示设备包括第一显示设备和第二显示设备，所述将所述实时合成视频以及所述定格合成视频发送给显示设备，包括：将所述实时合
成视频发送给第一显示设备；将所述定格合成视频发送给第二显示设备。

[0010] 在本公开的一种示例性实施例中，所述方法还包括：将灯光信号发送给灯光控制器，使所述灯光控制器采用所述灯光信号控制所述现场的灯光。

[0011] 在本公开的一种示例性实施例中，所述灯光信号包括灯光的地址信息，用于使所述灯光控制器根据所述地址信息开启对应的灯光。

[0012] 在本公开的一种示例性实施例中，所述方法还包括：根据所述多台实体相机的位置关系确定所述定格图像序列中图像排列的顺序。

[0013] 在本公开的一种示例性实施例中，所述方法还包括：将所述定格合成视频输出为视频文件。

[0014] 在本公开的一种示例性实施例中，所述将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定格合成视频，包括：获取所述目标虚拟场景的图像序列；所述目标
虚拟场景的图像序列由虚拟相机按照与每台实体相机相对应的位姿对所述目标虚拟场景
进行多次拍摄得到；将所述目标对象的图像序列与所述目标虚拟场景的图像序列中的图像
对应合成，得到所述定格合成视频。

[0015] 根据本公开的第二方面，提供一种视频合成装置，包括：第一获取模块，用于获取实时视频，并从所述实时视频中抠取目标对象的目标实时视频；第一合成模块，用于将所述
目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频；第二获取模块，用
于获取由多台实体相机参考所述实时合成视频所拍摄的定格图像序列，并从所述定格图像
序列中抠取目标对象的图像序列；第二合成模块，用于将所述目标对象的图像序列与所述
目标虚拟场景进行合成，得到定格合成视频。

[0016] 在本公开的一种示例性实施例中，所述第一合成模块还用于将所述目标虚拟场景的场景标识发送至第二合成模块，使所述第二合成模块根据所述场景标识确定所述目标虚
拟场景。

[0017] 根据本公开的第三方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述视频合成方法。

[0018] 根据本公开的第四方面，提供一种电子设备，包括：处理器；以及存储器，用于存储所述处理器的可执行指令；其中，所述处理器配置为经由执行所述可执行指令来执行上述
视频合成方法。

[0019] 本公开的技术方案具有以下有益效果：

[0020] 上述视频合成方法中，将所述目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频，将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定
格合成视频。一方面，能够对目标对象在虚拟场景中的位姿信息进行实时预览，使得用户能
够确定所需合成的定格画面，进而合成所需的定格合成视频，给用户带来更新奇的视觉感
受。另一方面，采用虚拟场景进行合成，有利于场景的选择和切换，能够避免场景的限制，使
得用户可以根据需要选取合适的目标虚拟场景，进而满足用户的多样化需求。

[0021] 应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

[0022] 此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施方式，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公
开的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以
根据这些附图获得其他的附图。

[0023] 图1示出本示例性实施方式中运行环境的系统架构图；

[0024] 图2示出本示例性实施方式中一种视频合成方法的流程图；

[0025] 图3示出本示例性实施方式中一种合成定格合成视频的流程图；

[0026] 图4示出本示例性实施方式中一种视频合成方法的实例图；

[0027] 图5示出本示例性实施方式中一种视频合成装置的结构框图；

[0028] 图6示出本示例性实施方式中一种用于实现上述方法的电子设备。

具体实施方式

[0029] 现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加
全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结
构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中，提供许
多具体细节从而给出对本公开的实施方式的充分理解。然而，本领域技术人员将意识到，可
以实践本公开的技术方案而省略所述特定细节中的一个或更多，或者可以采用其它的方
法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知技术方案以避免喧宾夺主而
使得本公开的各方面变得模糊。

[0030] 此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功
能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功
能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处
理器装置和/或微控制器装置中实现这些功能实体。

[0031] 本文中，“第一”、“第二”等是对特定对象的标记，而并非限定对象的数量或次序。

[0032] 相关技术中所采用的实景拍摄手法，难以满足用户的各种需求，例如用户所要合成的场景无法通过搭建实现、用户想要更换场景等，缺乏一种获取目标对象在虚拟场景中
的视频合成方法，以实现时间定格特效。

[0033] 鉴于上述一个或多个问题，本公开的示例性实施方式提供一种视频合成方法和视频合成装置，可应用于电影、广告或游戏等特效制作场景中。

[0034] 首先对该视频合成方法和视频合成装置运行环境的系统架构进行说明。参考图1所示，该系统架构100可以包括：摄像机110、合成引擎120、多台实体相机130。其中，摄像机
110用于对目标对象进行拍摄，得到实时视频，并将实时视频发送给合成引擎120进行处理。
多台实体相机130用于对目标对象进行拍照，得到定格图像序列，并将定格图像序列发送给
合成引擎120进行处理，图1中实体相机的数量仅仅是示意性的，根据实现需要，可以设置任
意数目的实体相机。合成引擎120主要用来对实时视频进行抠像并合成，以得到实时合成视
频，对定格图像序列进行抠像并合成，以得到定格合成视频，可以是台式电脑、笔记本电脑
等具有数据处理能力的设备。

[0035] 下面结合图2，对本示例性实施方式的视频合成方法做具体说明。需要说明的是，本示例性实施方式所提供的视频合成方法可以由合成引擎130来执行。

[0036] 图2示出了本示例性实施方式中视频合成方法的示意性流程，包括以下步骤S210至S240：

[0037] 步骤S210，获取实时视频，并从实时视频中抠取目标对象的目标实时视频；

[0038] 步骤S220，将目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频；

[0039] 步骤S230，获取由多台实体相机参考实时合成视频所拍摄的定格图像序列，并从定格图像序列中抠取目标对象的图像序列；

[0040] 步骤S240，将目标对象的图像序列与目标虚拟场景进行合成，得到定格合成视频。

[0041] 上述视频合成方法中，将所述目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频，将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定
格合成视频。一方面，能够对目标对象在虚拟场景中的位姿信息进行实时预览，使得用户能
够确定所需合成的定格画面，进而合成所需的定格合成视频，给用户带来更新奇的视觉感
受。另一方面，采用虚拟场景进行合成，有利于场景的选择和切换，能够避免场景的限制，使
得用户可以根据需要选取合适的目标虚拟场景，进而满足用户的多样化需求。

[0042] 步骤S210，获取实时视频，并从实时视频中抠取目标对象的目标实时视频。

[0043] 实时视频指的是关于目标对象的现场视频，可以在摄像机拍摄过程中实时获取。此外，摄像机可以在绿幕背景下对目标背景进行拍摄，无需额外选景或布景，以便后续进行
抠取操作。目标对象可以是人、动物、物体等对象，可以是静态的对象，也可以是动态的对
象。目标对象的目标实时视频指的是从实时视频中所抠取的关于目标对象的视频，不包含
目标对象的背景。

[0044] 需要说明的是，可以将摄像机所拍摄的视频信号通过SDI(Serial Digital Interface Video Capture Card，串行数字接口)信号采集卡接入合成引擎，以通过SDI信
号采集卡以实现实时视频从摄像机到合成引擎的传输。

[0045] 步骤S220，将目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频。

[0046] 目标虚拟场景指的是用于合成的三维虚拟场景，可以从多个虚拟场景中进行选择所需的目标虚拟场景。实时合成视频指的是目标对象的目标实时视频与目标虚拟场景进行
合成后的视频，可以实时获取到目标对象在目标虚拟场景中的位姿信息。

[0047] 在一种可选的实施方式中，获取场景标识；根据场景标识确定目标虚拟场景。

[0048] 可以为每一个虚拟场景设置一个唯一的场景标识，该场景标识用于区分各虚拟场景。用户可以通过选择场景标识，控制合成引擎调用与场景标识相对应的目标虚拟场景。

[0049] 需要说明的是，用户可以直接在合成引擎对目标场景标识进行选取，由合成引擎读取用户选择的场景标识。用户也可以通过专门的控制设备选择场景标识，由控制设备将
选择的场景标识发送给合成引擎，合成引擎接收到控制设备发送的场景标识，这里的控制
设备可以是智能移动设备，如手机，用以实现对目标虚拟场景的远程控制。

[0050] 步骤S230，获取由多台实体相机参考实时合成视频所拍摄的定格图像序列，并从定格图像序列中抠取目标对象的图像序列。

[0051] 定格图像序列由某一时刻目标对象的多个角度图像组成，这些图像来自于多台实体相机。目标对象的图像序列指的是从定格图像序列中所抠取的关于目标对象的图像序
列，不包含目标对象的背景。通过观看实时合成视频，用户可以清楚的知道目标对象在虚拟
场景中的位置、大致画面效果等信息，以便确定多台实体相机所要拍摄的定格图像序列。

[0052] 在一种可选的实施方式中，定格图像序列可以通过以下方式进行生成：给每个实体相机进行编号，将每个实体相机按照编号依次进行摆放，并以编号命名拍摄的图像名称，
形成固有格式的序列图。

[0053] 上述过程通过编号形式统一了图像格式，使得实体相机所拍摄的图像能够进行自动排序，从而避免实体相机所拍摄的图像排列混乱，影响到最终形成的定格合成视频的效
果。

[0054] 在一种可选的实施方式中，定格图像序列中图像排列的顺序可以通过以下方式进行确定：根据多台实体相机的位置关系确定定格图像序列中图像排列的顺序。

[0055] 多台实体相机的位置可以呈现圆形、半圆形、直线形等状态，具体可以根据用户所要呈现的效果进行摆放。多台相机的位置关系，可例如上、下、左、右等位置关系。例如有4台
实体相机呈直线形状态摆放，分别为1号相机、2号相机、3号相机以及4号相机，这4台相机的
位置关系为：1号相机位于2号相机的左边、2号相机位于3号相机的左边、3号相机位于4号相
机的左边，将1号相机所拍摄的图像、2号相机所拍摄的图像、3号相机所拍摄的图像以及4号
相机所拍摄的图像依次进行排列得到定格图像序列。根据位置关系确定图像的排列顺序，
能够使得使用该图像序列所合成的定格合成视频在视觉上是连贯的、顺畅的。

[0056] 步骤S240，将目标对象的图像序列与目标虚拟场景进行合成，得到定格合成视频。

[0057] 定格合成视频指的是目标对象的图像序列与目标虚拟场景合成后的视频，可以获取到某一时刻目标对象在虚拟场景中的多个角度画面。

[0058] 在一种可选的实施方式中，可以通过如图3所示的步骤将目标对象的图像序列与目标虚拟场景进行合成，得到定格合成视频，具体包括以下步骤S310至步骤S320：

[0059] 步骤S310，获取目标虚拟场景的图像序列；目标虚拟场景的图像序列由虚拟相机按照与每台实体相机相对应的位姿对目标虚拟场景进行多次拍摄得到；

[0060] 上述每台相机对应的位姿指的是，相机的摆放位置、拍摄角度等信息。可以在合成引擎中设置一个虚拟相机，用于获取目标虚拟场景的图像序列，合成引擎根据每台实体相
机的位姿对目标虚拟场景进行多次拍摄得到，虚拟相机具体的拍摄顺序可以由多台实体相
机的位置关系进行确定，也可以由定格图像序列或目标虚拟场景的图像序列中图像的排列
顺序进行确定，以确保所获取图像序列与目标对象的序列中的图像相互对应。

[0061] 步骤S320，将目标对象的图像序列与目标虚拟场景的图像序列中的图像对应合成，得到定格合成视频。

[0062] 该过程将图像序列与目标对象的序列中的图像对应合成，得到合成后的图像序列，并将该合成后的图像序列生成定格合成视频。

[0063] 图3所示的步骤将虚拟相机与每一台实体相机的位姿进行对应，可以获取到三维目标虚拟场景的图像序列，将目标对象的图像序列与三维的目标虚拟场景的图像序列进行
合成，以使目标对象更好的融入到三维目标虚拟场景中，使得最终生成的定格合成视频从
视觉角度上更加真实。

[0064] 在一种可选的实施方式中，还可以将实时合成视频以及定格合成视频发送给显示设备，以将实时合成视频以及定格合成视频进行显示。

[0065] 显示设备可例如：电视屏幕、投影仪、电脑显示屏等具有显示功能的设备，以便对合成的视频进行预览。此外，显示设备还可以是上述提到的控制设备，以实现实时的远程预
览。

[0066] 在一种可选的实施方式中，显示设备可以包括第一显示设备和第二显示设备，将实时合成视频以及定格合成视频发送给显示设备，可以通过以下方式来实现：将实时合成
视频发送给第一显示设备；将定格合成视频发送给第二显示设备。

[0067] 上述过程将实时合成视频以及定格合成视频在不同显示设备上进行显示，有利于多人员协作进行视频合成，由不同人员对不同的显示设备进行监视，确保所合成的视频效
果，可应用于多人员协同制作视频的场景。

[0068] 在一种可选的实施方式中，还可以将实时合成视频以及定格合成视频发送给同一台显示设备。

[0069] 在同一台显示设备上对实时合成视频以及定格合成视频进行分屏显示，可应用于个人制作视频的场景。

[0070] 需要说明的是，上述定格合成视频发送给显示设备时，可以将定格合成视频以视频流的形式发送给显示设备以进行预览。

[0071] 在一种可选的实施方式中，还可以将定格合成视频输出为视频文件。

[0072] 将定格合成视频输出为文件的形式，以便于将该定格合成视频与其他用户进行分享。

[0073] 在一种可选的实施方式中，可以获取提前为目标虚拟场景配置相应的灯光信号，将该灯光信号发送给灯光控制器，使灯光控制器采用灯光信号控制现场的灯光。

[0074] 灯光信号指的是虚拟场景的灯光信息，可以为不同的虚拟场景设置不同的灯光信息，当目标场景虚拟场景被切换时，灯光信息也会发生相应的改变，使得所拍摄的目标对象
在进行合成后能够更真实的融入到虚拟场景，使得合成的视频更加逼真。

[0075] 在一种可选的实施方式中，可以将灯光信号所采用的协议转换为预设协议，统一灯光信号所采用的协议，以防合成引擎所发送的灯光信号不能与现场的灯光进行通信，进
而无法控制现场的灯光。

[0076] 例如，当合成引擎所发送的灯光信号所采用的协议是Art‑net协议，该协议无法直接与线程灯光进行通信，需要先将灯光信号的Art‑net协议转换为DMX512协议后，再发送给
灯光控制台，灯光控制台根据所发送的灯光信号将具体控制指令信息发送给现场的灯光，
以对现场的灯光进行控制。

[0077] 需要说明的是，上述Art‑net协议是一种基于TCP/IP协议栈的以太网协议，目的在于使用标准的网络技术允许在广域内传递大量DMX512数据。DMX512协议是一种数据调光协
议，给出了一种灯光控制器与灯具设备之间通信的协议标准。

[0078] 在一种可选的实施方式中，灯光信号包括灯光的地址信息，用于使灯光控制器根据地址信息开启对应的灯光。

[0079] 灯光信号可以包括灯光的地址信息，灯光的地址信息指的是灯光的IP(Internet Protocol，互联网协议)地址，每个灯光都有固定且唯一的IP地址。通过灯光信号所包含的
灯光的IP地址可以确定所要控制的灯光。

[0080] 图4提供了一种视频合成方法的实例图，将视频合成过程中所涉及到的设备进行了整合，通过3个合成引擎协同操作完成，以减轻单个合成引擎的处理压力。

[0081] 其中，控制设备410对第一合成引擎420进行控制，将控制操作信息发送给第一合成引擎420，以控制第一合成引擎420选择目标虚拟场景，控制操作信息可以包括目标虚拟
场景所对应的场景标识。摄像机430将拍摄的实时视频发送给第一合成引擎420。由第一合
成引擎420从实时视频中抠取目标对象的视频，将目标对象的视频与目标虚拟场景进行合
成，并将得到的实时合成视频发送给第一显示设备440或控制设备410进行预览。此外，第一
合成引擎420还将场景确认数据发送给第二合成引擎450和第三合成引擎460，将目标虚拟
场景在第二合成引擎450和第三合成引擎460上进行同步，场景确认数据包括目标虚拟场景
所对应的场景标识。多台实体相机470将拍摄得到的图像序列生成定格图像序列，并发送给
第二合成引擎450。由第二合成引擎450从定格图像序列中抠取目标对象的图像序列，将目
标对象的图像序列与目标虚拟场景进行合成，并将得到的定格合成视频发送给第二显示设
备480进行预览。第三合成引擎460获取多台实体相机470的定格图像序列，从定格图像序列
中抠取目标对象的图像序列，将目标对象的图像序列与目标虚拟场景进行合成，并将得到
的定格合成视频生成视频文件。现场灯光490由第一合成引擎420所发送的灯光信号来控
制。

[0082] 本公开的示例性实施方式还提供一种视频合成装置。如图5所示，该视频合成装置500可以包括：

[0083] 第一获取模块510，用于获取实时视频，并从所述实时视频中抠取目标对象的目标实时视频；

[0084] 第一合成模块520，用于将所述目标对象的目标实时视频与目标虚拟场景进行合成，得到实时合成视频；

[0085] 第二获取模块530，用于获取由多台实体相机参考实时合成视频所拍摄的定格图像序列，并从所述定格图像序列中抠取目标对象的图像序列；

[0086] 第二合成模块540，用于将所述目标对象的图像序列与所述目标虚拟场景进行合成，得到定格合成视频。

[0087] 在一种可选的实施方式中，视频合成装置500，还包括显示模块：用于将实时合成视频以及定格合成视频发送给显示设备，以将实时合成视频以及定格合成视频进行显示。

[0088] 在一种可选的实施方式中，显示设备包括第一显示设备和第二显示设备，显示模块可以被配置为：将实时合成视频发送给第一显示设备；将定格合成视频发送给第二显示
设备。

[0089] 在一种可选的实施方式中，视频合成装置500，还包括灯光控制模块：用于将灯光信号发送给灯光控制器，使灯光控制器采用灯光信号控制现场的灯光。

[0090] 在一种可选的实施方式中，灯光控制模块中的灯光信号包括灯光的地址信息，用于使灯光控制器根据地址信息开启对应的灯光。

[0091] 在一种可选的实施方式中，第二获取模块530，还被配置为：根据多台实体相机的位置关系确定定格图像序列中图像排列的顺序。

[0092] 在一种可选的实施方式中，视频合成装置500，还包括输出模块：用于将定格合成视频输出为视频文件。

[0093] 在一种可选的实施方式中，第二合成模块540，还被配置为：获取目标虚拟场景的图像序列；目标虚拟场景的图像序列由虚拟相机按照与每台实体相机相对应的位姿对目标
虚拟场景进行多次拍摄得到；将目标对象的图像序列与目标虚拟场景的图像序列中的图像
对应合成，得到定格合成视频。

[0094] 在一种可选的实施方式中，第一合成模块520，还被配置为：将目标虚拟场景的场景标识发送至第二合成模块，使第二合成模块根据场景标识确定目标虚拟场景。

[0095] 需要说明的是，这里的场景标识用于同步第一合成模块和第二合成模块中所采用的目标虚拟场景。当这第一合成模块和第二合成模块在不同设备上执行时，能够确保这两
个模块所采用的虚拟场景信息相同。

[0096] 上述视频合成装置500中各部分的具体细节在方法部分实施方式中已经详细说明，未披露的细节内容可以参见方法部分的实施方式内容，因而不再赘述。

[0097] 本公开的示例性实施方式还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述视频合成方法的程序产品。在一些可能的实施方式中，本公开的各个方面
还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在电子设备上运行时，程
序代码用于使电子设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示
例性实施方式的步骤。该程序产品可以采用便携式紧凑盘只读存储器(CD‑ROM)并包括程序
代码，并可以在电子设备，例如个人电脑上运行。然而，本公开的程序产品不限于此，在本文
件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、
装置或者器件使用或者与其结合使用。

[0098] 程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导
体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列
表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储
器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD‑
ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

[0099] 计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、
光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介
质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其
结合使用的程序。

[0100] 可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。

[0101] 可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码，程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程
式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算
设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备
上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计
算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网
(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商
来通过因特网连接)。

[0102] 本公开的示例性实施方式还提供了一种能够实现上述视频合成方法的电子设备。下面参照图6来描述根据本公开的这种示例性实施方式的电子设备600。图6显示的电子设
备600仅仅是一个示例，不应对本公开实施方式的功能和使用范围带来任何限制。

[0103] 如图6所示，电子设备600可以以通用计算设备的形式表现。电子设备600的组件可以包括但不限于：至少一个处理单元610、至少一个存储单元620、连接不同系统组件(包括
存储单元620和处理单元610)的总线630和显示单元640。

[0104] 存储单元620存储有程序代码，程序代码可以被处理单元610执行，使得处理单元610执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步
骤。例如，处理单元610可以执行图2至图3中任意一个或多个方法步骤。

[0105] 存储单元620可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)621和/或高速缓存存储单元622，还可以进一步包括只读存储单元(ROM)623。

[0106] 存储单元620还可以包括具有一组(至少一个)程序模块625的程序/实用工具624，这样的程序模块625包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及
程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

[0107] 总线630可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构
的局域总线。

[0108] 电子设备600也可以与一个或多个外部设备700(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备600交互的设备通信，和/或与使得
该电子设备600能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调
器等等)通信。这种通信可以通过输入/输出(I/O)接口650进行。并且，电子设备600还可以
通过网络适配器660与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，
例如因特网)通信。如图所示，网络适配器660通过总线630与电子设备600的其它模块通信。
应当明白，尽管图中未示出，可以结合电子设备600使用其它硬件和/或软件模块，包括但不
限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及
数据备份存储系统等。

[0109] 通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开
实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失
性存储介质(可以是CD‑ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算
设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开示例性实施
方式的方法。

[0110] 此外，上述附图仅是根据本公开示例性实施方式的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺
序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

[0111] 应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的示例性实施方式，上文描述的两个
或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的
一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

[0112] 所属技术领域的技术人员能够理解，本公开的各个方面可以实现为系统、方法或程序产品。因此，本公开的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完
全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统
称为“电路”、“模块”或“系统”。本领域技术人员在考虑说明书及实践这里公开的发明后，将
容易想到本公开的其他实施方式。本申请旨在涵盖本公开的任何变型、用途或者适应性变
化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技
术领域中的公知常识或惯用技术手段。说明书和实施方式仅被视为示例性的，本公开的真
正范围和精神由权利要求指出。

[0113] 应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限定。