显示设备和显示方法转让专利

申请号 : CN201510125908.X

文献号 : CN104954667B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 佐藤明伸福谷佳之野中修

申请人 : 奥林巴斯株式会社

摘要 :

本发明提供显示设备和显示方法,该显示设备能够针对同一被摄体,切换地显示从第1视点拍摄得到的第1摄像图像和从与所述第1视点不同的第2视点拍摄得到的第2摄像图像,所述显示设备具有:通信部,其分别与第1摄像部和第2摄像部之间进行信号传输,其中,所述第1摄像部得到上述第1摄像图像,所述第2摄像部从与上述第1摄像部的光轴的角度不同的角度拍摄得到上述第2摄像图像;指示输入部,其输入如下指示:从由上述第1摄像部得到的上述第1摄像图像和由上述第2摄像部得到的上述第2摄像图像中选择作为显示对象的图像;以及显示控制部,其基于上述指示输入部的指示,使上述第1摄像图像的显示和上述第2摄像图像的显示协调地切换。

权利要求 :

1.一种显示设备,其能够针对同一被摄体,切换地显示从第1视点拍摄得到的第1摄像图像和从与所述第1视点不同的第2视点拍摄得到的第2摄像图像,其特征在于,所述显示设备具有:通信部,其分别与第1摄像部和第2摄像部之间进行信号传输,其中,所述第1摄像部得到所述第1摄像图像,所述第2摄像部从与所述第1摄像部的光轴的角度不同的角度拍摄得到所述第2摄像图像;

指示输入部,其输入如下指示:从由所述第1摄像部得到的所述第1摄像图像和由所述第2摄像部得到的所述第2摄像图像中选择作为显示对象的图像;

显示控制部,其基于所述指示输入部的指示,使所述第1摄像图像的显示和所述第2摄像图像的显示协调地切换;

控制部,其对所述第1摄像部或第2摄像部进行设定摄像视场角的指示;以及切换指示输入部,其用于在显示有所述第1摄像图像和所述第2摄像图像中的一方的图像的情况下,输入用于选择另一方的图像作为显示对象的指示,在产生了用于选择所述另一方的图像作为显示对象的指示的情况下,所述显示控制部在同时显示所述一方的图像和另一方的图像后,仅显示所述另一方的图像,其中,在利用所述显示控制部同时显示所述一方的图像和另一方的图像的期间内,所述控制部控制所述第

1摄像部或第2摄像部的视场角,使得所述一方的图像和另一方的图像的尺寸相同。

2.根据权利要求1所述的显示设备,其中,

所述控制部还控制在所述第1摄像图像与所述第2摄像图像之间切换显示前后的所述第1摄像部和所述第2摄像部的摄影定时中的至少一方,并且,从所述第1摄像部取得与所述第1摄像部的摄像相关的第1信息或从所述第2摄像部取得与所述第2摄像部的摄像相关的第2信息,进行所述摄影定时的控制。

3.根据权利要求1所述的显示设备,其中,

所述控制部还从所述第1摄像部取得与所述第1摄像部的摄像相关的第1信息,并且从所述第2摄像部取得与所述第2摄像部的摄像相关的第2信息,根据这些第1信息和第2信息判定是否所述第1摄像部和所述第2摄像部均能够拍摄所述被摄体,所述显示控制部进行基于所述控制部的判定结果的显示。

4.根据权利要求3所述的显示设备,其中,

所述第1信息是距所述被摄体的距离的信息,

所述第2信息是视场角信息,

所述控制部根据所述距离信息和视场角信息,判定适合于摄影的视场角,进行变更为所判定出的视场角的指示。

5.根据权利要求4所述的显示设备,其中,

所述控制部基于所述判定的结果,设定所述第1摄像部或所述第2摄像部的视场角的调整量,以利用所述第1摄像部和所述第2摄像部同时拍摄所述被摄体。

6.根据权利要求1所述的显示设备,其中,

所述通信部与所述第1摄像部和所述第2摄像部之间以分时方式进行信号传输。

7.根据权利要求1所述的显示设备,其中,

所述第1摄像部和所述第2摄像部中的一方由内置在便携终端中的内置照相机构成,另一方由设置在所述便携终端的外部的照相机构成。

8.根据权利要求1所述的显示设备,其中,

所述控制部在初始状态下将所述第1摄像部和所述第2摄像部的摄像视场角设定为最大。

9.一种显示方法,针对同一被摄体,切换地显示从第1视点拍摄得到的第1摄像图像和从与所述第1视点不同的第2视点拍摄得到的第2摄像图像,在该显示方法中,分别与第1摄像部和第2摄像部之间进行信号传输,其中,所述第1摄像部得到所述第1摄像图像,所述第2摄像部从与所述第1摄像部的光轴的角度不同的角度拍摄得到所述第2摄像图像;

对所述第1摄像部或第2摄像部进行设定摄像视场角的指示;

按照选择所述第1摄像图像和所述第2摄像图像中一方的图像作为显示对象图像的指示,从所述第1摄像部接收所述第1摄像图像,显示所述一方的图像;

在所述一方的图像的显示过程中,按照选择所述第1摄像图像和所述第2摄像图像中的另一方的图像作为显示对象图像的指示,从所述第2摄像部接收所述第2摄像图像,同时显示所述一方的图像和另一方的图像,然后仅显示所述另一方的图像,其中,在进行所述同时显示所述一方的图像和另一方的图像的期间内,控制所述第1摄像部或第2摄像部的视场角,使得所述一方的图像和另一方的图像的尺寸相同。

10.根据权利要求9所述的显示方法,其中,

从所述第1摄像部取得与所述第1摄像部的摄像相关的第1信息,并且从所述第2摄像部取得与所述第2摄像部的摄像相关的第2信息,判定是否由所述第1摄像部和所述第2摄像部同时拍摄到所述被摄体,进行基于所述判定的结果的显示。

说明书 :

显示设备和显示方法

技术领域

[0001] 本发明涉及显示来自多个摄像部的图像的显示设备和显示方法。

背景技术

[0002] 近年来,数字照相机等带摄影功能的便携设备(摄影设备)得到普及。在这种摄影设备中,有些摄影设备具有显示部,并具有显示摄影图像的功能。此外,还存在如下摄影设备,该摄影设备在显示部中显示菜单图面,使得摄影设备的操作变得容易。这样的显示部大多设置在便携设备主体的背面,用户在进行摄影时,能够确认背面的显示部中显示的实时取景图像而进行摄影操作。
[0003] 在这样的摄影设备中采用的显示设备中,通过图像处理,能够在图像中显示其它图像,或在另外的区域同时显示两个图像。作为这样的取得两个图像的装置,在日本特开2009-147824号公报中提出了如下装置:取得待关注的对象物的影像,并同时取得该对象物的周边的情况,并同时记录关注这些规定的对象物而得到的摄像数据和表示该对象物的周边情况的摄像数据。

发明内容

[0004] 本发明的显示设备能够针对同一被摄体,切换地显示从第1视点拍摄得到的第1摄像图像和从与所述第1视点不同的第2视点拍摄得到的第2摄像图像,其特征在于,所述显示设备具有:通信部,其分别与第1摄像部和第2摄像部之间进行信号传输,其中,所述第1摄像部得到上述第1摄像图像,所述第2摄像部从与上述第1摄像部的光轴的角度不同的角度拍摄得到上述第2摄像图像;指示输入部,其输入如下指示:从由上述第1摄像部得到的上述第1摄像图像和由上述第2摄像部得到的上述第2摄像图像中选择作为显示对象的图像;以及显示控制部,其基于上述指示输入部的指示,使上述第1摄像图像的显示和上述第2摄像图像的显示协调地切换。
[0005] 在本发明的显示方法中,针对同一被摄体,切换地显示从第1视点拍摄得到的第1摄像图像和从与所述第1视点不同的第2视点拍摄得到的第2摄像图像,分别与第1摄像部和第2摄像部之间进行信号传输,其中,所述第1摄像部得到上述第1摄像图像,所述第2摄像部从与上述第1摄像部的光轴的角度不同的角度拍摄得到上述第2摄像图像;按照选择上述第1摄像图像和上述第2摄像图像中一方的图像作为显示对象的图像的指示,从上述第1摄像部接收上述第1摄像图像,显示上述一方的图像;在上述一方的图像的显示过程中,按照选择上述第1摄像图像和上述第2摄像图像中的另一方的图像作为显示对象的图像的指示,从上述第2摄像部接收上述第2摄像图像,同时显示上述一方的图像和另一方的图像,然后仅显示上述另一方的图像。
[0006] 本发明的上述及其他目的、特征、优点通过以下参照附图的说明而变得更加明确。

附图说明

[0007] 图1是示出包含本发明的第1实施方式的显示设备的摄影设备的框图。
[0008] 图2是示出利用装配有两个镜头式照相机的平板PC(个人计算机)来实现本实施方式的例子的电路图。
[0009] 图3是示出图2的外观的说明图。
[0010] 图4A~图4C是用于说明在本实施方式中设想的照相机的配置方法的说明图。
[0011] 图5是用于说明用于适当地控制摄影视场角的设定的说明图。
[0012] 图6是用于说明镜头式照相机11中的照相机控制和平板PC21的控制的流程图。
[0013] 图7A~图7D是示出切换操作和显示画面28a上的显示例的说明图。
[0014] 图8是用于说明视场角调整的说明图。
[0015] 图9是示出在本发明的第2实施方式中采用的动作流程的流程图。
[0016] 图10A~图10D是用于说明迁移时的图像通信的时序图。
[0017] 图11A~图11H是用于说明步骤S45的迁移时的通信的时序图。
[0018] 图12A~图12F是示出即时变更时的动作的时序图。
[0019] 图13是示出本发明的第3实施方式的框图。
[0020] 图14是用于说明第3实施方式的外观的说明图。
[0021] 图15是示出在本发明的第3实施方式中采用的动作流程的流程图。
[0022] 图16A~图16C是用于说明在第3实施方式中进行迁移时的通信的时序图的。

具体实施方式

[0023] 以下,参照附图,对本发明的实施方式进行详细说明。
[0024] (第1实施方式)
[0025] 图1是示出包含本发明的第1实施方式的显示设备的摄影设备的框图,图2是示出利用装配两个镜头式照相机的平板PC(个人计算机)来实现本实施方式的例子的电路图。图3是示出图2的外观的说明图。此外,也可以替代平板PC而采用智能手机或便携电话。此外,在图2中,示出了采用外置在平板PC上的2台镜头式照相机作为两个摄像部的例子,但作为两个摄像部,例如,也可以采用内置在平板PC中的内置照相机和外置在平板PC上的镜头式照相机。
[0026] 在图1中,摄像部2、3具有未图示的摄像元件,能够从相互不同的视点进行被摄体的摄像。照相机控制部1具有控制摄像部2、3的摄像的控制调整部1a。控制调整部1a能够控制摄像部2、3的摄影条件设定部2a、3a和摄影定时设定部2b、3b,来控制摄像部2、3的摄像。摄像部2、3的摄影条件设定部2a、3a进行各种摄影条件的设定。此外,摄像部2、3的摄影定时设定部2b、3b进行取得各帧的定时等摄影定时的设定。
[0027] 照相机控制部1可由未图示的CPU等处理器构成,也可按照未图示的存储器中存储的程序进行动作。照相机控制部1具有显示控制部1b。显示控制部1b能够单独或同时显示摄像部2、3拍摄到的摄像图像。在本实施方式中,有时希望从不同的角度来观察同一被摄体,控制调整部1a能够针对用于使摄像部2、3拍摄同一被摄体的视场角控制及显示,进行信息的收集和指示,并且,控制调整部1a能够显示针对用户的警告显示,并进行摄像部2、3的摄影定时等摄影控制,以平稳地进行摄像部2、3的摄像图像的显示的切换。当然,并非必须是同一被摄体。
[0028] 在图2中,镜头式照相机11L、11R分别对应于图1的摄像部2、3。镜头式照相机11L、11R彼此为相同结构,在不区分两者的情况下,称作镜头式照相机11。此外,对于镜头式照相机11L、11R内的相同构成要素,标注相同的标号,在需要区分镜头式照相机11L内的构成要素与镜头式照相机11R内的构成要素的情况下,针对镜头式照相机11L内的构成要素,在标号的末尾标注L,针对镜头式照相机11R内的构成要素,在标号的末尾标注R。这样,在使分体的照相机协作时,需要进行通过某些控制来使摄像定时一致等的工作。
[0029] 平板PC21对应于图1的照相机控制部1。此外,在图2中,示出了由平板PC21构成图1的照相机控制部1的例子,但也可以将照相机控制部1设置在镜头式照相机11中的任意一方。
[0030] 如图3所示,平板PC21的壳体21a上,以拆装自如的方式安装有安装器具32L、32R,在安装器具32L、32R上,分别设置有用于安装镜头式照相机11L、11R的安装部33L、33R。镜头式照相机11L、11R分别在基端侧设置有安装部34L、34R,能够分别以嵌入或拧入等方式将该安装部34L、34R安装到安装器具32L、32R的安装部33L、33R中。
[0031] 在图2中,在平板PC21中设置有照相机用通信部22。此外,在镜头式照相机11中设置有通信部15,平板PC21和镜头式照相机11L、11R构成为能够经由这些通信部22、15相互通信。在平板PC21中设置有显示部28,与图1的显示控制部1b相当的显示控制部27能够使显示部28的显示画面28a(参照图7A)显示来自镜头式照相机11L、11R的摄像图像。
[0032] 在镜头式照相机11L中设置有摄像部12L,该摄像部12L将光学系统12aL收纳在镜筒35L内,在镜头式照相机11R中设置有摄像部12R,该摄像部12R将光学系统12aR收纳在镜筒35R内。光学系统12aR、12aL分别在镜筒35L、35R内具有用于通过对焦动作而设定为对焦(合焦)状态的可动的对焦镜头以及在对焦状态下进行变焦的变焦镜头等。此外,光学系统12a具有驱动这些镜头和光圈的未图示的机构部。
[0033] 在摄像部12中,设置有由CCD或CMOS传感器等构成的未图示的摄像元件,利用光学系统12a将被摄体像引导到摄像元件的摄像面。与图1的摄影条件设定部2a、3a和摄影定时设定部2b、3b相当的控制部13控制光学系统12a的机构部,以对这些对焦镜头、变焦镜头和光圈进行驱动控制。
[0034] 镜头式照相机11的控制部13由CPU等构成,基于来自后述的平板PC21的信号来控制镜头式照相机11的各个部分。摄影控制部13b产生对焦信号、变焦信号和光圈控制信号,对光学系统12a的对焦、变焦和光圈进行驱动控制。此外,摄影控制部13b向摄像元件提供驱动信号,按规定的摄影定时控制被摄体的摄像。由此,摄像部13控制动态图像摄影时和静态图像摄影时的摄影定时。此外,能够从平板PC21指定摄影视场角,视场角控制部13a控制摄像部12,调整摄影视场角。
[0035] 控制部13被提供来自摄像部12的摄像图像,实施规定的图像信号处理、例如颜色调整处理、矩阵转换处理、噪声去除处理或其它各种信号处理,然后将其发送到记录部16进行记录。作为记录部16,例如,可以采用IC存储器。控制部13可以经由通信部15将摄像图像发送给平板PC21。
[0036] 此外,控制部13可以经由通信部15,将变焦镜头、对焦镜头等的镜头状态、光圈状态等与镜头相关的信息发送给平板PC21。在与镜头相关的信息中,包含焦点位置、景深范围等光轴方向上的距离信息。此外,控制部13还可以将与摄影定时相关的信息发送给平板PC21。
[0037] 通信部15可以经由规定的传输线路与设于平板PC21中的照相机用通信部22之间进行通信。作为传输线路,能够采用基于有线和无线的各种传输线路、例如USB(Universal Serial Bus:通用串行总线)缆线或Wifi(Wireless Fidelity:无线保真)等无线LAN的传输线路等。控制部13在与平板PC21之间建立通信时,能够按照平板PC21的控制部25控制摄影,并将摄像图像和与摄影相关的各种信息发送给平板PC21。
[0038] 平板PC21例如具有由CPU等构成的控制部25,控制部25控制平板PC21的各个部分。控制部25经由照相机用通信部22,向镜头式照相机11L、11R的控制部13输出摄像元件的驱动信号,并接收来自镜头式照相机11L、11R的摄像图像。控制部25针对读出的摄像图像进行规定的信号处理,例如颜色调整处理、矩阵转换处理、噪声去除处理或其它各种信号处理。
[0039] 在平板PC21上,还配设有操作部26。操作部26由平板PC21中设置的未图示的开关、键、软键盘等各种操作部构成,操作部26产生基于用户操作操作信号,并将其输出到控制部25。控制部25基于操作信号而控制各部。
[0040] 控制部25能够进行与摄像图像的记录和再现相关的处理。例如,控制部25能够对信号处理后的摄影图像进行压缩记录,将压缩后的摄影图像提供给记录部24进行记录。作为记录部24,例如可以采用IC存储器等各种记录介质,记录部24能够将图像信息和声音信息等记录到记录介质中。
[0041] 显示控制部27执行与显示相关的各种处理。显示控制部27能够从控制部25收到信号处理后的摄影图像,并将其提供给显示部28。显示部28具有LCD等显示画面28a,显示从显示控制部27提供的图像。此外,显示控制部27能够使显示部28的显示画面28a显示各种菜单显示等。控制部25能够读出记录部24中记录的摄像图像并进行解压缩处理。显示控制部27能够将解压缩处理后的摄像图像提供给显示部28,由此进行记录图像的再现。
[0042] 在显示部28的显示画面28a上,设置有未图示的触摸面板。触摸面板能够产生与用户用手指在显示画面28a上指示的位置对应的操作信号。该操作信号被提供给控制部25。由此,在用户在显示画面28a上进行触摸或滑动的情况下,控制部25能够检测出用户的触摸位置、使手指分合的操作(捏合操作)、滑动操作或提供滑动操作而到达的位置、滑动方向、触摸的期间等各种操作,能够执行与用户操作对应的处理。例如,根据触摸操作,进行画面的切换等。
[0043] 此外,显示画面28a被配设为占据平板PC21的壳体21a的例如前表面的大致整个区域,用户在基于镜头式照相机11进行摄影时,能够确认在显示部28的显示画面28a上显示的摄像图像,能够一边确认摄像图像一边进行摄影操作。
[0044] 此外,平板PC21具有剪裁处理部29。剪裁处理部29能够由控制部25指定剪裁范围,对来自镜头式照相机11L、11R的摄像图像进行剪裁后输出。
[0045] 图4A~图4C是用于说明在本实施方式中设想的照相机的配置方法的说明图。图4A、图4C示出了在本实施方式中推荐的照相机的配置方法。关于图4A、图4C的配置,可以通过将图3的安装部33L、33R相互倾斜地设置在平板PC21的壳体21a的背面来实现。
[0046] 图4B示出了如下情况下的例子:镜头式照相机11L、11R的光轴方向均为与平板PC21的壳体21a的背面垂直的方向,光轴彼此平行。
[0047] 在图4B的例子中,镜头式照相机11R的光轴方向上的作为被摄体的花41位于镜头式照相机11R的视场角θR内。另一方面,对于镜头式照相机11L,即使能够拍摄作为光轴方向的光线43方向上的图像,如果视场角θL不是广角,则有时也不能拍摄到距离Lc的位置的花41。
[0048] 与此相对,在图4A的例子中,镜头式照相机11R、11L被配置为光轴朝相互靠拢的方向倾斜,因此,作为被摄体的花41位于镜头式照相机11L、11R的光轴方向上,能够可靠地利用镜头式照相机11L、11R进行摄影。此外,图4C示出了作为被摄体的花41位于镜头式照相机11L、11R这两者的光轴附近的例子。在图4C例子中,在镜头式照相机11L、11R的视场角θR、θL不是广角的情况下,也能够利用者两个镜头式照相机11L、11R来拍摄花41。这样,利用在多个视点拍摄到的图像,能够基于现实而以更富有氛围的方式表现被摄体。
[0049] 在本实施方式中,能够利用两个镜头式照相机11L、11R摄影同一被摄体,平稳地切换来自视点不同的这些镜头式照相机11L、11R的摄像图像并进行摄影。为了实现这样的摄像图像的平稳切换,在本实施方式中,进行摄影辅助,以使用户能够利用各照相机11可靠地拍摄共同的被摄体。例如,控制部25能够控制显示控制部27,判定各照相机11的摄影视场角是否适当,并将其判定结果作为摄影辅助的显示来进行显示。
[0050] 图5是用于说明用于适当地控制摄影视场角的设定的说明图。
[0051] 假设作为被摄体花41a、41b位于镜头式照相机11R的光轴上。
[0052] 镜头式照相机11L被配置为光轴相对于镜头式照相机11R的光轴以斜率θ1倾斜。花41b位于镜头式照相机11L、11R的摄影范围内,能够利用镜头式照相机11L、11R同时拍摄花
41b。另一方面,花41a位于镜头式照相机11L的摄影范围外,不能由镜头式照相机11L拍摄到。利用距镜头式照相机的距离Dmin来定义镜头式照相机11L的摄影范围的极限位置,并求出距离Dmin。
[0053] 设镜头式照相机11R、11L之间的距离为B,则镜头式照相机11R、11L的距光轴彼此的交点的距离Dc1s由Dc1s=B/tanθ1给出。
[0054] 在设镜头式照相机11L的视场角为θc2时,
[0055] Dmin·tan(θ1+θc2)=B成立,因此,极限距离Dmin可由下述(1)式表示。
[0056] Dmin=B/tan(θ1+θc2)···(1)
[0057] 上述(1)式的斜率θ1和距离B是固定的已知的值,该值取决于对镜头式照相机11L、11R安装的安装器具32L、32R。视场角θc2是根据镜头式照相机11L的变焦操作而变化的值,不过,该值是与镜头式照相机11L的视场角控制部13aL的控制对应的值,是控制部25能够掌握的值。
[0058] 控制部25能够根据从镜头式照相机11R提供的信息识别出距被摄体的距离。在距被摄体的距离小于由上述(1)式得到的Dmin时,控制部25能够显示表示在一方的照相机中不能拍摄到被摄体的显示。此外,也可以是,在通过变焦操作能够使Dmin小于距被摄体的距离的情况下,控制部25显示表示该情况的显示。此外,也可以是,在通过变焦操作得到比距被摄体的距离小的距离Dmin的情况下,控制部25强制地控制镜头式照相机11L的视场角,使镜头式照相机11L能够拍摄被摄体。
[0059] 此外,距镜头式照相机11L、11R的距离是以镜头主点为基准求出的,但即使在求出距镜头面或镜头安装面的距离的情况下,误差也相对较小而能够被忽略。此外,关于距离B,即使忽略镜头的长度也没有问题。
[0060] 接下来,参照图6~图8,对这样构成的实施方式的动作进行说明。图6是用于说明镜头式照相机11中的照相机控制和平板PC21的控制的流程图。此外,在图6中,在镜头式照相机11的照相机控制流程与平板PC21的控制流程之间连接的箭头表示通过处理进行通信。此外,图6的照相机控制表示两个照相机11L、11R共同的流程。
[0061] 现在,用户如图4A那样利用2台照相机11L、11R来拍摄共同的被摄体。在该情况下中,在本实施方式中,能够平稳地从来自一方的照相机的摄像图像的显示或记录切换到来自另一方的照相机的摄像图像的显示或记录。图7A~图7D是示出该切换操作和显示画面28a上的显示例的说明图。
[0062] 照相机11L、11R的控制部13在步骤S21中判定是否接通电源。如果电源已被接通,则控制部13判定是否指定了摄影模式(步骤S22)。在指定了摄影模式的情况下,控制部13控制摄像部12来拍摄被摄体。由摄像部12得到的摄像图像被控制部13取入,从而得到实时取景图像(步骤S23)。此外,控制部13在步骤S24中取得焦点位置信息Dp1和视场角信息。
[0063] 另一方面,平板PC21的控制部25在步骤S1中判定是否指定了双相机协作模式。如果指定了双相机协作模式,则控制部25在步骤S2中判定是否处于协作摄影开始时,在处于协作摄影开始时,在步骤S3中,与各照相机11L、11R进行照相机通信,进行各照相机11L、11R的功能和性能的判定,并指定各照相机11L、11R的视场角。此外,也可以在初始设定中将各照相机11L、11R的视场角设定为最大视场角。
[0064] 在步骤S4中,控制部25向照相机11L、11R中的预先设定的照相机或用户指定的照相机请求显示实时取景图像并接收图像。此时,使各照相机的帧率或各帧的定时一致,使它们宛如同一台照相机那样进行动作。当然,平板PC21也可以指定摄影的开始定时或帧率。
[0065] 例如,假设现在如图4A那样,被摄体位于照相机11R的光轴上,控制部25向照相机11R进行实时取景图像的请求。
[0066] 照相机11的控制部13在步骤S25中判定有无通信请求。
[0067] 在从平板PC21产生实时取景图像的通信请求时,接收到请求的照相机11R经由通信部15,将取得的实时取景图像发送给平板PC21(步骤S26)。
[0068] 平板PC21的控制部25将在步骤S4中接收到的实时取景图像发送给显示控制部27进行显示。图7A示出了在该情况下的显示例,在显示部28的显示画面28a上显示有照相机11R的摄像图像51。此外,在显示画面28a上还显示有显示52,显示52表示所显示的摄像图像
51是与照相机11R对应的第1照相机(以下,称作相机1)。此外,以下,将与照相机11L对应的第2照相机称作相机2。
[0069] 接下来,控制部25进行焦点位置信息Dp1或视场角信息等的发送请求。各照相机11L、11R在步骤S27中发送焦点位置信息Dp1和视场角信息。控制部25在接收到焦点位置信息Dp1时,在步骤S6中,判定是否能够利用2台照相机进行同一被摄体的摄像。
[0070] 即,控制部25通过使用了从各照相机11L、11R取得的信息的上述(1)式的运算,判定是否焦点位置信息Dp1小于Dc1s且为Dmin以上、是否焦点位置信息Dp1是否小于Dmin。此外,控制部25还判定焦点位置信息Dp1是否与Dc1s一致。
[0071] 在焦点位置信息Dp1与Dc1s一致的情况下,被摄体位于照相机11L、11R的光轴上,控制部25在步骤S7中在显示画面28a上显示OK显示,该OK显示表示照相机11L、11R中的任意一个的摄像图像均可在画面中央显示。
[0072] 此外,在焦点位置信息Dp1小于Dc1s且为Dmin以上的情况下,控制部25使显示控制部27显示表示如下情况的显示(警告1):照相机11L、11R中均拍摄到被摄体,但在一方的照相机11L中,被摄体未显示在画面中央。此外,在焦点位置信息Dp1小于Dmin的情况下,控制部25使显示控制部27显示表示如下情况的显示(警告2):在照相机11L中未拍摄到被摄体。
[0073] 控制部25在显示警告1的情况下,还可以在步骤S7中根据焦点位置信息Dp1进行剪裁,将被摄体控制为在画面中央显示。
[0074] 接下来,控制部25在步骤S8中,判定是否发生了照相机切换操作。图7A示出了用于进行该照相机切换操作的切换按钮显示53。
[0075] 此外,在该情况下,在切换按钮显示53中,显示有用于选择照相机11L的图像“相机2确认”的文字。用户用手指54触摸切换按钮显示53的显示位置,由此,控制部25能够判断为产生了照相机切换操作。
[0076] 在进行了照相机切换操作的情况下,向不是输出当前显示的实时取景图像的照相机的、另外的照相机进行实时取景图像的请求(步骤S9)。即,在该情况下,向照相机11L请求实时取景图像。
[0077] 针对实时取景图像的请求,照相机11L将摄像中的图像作为实时取景图像发送给平板PC21。平板PC21在接收到实时取景图像时,利用显示控制部27在显示画面28a上显示。
[0078] 图7B、图7C示出了在该情况下中的2个画面显示的变化的情况。在显示画面28a上,同时显示由照相机11R得到摄像图像55a和由照相机11L得到摄像图像56a。此外,在这些图像55a、56a的附近还显示有相机1和相机2的显示,以表示这些摄像图像是由照相机11R、11L得到的。图7B示出了刚从照相机11R切换到照相机11L后的状态,与来自照相机11L的摄像图像56a相比,来自照相机11R的摄像图像55a的尺寸较小。
[0079] 如图7C所示,控制部25通过控制照相机11L的视场角,使得来自照相机11R、照相机11L的摄像图像55b、56b的尺寸变为相同程度。
[0080] 图8是用于说明在该情况下中的视场角调整的说明图。
[0081] 图8的上侧示出了如下情况:照相机11R经由镜头62R将来自作为被摄体花41的光学像取入到摄像元件61R的入射面。此外,图8的下侧示出了如下情况:照相机11L经由镜头62L,将来自花41的光学像取入到摄像元件61L的入射面。设花41的尺寸为H、距被摄体的距离为D、摄像元件61R、61L的长度为S、摄像元件61R的焦点距离为F1、摄像元件61L的焦点距离为F2来进行说明。
[0082] 设在照相机11R中,花41的光学像成像在摄像元件61R的摄像面上的长度l1的范围中。此外,设在照相机11L中,花41的光学像成像在摄像元件61L的摄像面上的长度l2的范围中。l1由l1=H×F1/D给出。此外,l2由l2=H×F2/D给出。因此,以使得花41的光学像成像在摄像元件61L的长度S的F2/F1的范围内的方式调节视场角,由此,由照相机11R、11L得到的图像的尺寸变得相同。通过这样的设计,消除了拍摄1个被摄体时的不连续感,用户的确认变得容易而没有勉强感。即使在进行动态摄影的情况下,也能够防止手抖动等,得到流畅的迁移效果。
[0083] 接下来,如图7D所示,控制部25在显示画面28a的整个区域中显示来自照相机11L的摄像图像57。此外,在显示画面28a上还显示有显示52,该显示52表示所显示的摄像图像51是与照相机11L对应的相机2。此外,还显示有用于照相机切换操作的切换按钮显示53。此外,在该情况下,在切换按钮显示53中,显示有用于选择照相机11R的图像的“相机1确认”的文字。
[0084] 在接下来的步骤S11中,控制部25判定是否产生了摄影指示。
[0085] 在存在摄影指示的情况下,向输出当前显示的摄像图像的照相机发出摄影请求。在该情况下,向照相机11L发出摄影请求,当在步骤S28中检测到产生了用于摄影的通信时,照相机11L的控制部13L在步骤S29中进行摄影并将摄像图像发送给平板PC21。平板PC21的控制部25将从照相机11L发送的摄像图像提供给记录部24进行记录。
[0086] 此外,照相机11在从平板PC21的控制部25接收到用于视场角调整的控制信号时,将处理从步骤S30转移到步骤S31,进行调整到指定的视场角的变焦处理。
[0087] 这样,在本实施方式中,在利用视点不同的两个摄像部来拍摄同一被摄体的情况下,例如能够进行向用户提示用于得到合适视场角的信息、或自动调整视场角和剪裁等的摄影辅助,使得用户能够可靠地利用各摄像部拍摄共同的被摄体。此外,还能够在平稳地切换来自视点不同的这些摄像部的摄像图像的同时进行摄影。
[0088] (第2实施方式)
[0089] 图9是示出在本发明的第2实施方式中采用的动作流程的流程图。本实施方式中的硬件结构与图2相同。图9是用于说明镜头式照相机11中的照相机控制和平板PC21的控制的图,在图9中,对于与图6相同的步骤,标注同一编号而省略说明。
[0090] 有时在镜头式照相机11L、11R与平板PC21之间的通信中采用Wifi等。在平板PC21的通信部仅能确保1个系统的通信线路的情况下,平板PC21需要以分时方式与各镜头式照相机11L、11R进行通信。在该情况下,如图7A~图7D所示,在从一方的照相机的摄像图像切换到另一方的照相机的摄像图像时,会产生不显示图像的期间或在图像中产生不连续。在本实施方式中,例如通过控制摄影定时等,使得即使在这样的情况下,也能够平稳地切换图像。
[0091] 在图9的步骤S41中,判定是否处于画面迁移中。例如,如图7B、图7C那样,将在从一方的摄像图像向另一方的摄像图像切换的中途而显示有双方的图像的状态判定为迁移中。在仅显示来自一方的照相机的摄像图像的情况下,不会特别产生问题,因此,使处理返回到步骤S1。在发生图像的迁移的情况下,需要考虑切换图像时的通信方法。
[0092] 图10A~图10D是用于说明使显示图像迁移的时的图像通信的时序图。在图10A~图10D中,高电平(H)期间表示进行通信,低电平(L)期间表示不进行通信。具体而言,图10A示出了与相机1的通信期间,图10B示出了与相机2的通信期间。此外,图10C示出了来自相机1的信息通信期间,图10D示出了来自相机2的信息通信期间。如图10A、图10B所示,平板PC21仅具有1个系统的通信线路,平板PC21与相机1、相机2之间,不能同时进行通信,而以分时方式进行通信。
[0093] 为了在平板PC21与相机1、相机2之间进行通信,在图10的(a)、(b)的通信期间的起始处设定通信建立处理期间。如图10的(c)、(d)所示,在该通信建立处理期间之后,进行图像数据的通信,因此,图10的(c)中示出的信息通信期间的周期成为平板PC21的显示画面28a中的相机1的显示周期。同样,图10的(d)所示的信息通信期间的周期成为相机2的显示周期。在显示迁移中,在显示画面28a中同时显示相机1、相机2。此时,由于控制为同时显示通过与相机1的通信取得的图像和通过与相机2的通信取得的图像,因此,作为画面显示,各照相机的显示周期的1/2的周期成为显示画面28a中的显示更新周期。
[0094] 在进行该迁移时,平板PC21的控制部25使处理转移到步骤S2。
[0095] 在本实施方式中,在协作摄影开始时,在接下来的步骤S42中,进行两照相机通信,来进行功能或视场角的判定,并从正接收当前摄像图像的一个照相机取得摄影定时的信息。
[0096] 现在,如图7A、图7B所示,假设从显示来自相机1和相机2中的相机1的摄像图像的状态转移到显示相机1和相机2这两者的摄像图像的状态。首先,平板PC21接收相机1的摄像图像并进行显示。在该情况下,控制部25从相机1取得与摄影定时相关的信息。此外,控制部25在步骤S4中请求实时取景图像。关于通过这样的定时信息的管理而确保图像的流畅性的情况,将在后面记述。
[0097] 相机1的控制部13在步骤S5中,与视场角和规格信息一同发送与定时相关的信息。此外,控制部13针对实时取景图像的发送请求,在步骤S36中发送用于实时取景图像或定时匹配的信息。
[0098] 平板PC21的控制部25在步骤S43中向相机1请求发送焦点位置信息。相机1发送焦点位置信息Dp1。平板PC21的控制部25接收焦点位置信息Dp1,并使用该信息向相机2发送关于对焦位置的信息。
[0099] 控制部25通过这些步骤S42、S4、S43,能够基于与相机1的摄像相关的各种信息来控制相机2的摄像,能够平稳地进行照相机切换。当在步骤S8中产生照相机切换时,控制部25在步骤S44中判定是否为即时变更。即时变更是表示:在进行照相机切换时,不显示相机1和相机2的两个摄像图像,而直接从图7A的状态变更到图7D的状态。在不是即时变更的情况下,控制部25在步骤S45中,以使来自2台照相机的图像的大小逐渐一致的方式进行显示。
[0100] 图11A~图11H是用于说明步骤S45的迁移时的通信的时序图。图11A示出了对在进行迁移时以分时方式进行通信的相机1、相机2的通信切换进行控制的切换信号,图11B、图11C分别示出了相机1通信、相机2通信,图11D、图11E分别示出了相机1的信息通信、摄像和传送,图11F、图11G分别示出了相机2的信息通信、摄像和传送,图11H示出了相机1、相机2的显示更新。此外,图11A~图11H中的脉冲形状的部分不表示实际的通信期间,而表示通信定时。
[0101] 控制部25向照相机用通信部22给出切换信号,使相机1通信和相机2通信进行切换。如图11A、图11B、图11D所示,从相机1通信的期间的开始起的规定期间为通信建立处理期间,在经过了该期间后,在相机1与平板PC21之间进行规格或视场角等信息的通信。接下来,进行相机1的摄像,并将摄像图像发送给平板PC21。
[0102] 在迁移中,各照相机保持摄像图像,以比摄影时间短的时间进行发送,由此,在以分时方式发送相机1、相机2这两者的图像数据的情况下,也能够发送相机1、相机2的全部摄像图像。此外,在图11E中,针对这样的高速传送的状态,以在1次通信期间进行多次摄像数据发送那样的显示方式示出,但各摄像数据的发送是连续的,且发送率可适当设定。此外,在摄像数据中,例如还包含基于像面相位差法进行的自动对焦用的像素数据的发送(虚线部分)。
[0103] 如图11A、图11C、图11F、图11G所示,相机2通信也与相机1通信相同,在不进行相机1通信的期间中,在相机2与平板PC21之间进行信息及图像的发送。
[0104] 图11的(h)示出了显示画面的显示更新,即使在进行相机1和平板PC21之间的通信时,也显示来自相机1和相机2的摄像图像。在该情况下,在显示控制部77中,例如,将来自相机1的摄像图像缩小处理为图7B、图7C所示的大小而暂时存储,对之后得到的来自相机2的摄像图像同样进行缩小处理,然后与所述暂时存储的相机1的缩小图像进行合成,形成显示图像,由此,同时进行显示。同样,即使在进行相机2和平板PC21之间的通信时,也显示来自相机1和相机2的摄像图像。显示控制部77还可以在进行缩小处理之外,还进行剪裁或视场角的调整。
[0105] 在图11D、图11F的信息通信中,不仅从照相机侧向平板PC21发送与视场角、对焦相关的信息及与摄影定时相关的信息,还从平板PC21向照相机侧进行信息发送这些信息。例如,在将来自之前进行摄像图像显示的相机1的摄影定时的信息发送给平板PC21后,平板PC21基于该信息,将用于规定相机2的摄影定时的信息发送给相机2。由此,能够连续地控制从相机1到相机2的摄影定时,防止在从相机1转移到相机2的摄像图像时产生丢帧、帧重复或显示定时的偏差等。即,使各照相机的图像帧的取得定时一致,各照相机变得如同具有两个视点的1个照相机。
[0106] 此外,与第1实施方式同样地,通过控制视场角和剪裁,能够以相同的尺寸显示来自相机1的摄像图像和来自相机2的摄像图像,能够进行平稳的迁移。
[0107] 图12A~图12F是示出即时变更时的动作的时序图。图12A、图12B分别示出了即时变更时的相机1通信、相机2通信,图12C、图12D分别示出了相机1的摄像、传送和显示定时,图12E、图12F分别示出了相机2的摄像、传送和显示定时。
[0108] 如图12A、图12C所示,在控制部25向通信部22指示开始与相机1的通信后,在规定的通信建立处理期间之后,开始与相机1的通信,传送相机1的摄像图像。如图12D所示,该图像在进行传送后在显示画面28a中显示。
[0109] 在进行从显示相机1的摄像图像转为显示相机2的摄像图像的即时切换的情况下,控制部25向通信部22指示开始与相机2的通信。自该开始起,在规定的通信建立处理期间之后,开始与相机2的通信、传送相机2的摄像图像。
[0110] 在该情况下,如图12D~图12E所示,产生不从相机1、相机2这双方发送摄像图像的期间。因此,控制部25在该期间中,保持相机1的摄像图像并反复在显示画面28a上显示,直到能够显示来自相机2的摄像图像为止。由此,能够在显示画面28a上连续地显示被摄体。即,能够随着摄像的切换(handoff)而无延迟地平稳地进行显示的切换。
[0111] 这样,在本实施方式中,得到与第1实施方式相同的效果,并且,在平板PC与照相机仅能1对1进行通信的情况下,平板PC以分时方式与两照相机进行通信,并且,将与一方的照相机的摄影相关的信息发送给另一方的照相机而控制摄像,由此,能够连续地显示来自各照相机的摄像图像,能够平稳地切换图像。此处,使一方的照相机的摄像定时与另一方一致,但也可以控制为:平板PC对双方指定定时来进行同步。此外,在能够显示来自相机2的摄像图像之前反复进行显示的情况下,也可以使显示以淡入/淡出的方式进行切换。如果没有这样细致的控制,则会产生慢动作或快进等不连续感。
[0112] (第3实施方式)
[0113] 图13是示出本发明的第3实施方式的框图。此外,图14是用于说明第3实施方式的外观的说明图。在图13中,对与图2相同的构成要素标注同一编号而省略说明。
[0114] 在本实施方式中,作为2台摄像部,采用了具有内置照相机的智能手机和安装在该智能手机的壳体上的镜头式照相机的例子。本实施方式能够与第1实施方式同样地进行例如图7A~图7D所示的协作显示,例如,在智能手机的显示画面上显示与图7A~图7D相同的图像。
[0115] 在图13中,镜头式照相机11具有与图2相同的结构。构成智能手机71的照相机用通信部72、记录部74、控制部75、操作部76、显示控制部77、显示部78和剪裁处理部79的结构分别与构成图2的平板PC21的照相机用通信部22、记录部24、控制部25、操作部26、显示控制部27、显示部28和剪裁处理部29相同。此外,智能手机71中的内置照相机81由与镜头式照相机
11的摄像部12和控制部13相同的结构的摄像部82和控制部83构成。
[0116] 在图14中,在智能手机71的壳体71a上安装有安装器具32L,在安装器具32L的安装部33L上安装有镜头式照相机11。此外,在智能手机71的内置照相机81中,摄像部82拍摄经由设置在壳体71a的背面的镜头85入射的被摄体的光学像,将摄像输出输出到控制部75。
[0117] 在本实施方式中,内置照相机81的控制部83与控制部75之间进行与摄像相关的信息的收发。即,控制部75不利用照相机用通信部72进行通信而能够取得与内置照相机81的摄像相关的信息,因此,仅在照相机用通信部72与镜头式照相机11之间进行通信即可。
[0118] 接下来,参照图15和图16A~图16C,对这样构成的实施方式的动作进行说明。图15是示出在本发明的第3实施方式中采用的动作流程的流程图。图15是用于说明智能手机71的控制的图,在图15中,对与图9相同的步骤标注同一编号而省略说明。此外,在本实施方式中,镜头式照相机11的动作与第2实施方式相同。
[0119] 现在,如图7A、图7B所示,假设从显示来自相机1和相机2中的相机1的摄像图像的状态转移到显示相机1和相机2这两者的摄像图像的状态。在该情况下中,在本实施方式中,设相机1为内置照相机81、相机2为镜头式照相机11来进行说明。
[0120] 智能手机71的控制部75显示作为相机1的内置照相机81的摄像图像。在该情况下,控制部25向作为相机1的内置照相机81指示摄影定时等、或从内置照相机81直接取得摄影定时的信息,在与内置照相机81之间的信息的收发中不需要照相机用通信部72。因此,照相机用通信部72可以专用于与镜头式照相机11的通信。控制部75经由照相机用通信部72,将内置照相机81的摄影定时的信息等提供给镜头式照相机11(步骤S52)。控制部75在步骤S4中,从外部的镜头式照相机11请求实时取景图像。
[0121] 接下来,控制部75在步骤S53中,进行来自相机1的摄像图像与来自相机2的摄像图像的相似度判定,在步骤S54中,根据相似度产生警告。通过进行判定相似度,能够判定是否在两个照相机中正在以相同的摄影状态拍摄被摄体。在相似度较高的情况下,可以判定为能够从相机1平稳地切换到相机2。相反,在相似度较低的情况下,可以判定为不能从相机1平稳地切换到相机2。因此,控制部25根据相似度产生警告,由此,能够向用户进行用于从相机1的摄像图像平稳地切换到相机2的摄像图像的操作辅助。此外,在本实施方式中,也可以采用与上述各实施方式的步骤S6、S7相同的方法。通过这样的摄像部切换,能够简单进行具有变化的摄影及确认。
[0122] 图16A~图16C是用于说明迁移时的通信的时序图。图16A示出了迁移时的与相机2的通信期间,图16B示出了从内置照相机81的取得信息的定时,图16C示出了与镜头式照相机11的信息通信。
[0123] 如上所述,在本实施方式中,照相机用通信部72仅与镜头式照相机11之间进行通信即可,智能手机71与镜头式照相机11能够连续地进行通信。
[0124] 如图16A、图16B所示,和与镜头式照相机11的通信期间无关地,进行从内置照相机81的信息取得。在开始与镜头式照相机11的通信起的规定的通信建立处理期间之后,与镜头式照相机11之间进行信息通信。
[0125] 在该情况下,能够将内置照相机81的摄影定时等信息提供给镜头式照相机11,与来自内置照相机81的摄像图像连续地取得来自镜头式照相机11的摄像图像并进行显示。
[0126] 使进行摄影的各帧的定时一致等其它作用与第2实施方式相同。
[0127] 此外,在本发明的各实施方式中,使用数字照相机作为用于进行摄影的设备而进行了说明,但作为照相机,也可以是数字单反照相机、紧凑型数码相机、或者摄像机、电影摄影机这样的动态图像用的照相机,此外,当然也可以是便携电话或智能手机等便携信息终端(PDA:Personal Digital Assist:个人数字助理)等中内置的照相机。此外,也可以是内窥镜、显微镜这样的产业用、医疗用光学设备,或者监视照相机、车载用照相机、台式照相机,例如也可以是安装在电视接收机或个人计算机等中的照相机。
[0128] 本发明不限于上述各实施方式,在实施阶段中,在不脱离其主旨的范围内,可以使构成要素变形来实现。此外,也可以通过适当组合上述各实施方式中公开的多个构成要素来构成各种发明。例如,也可以去除实施方式所示的全部构成要素中的几个构成要素。此外,也可以适当组合不同的实施方式中的构成要素。
[0129] 此外,为了方便,使用“首先”、“接下来”等,对专利请求的范围、详细说明书和附图中的动作流程进行了说明,但这并不表示必须按照该顺序进行实施。此外,不言而喻,关于构成这些动作流程的各步骤,可适当省略对发明没有实质影响的部分。
[0130] 此外,在此处说明的技术中,主要根据流程图说明的控制及功能大多可以利用程序进行设定,通过使计算机读取该程序并执行,能够实现上述控制及功能。关于该程序,能够将其整体或一部分作为计算机程序产品而记录或存储在软盘、CD-ROM等非易失性存储器等可移动介质、硬盘或易失性存储器等存储介质中,在提供产品时,能够经由可移动介质或通信线路进行发布或提供。利用者经由通信网络下载该程序并安装到计算机中,或从记录介质安装到计算机中,由此,能够容易地实现本实施方式的显示设备和显示方法。